工人终端、视频处理方法、及视频处理程序与流程

1.本公开涉及工人终端、视频处理方法、及视频处理程序。


背景技术：

2.在进行设备的安装、修理、检查、拆除等的工作现场，通过利用移动终端等的工人终端(即，工人所使用的终端)，可改善工作效率。例如，藉由使用工人终端对工作现场的状况进行拍摄，并将视频传输至远程管理员，工人可实时接收适当的远程辅助(支援)(例如，语音(声音)指示)，由此可高效地进行工作。
3.[引证文件]
[0004]
[专利文件]
[0005]
[专利文件1](日本)特开2020-53760号公报
[0006]
[专利文件2](日本)特开2018-160795号公报


技术实现要素：

[0007]
[要解决的技术问题]
[0008]
然而，视频的传输需要通信成本。为此，当使用工人终端时，需要减少传输时的通信量。另一方面，为了在工作现场接收适当的远程支援，就传输的视频而言，还需要维持一定水平的图像质量。
[0009]
本公开的目的在于，当利用工人终端进行视频的传输时，不仅可维持图像质量，而且还可减少通信量。
[0010]
[技术方案]
[0011]
本公开的第1方式的工人终端根据视频与从远程进行辅助的辅助装置连接，并对所述视频进行编码和传输，所述视频是藉由在工作现场对包括工人所做的设备的安装、修理、检查、及拆除中的任一个的工作进行拍摄而得的视频，所述工人终端具有：
[0012]
对视频进行拍摄的相机；
[0013]
对由所述相机拍摄到的视频进行识别处理以确定目标区域的确定部；及
[0014]
加工部(也称处理部)，当在所述视频中确定到了目标区域的情况下，对所述视频进行处理，使得传输时的每单位面积的数据量在目标区域和目标区域之外的区域之间不同。
[0015]
根据本公开的第1方式，当利用工人终端对视频进行传输时，可维持图像质量，并可减少通信量。
[0016]
此外，本公开的第2方式为第1方式所述的工人终端，其中，
[0017]
所述加工部获取用于处理所述视频的多个参数组中的1个参数组，该1个参数组中为目标区域和目标区域之外的区域指定(规定/定义)了不同的参数，当在所述视频中确定到了目标区域的情况下，藉由在目标区域和目标区域之外的区域之间切换参数而对所述视频进行处理。
[0018]
此外，本公开的第3方式为第2方式所述的工人终端，还具有：
[0019]
保存部，对在所述识别处理中用于识别目标的信息进行保存，
[0020]
其中，当在所述识别处理中识别到了所述目标的情况下，所述确定部将所述目标的区域确定为所述目标区域。
[0021]
此外，本公开的第4方式为第3方式所述的工人终端，其中，
[0022]
所述保存部与在所述识别处理中用于识别所述目标的信息相关联地保存物理量，该物理量用于指定目标的周围区域，
[0023]
当在所述识别处理中识别到了所述目标的情况下，所述确定部将包括所述目标和所述目标的周围区域的区域确定为所述目标区域。
[0024]
此外，本公开的第5方式为第1至4中的任一方式所述的工人终端，其中，
[0025]
所述加工部对所述视频进行处理，使得目标区域之外的区域的传输时的每单位面积的数据量小于目标区域的传输时的每单位面积的数据量。
[0026]
此外，本公开的第6方式为第2方式所述的工人终端，还具有：
[0027]
用于获取拍摄模式的拍摄模式获取部，
[0028]
其中，所述加工部根据所述拍摄模式获取所述1个参数组。
[0029]
此外，本公开的第7方式为第6方式所述的工人终端，其中，
[0030]
所述加工部根据工作内容、通信时间上限值、及分配通信量中的至少1个以上获取所述1个参数组。
[0031]
此外，本公开的第8方式为第7方式所述的工人终端，其中，
[0032]
所述确定部还对所述视频的表示工作内容的种类的场景进行确定，
[0033]
所述加工部还获取为每个场景定义了不同的参数的所述1个参数组，并藉由按确定到的每个场景来切换参数而对所述视频进行处理。
[0034]
此外，本公开的第9方式为第8方式所述的工人终端，其中，
[0035]
所述确定部藉由参照为了基于所述视频确定各场景而按每个场景预先确定的条件或藉由接收用于确定各场景的输入信息来对所述视频的场景进行确定。
[0036]
此外，本公开的第10方式为第9方式所述的工人终端，其中，
[0037]
所述确定部藉由参照按每个场景预先确定的图像信息并判断所述视频中是否包含任一个图像信息来对所述视频的场景进行确定。
[0038]
此外，本公开的第11方式为第9方式所述的工人终端，其中，
[0039]
所述确定部藉由判断所接收到的所述输入信息是否与预先确定的场景信息中的任一个相对应来对所述视频的场景进行确定。
[0040]
此外，本公开的第12方式为第1方式所述的工人终端，其中，
[0041]
所述目标区域之外的区域包含
[0042]
在所述视频中确定到了目标区域的帧的所述目标区域之外的区域；及
[0043]
在所述视频中没有确定到目标区域的帧的整个区域中的至少任一个。
[0044]
此外，本公开的第13方式为第12方式所述的工人终端，其中，
[0045]
所述加工部
[0046]
藉由从确定到了所述目标区域的帧中提取目标区域而对所述视频进行处理；或
[0047]
藉由使确定到了所述目标区域的帧中的目标区域之外的区域的分辨率低于目标
区域的分辨率而对所述视频进行处理；或
[0048]
藉由从确定到了所述目标区域的帧中提取目标区域并与目标区域之外的区域的预定的静止图像组合而对所述视频进行处理；或
[0049]
藉由对确定到了所述目标区域的帧中的目标区域之外的区域的量化值以低于目标区域的量化值的方式进行编码而对所述视频进行处理。
[0050]
此外，本公开的第14方式为第12方式所述的工人终端，其中，
[0051]
所述加工部
[0052]
藉由对没有确定到所述目标区域的帧进行稀化处理而对所述视频进行处理；或
[0053]
藉由使没有确定到所述目标区域的帧的分辨率低于确定到了目标区域的帧的目标区域的分辨率而对所述视频进行处理；或
[0054]
藉由将没有确定到所述目标区域的帧置换为预定的静止图像而对所述视频进行处理；或
[0055]
藉由对没有确定到所述目标区域的帧的量化值以低于确定到了目标区域的帧的目标区域的量化值的方式进行编码而对所述视频进行处理。
[0056]
此外，本公开的第15方式为第8方式所述的工人终端，其中，
[0057]
所述加工部
[0058]
藉由按所确定到的每个场景改变帧率而对所述视频进行处理；或
[0059]
藉由对所述视频以按所确定到的每个场景改变关键帧间隔的方式进行编码而对所述视频进行处理。
[0060]
此外，本公开的第16方式为第6方式所述的工人终端，其中，
[0061]
所述拍摄模式获取部通过经由网络进行接收或通过接收工人的输入来获取所述拍摄模式。
[0062]
此外，本公开的第17方式为第2方式所述的工人终端，其中，
[0063]
所述加工部通过经由网络进行接收或通过接收工人的选择并从预先保存的多个参数组中进行提取来获取所述1个参数组。
[0064]
此外，本公开的第18方式为第7方式所述的工人终端，还具有：
[0065]
监视部，根据所述通信时间上限值或所述分配通信量对通信时间或通信量进行监视，
[0066]
其中，在通信时间超过了所述通信时间上限值的情况或通信量超过了所述分配通信量的情况下，所述监视部进行控制以输出警告或使传输中断并对编码了的视频进行保存。
[0067]
此外，本公开的第19方式为第18的方式所述的工人终端，还具有：
[0068]
变更部，在通信时间超过了所述通信时间上限值的情况或通信量超过了所述分配通信量的情况下对所述多个参数组进行变更。
[0069]
此外，本公开的第20方式为第18方式所述的工人终端，还具有：
[0070]
予测部，在通信时间超过了所述通信时间上限值的情况或通信量超过了所述分配通信量的情况下对追加的通信时间或追加的通信量进行予测。
[0071]
另外，本公开的第21方式的视频处理方法为工人终端的视频处理方法，所述工人终端根据藉由在工作现场对包括工人所做的设备的安装、修理、检查、及拆除中的任一个的
工作进行拍摄而得的视频，与从远程进行辅助的辅助装置连接，并对视频进行编码和传输，所述视频处理方法具有：
[0072]
确定步骤，对由用于对视频进行拍摄的相机所拍摄到的视频进行识别处理，以确定目标区域；及
[0073]
处理步骤，当在所述视频中确定到了目标区域的情况下，对所述视频进行处理，使得传输时的每单位面积的数据量在目标区域和目标区域之外的区域之间不同。
[0074]
根据本公开的第21方式，当传输用于接收针对工作现场的远程辅助的视频时，可维持图像质量，并可减少通信量。
[0075]
另外，本公开的第22方式的视频处理程序使工人终端的计算机执行如下步骤，其中，所述工人终端根据藉由在工作现场对包括工人所做的设备的安装、修理、检查、及拆除中的任一个的工作进行拍摄而得的视频，与从远程进行辅助的辅助装置连接，并对视频进行编码和传输，所述步骤为：
[0076]
确定步骤，对由用于拍摄视频的相机所拍摄到的视频进行识别处理，以对目标区域进行确定；及
[0077]
处理步骤，当在所述视频中确定到了目标区域的情况下，对所述视频进行处理，使得传输时的每单位面积的数据量在目标区域和目标区域之外的区域之间不同。
[0078]
根据本公开的第22方式，当传输用于接收针对工作现场的远程辅助的视频时，不仅可维持图像质量，而且还可减少通信量。
附图说明
[0079]
[图1]图1是远程辅助系统的系统构成的一例的示意图。
[0080]
[图2]图2是工人终端的硬件构成的一例的示意图。
[0081]
[图3]图3是工人终端的功能构成的一例的示意图。
[0082]
[图4]图4是参数保存部中保存的参数组的一例的示意图。
[0083]
[图5]图5是加工部的功能构成的细节的示意图。
[0084]
[图6]图6是预处理部的预处理的具体示例的示意图。
[0085]
[图7]图7是编码器部的编码处理的具体示例的示意图。
[0086]
[图8]图8是各情况下的工人终端的操作示例的示意图。
[0087]
[图9]图9是视频处理的流程的流程图。
[0088]
[图10]图10是加工处理的流程的流程图。
[0089]
[图11]图11是通信控制处理的流程的流程图。
具体实施方式
[0090]
下面参见附图对各实施方式进行说明。需要说明的是，本说明书和附图中，对具有实质相同的功能构成的构成要素赋予了相同的符号，藉此对重复的说明进行了省略。
[0091]
[第1实施方式]
[0092]
《远程辅助系统的系统构成》
[0093]
首先，对具备第1实施方式的工人终端的远程辅助系统的系统构成进行说明。图1是远程辅助系统的系统构成的一例的示意图。
[0094]
如图1所示，远程辅助系统100具有工人终端110和管理员终端120。远程辅助系统100中，工人终端110和管理员终端120以相互间可进行通信的方式经由网络130进行连接。
[0095]
工人终端110是在进行设备的安装、修理、检查、拆除等的工作现场所使用的移动终端。图1中，符号141表示工人151在工作现场进行实地调查时使用工人终端110的情况。
[0096]
如符号141所示，在工作内容＝实地调查的情况下，工人151到达大楼后，经过公用区域和私人区域，前往对设备(本实施方式中为空调机)进行更新(进行拆除和安装)的目标(对象)区域。此时，工人151一边使用工人终端110进行拍摄(摄影)，一边向管理员153进行开始了实地调查的汇报。
[0097]
接着，针对需要对设备进行更新的目标区域和不需要对设备进行更新的非目标区域，工人151一边接收来自管理员153的语音指示，一边使用工人终端110进行拍摄。
[0098]
然后，工人151经过私人区域和公用区域走出大楼。此时，工人151一边使用工人终端110进行拍摄，一边向管理员153进行结束了实地调查的汇报。
[0099]
这样，工人151在从实地调查开始至结束的期间内持续进行拍摄，由此，管理员153可一边浏览工人151所拍摄的视频，一边根据需要向工人151发出语音指示。
[0100]
类似地，图1中，符号142表示工人152在工作现场进行设备维护时使用工人终端110的情况。
[0101]
如符号142所示，在工作内容＝设备维护的情况下，工人152首先移动至设置有作为维护对象的设备的位置。此时，工人152一边使用工人终端110进行拍摄，一边向管理员153进行开始了设备维护的汇报。
[0102]
接着，工人152对作为维护对象的设备的外观和内部进行检查。此时，工人152一边接收来自管理员153的语音指示，一边使用工人终端110对作为维护对象的设备的外观和内部进行拍摄。
[0103]
然后，工人152确定应更换的部件，前往仓库等提取所确定的部件，并再次移动至设置有作为维护对象的设备的位置。此时，工人152一边使用工人终端110进行拍摄，一边向管理员153进行工作进展情况的汇报。
[0104]
接着，工人152一边接收来自管理员153的语音指示，一边在作为维护对象的设备中更换所确定的部件，并对作为维护对象的设备的操作进行确认。此时，工人152使用工人终端110进行拍摄，并向管理员153汇报部件更换和操作确认的工作情况。
[0105]
之后，工人152离开作为维护对象的设备，并结束工作。此时，工人152一边使用工人终端110进行拍摄，一边向管理员153进行结束了设备维护的汇报。
[0106]
这样，工人152在从设备维护开始至结束的期间内持续进行拍摄，藉此，管理员153可一边浏览工人152所拍摄的视频，一边根据需要向工人152发出语音指示。
[0107]
另一方面，管理员终端120是辅助装置的一例，经由网络130接收工人151、152等在工作现场所拍摄的视频的编码数据。此外，管理员终端120对接收到的编码数据进行解码，并将其显示给管理员153。据此，管理员153可实时地对工人151、152所拍摄的视频进行浏览。
[0108]
此外，管理员终端120获取管理员153响应于视频的显示而输入的语音指示，并将其经由网络130传输至工人终端110。据此，管理员153可向工人151、152进行基于语音指示的适当的辅助。
[0109]
需要说明的是，图1的示例中示出了当进行实地调查和设备维护时工人151、152使用工人终端110的情况，但是，工人151、152等使用工人终端110的情况并不限定于这些情况。例如，在工作现场进行设备检查和施工支持(support)时也可使用工人终端110。
[0110]
《工人终端的硬件构成》
[0111]
接下来，对工人终端110的硬件构成进行说明。图2是工人终端的硬件构成的一例的示意图。
[0112]
如图2所示，工人终端110具有处理器201、存储器202、及辅助存储装置203。此外，工人终端110还具有操作装置204、显示装置205、摄像装置206、通信装置207、语音输入装置208、及语音输出装置209。需要说明的是，工人终端110的各硬件相互间经由总线210进行了连接。
[0113]
处理器201具有cpu(central processing unit)等的各种运算装置。处理器201将各种程序(例如，后述的视频处理程序等)读取至存储器202上，并对其进行执行。
[0114]
存储器202具有rom(read only memory)、ram(random access memory)等的主存储装置。处理器201和存储器202形成所谓的计算机，处理器201执行读取至存储器202上的各种程序，由此工人终端110实现各种功能。
[0115]
辅助存储装置203保存各种程序和处理器201执行各种程序时所使用的各种数据。例如，后述的参数保存部360可在辅助存储装置203中实现。
[0116]
操作装置204接收工人151、152等的针对工人终端110的操作指示。显示装置205将工人终端110的各种处理的结果显示给工人151、152等。
[0117]
摄像装置206为相机，通过对工作现场进行拍摄来生成视频。通信装置207经由网络130与管理员终端120进行通信。需要说明的是，辅助存储装置203中安装的各种程序和各种数据例如可经由通信装置207从网络130下载而被安装。
[0118]
语音输入装置208为麦克风，用于接收工人151、152等的语音输入。语音输出装置209为扬声器，例如，可输出来自管理员153的语音指示。
[0119]
《工人终端的功能构成》
[0120]
接下来，对工人终端110的功能构成进行说明。图3是工人终端的功能构成的一例的示意图。如上所述，工人终端110中安装有视频处理程序，藉由执行该程序，工人终端110作为相机控制部310、加工控制部(也称处理控制部)320、加工部(也称处理部)330、发送部340、及监视部350而发挥功能。
[0121]
相机控制部310对摄像装置206的操作进行控制。工人151、152等输入了开始拍摄的指示后，相机控制部310开始进行由摄像装置206所拍摄的视频的获取。此外，相机控制部310将获取到的视频通知给加工部330。另外，工人151、152等输入了结束拍摄的指示后，相机控制部310结束从摄像装置206的视频的获取。
[0122]
加工控制部320是拍摄模式获取部的一例，通过接收工人151、152等的输入或通过经由网络130接收来自管理员153的指示来获取拍摄模式。拍摄模式与工人151、152等在工作现场使用工人终端110的情况(实地调查、设备维护、设备检查、施工支持等)进行了关联。
[0123]
此外，加工控制部320通过接收工人151、152的输入或通过经由网络130接收来自管理员153的指示来获取通信时间的上限值和分配通信量(即，被分配的通信量)。
[0124]
另外，加工控制部320根据获取到的拍摄模式从参数保存部360内预先保存的多个
参数组中读取预定的参数组。需要说明的是，参数保存部360内保存的参数组中定义有对视频进行各种加工处理时所需的参数的组合。
[0125]
通过配置为根据拍摄模式读取预定的参数组，可基于是否与工人151、152等在工作现场使用工人终端110的情况中的任一个相对应来对参数组进行切换。
[0126]
需要说明的是，基于拍摄模式而读取的预定的参数组中包含通信时间上限值、分配通信量等的不同的多个参数组。
[0127]
为此，加工控制部320可被构成为，还从基于拍摄模式而读取的预定的参数组中选择与所获取的通信时间上限值、分配通信量等相对应的1个参数组。通过配置为根据通信时间上限值或分配通信量选择参数组，加工部330能够利用与可使用的通信时间或通信量相对应的参数组来进行加工处理。
[0128]
需要说明的是，参数组中例如定义有如下参数，即：
[0129]
·
用于从视频中识别目标的信息(为了对按每个工作内容的种类而预先确定的拍摄目标进行识别而使用的目标信息)；
[0130]
·
用于对视频的表示工作内容的种类的场景进行确定的预先设定的条件(场景条件)；及
[0131]
·
参数(每个加工处理的种类的参数)。
[0132]
此外，加工控制部320将定义有目标信息、场景条件、及参数的参数组通知给加工部330，同时将所获取的通信时间上限值和分配通信量通知给监视部350。
[0133]
加工部330针对从相机控制部310通知的视频使用从加工控制部320通知的参数组进行各种加工处理以生成编码数据。具体而言，加工部330对视频进行各种加工处理，使得视频中包含的目标的区域(目标区域)的每单位面积的数据量大于目标区域之外的区域的每单位面积的数据量，由此生成编码数据。此外，加工部330还将生成的编码数据通知给发送部340。需要说明的是，这里所说的目标区域之外的区域包含确定到了目标区域的帧的目标区域之外的区域和没有确定到目标区域的帧的整个区域中的任一个。
[0134]
发送部340将从加工部330通知的编码数据经由网络130传输至管理员终端120。
[0135]
监视部350例如按每个月对发送部340传输编码数据时的通信时间进行监视。此外，监视部350例如按每个月对发送部340传输的编码数据的通信量进行监视。另外，监视部350还将监视期间内的通信时间和通信量与从加工控制部320通知的通信时间上限值和分配通信量进行比较。在监视期间内的通信时间和通信量满足预定的条件的情况下，监视部350可向工人151、152等发出警告、中断编码数据的传输等。
[0136]
《参数组的说明》
[0137]
接下来，对参数保存部360中保存的多个参数组进行说明。图4是参数保存部内保存的参数组的一例的示意图。
[0138]
如图4所示，参数保存部360中按每个拍摄模式并按每个分配通信量和通信时间上限值保存有参数组。
[0139]
其中，参数组410为在作为拍摄模式输入了“拍摄模式1”、作为分配通信量输入了“xx1”、及作为通信时间上限值输入了“yy1”的情况而读取的参数组。“拍摄模式1”是进行设备检查时所选择的模式，基本上是藉由高分辨率和低帧率而进行拍摄的模式。
[0140]
需要说明的是，参数组411为在作为拍摄模式输入了“拍摄模式1”、作为分配通信
量输入了“xx1
’”
、及作为通信时间上限值输入了“yy1
’”
的情况下而读取的参数组。即使拍摄模式相同，在分配通信量和通信时间上限值不同的情况下也读取不同的参数组。
[0141]
例如，参数组411为以与参数组410相比通信量减少了的方式而定义有各参数的参数组。为此，当进行设备检查时，在工人151、152等为了抑制通信量和通信时间而将“xx1
’”
输入为分配通信量并将“yy1
’”
输入为通信时间上限值的情况下，读取参数组411。
[0142]
此外，参数组420为在作为拍摄模式输入了“拍摄模式2”、作为分配通信量输入了“xx2”、及作为通信时间上限值输入了“yy2”的情况下而读取的参数组。“拍摄模式2”是进行实地调查时所选择的模式，基本上是藉由低分辨率和高帧率而进行拍摄的模式。
[0143]
需要说明的是，参数组421为作为拍摄模式输入了“拍摄模式2”、作为分配通信量输入了“xx2
’”
、及作为通信时间上限值输入了“yy2
’”
的情况下而读取的参数组。即使拍摄模式相同，在分配通信量和通信时间上限值不同的情况下也读取不同的参数组。
[0144]
例如，参数组421为以与参数组420相比通信量减少了的方式而定义有各参数的参数组。为此，当进行实地调查时，在工人151、152等为了抑制通信量和通信时间而将“xx2
’”
输入为分配通信量并将“yy2
’”
输入为通信时间上限值的情况下，读取参数组421。
[0145]
此外，参数组430为作为拍摄模式输入了“拍摄模式3”、作为分配通信量输入了“xx2”、及作为通信时间上限值输入了“yy2”的情况下而读取的参数组。“拍摄模式3”是进行施工支持时所选择的模式，基本上是藉由高分辨率和高帧率而进行拍摄的模式。
[0146]
需要说明的是，参数组431为作为拍摄模式输入了“拍摄模式3”、作为分配通信量输入了“xx3
’”
、及作为通信时间上限值输入了“yy3
’”
的情况下而读取的参数组。即使拍摄模式相同，在分配通信量和通信时间上限值不同的情况下也读取不同的参数组。
[0147]
例如，参数组431为以与参数组430相比通信量减少了的方式而定义有各参数的参数组。为此，当进行施工支持时，在工人151、152等为了抑制通信量和通信时间而将“xx3
’”
输入为分配通信量并将“yy3
’”
输入为通信时间上限值的情况下，读取参数组431。
[0148]
此外，参数组440为作为拍摄模式输入了“拍摄模式4”、作为分配通信量输入了“xx4”、及作为通信时间上限值输入了“yy4”的情况下而读取的参数组。“拍摄模式4”是进行设备维护时所选择的模式，基本上是藉由中等分辨率和中等帧率进行拍摄的模式。
[0149]
需要说明的是，参数组441为作为拍摄模式输入了“拍摄模式4”、作为分配通信量输入了“xx4
’”
、及作为通信时间上限值输入了“yy4
’”
的情况下而读取的参数组。即使拍摄模式相同，在分配通信量和通信时间上限值不同的情况下也读取不同的参数组。
[0150]
例如，参数组441为以与参数组440相比通信量减少了的方式而定义有各参数的参数组。为此，在进行设备维护时，在工人151、152等为了抑制通信量和通信时间而将“xx4
’”
输入为分配通信量并将“yy4
’”
输入为通信时间上限值的情况下，读取参数组441。
[0151]
此外，如图4所示，参数组410～440、411～441中，作为信息的项目，分别包含“场景(工作内容的种类)”、“目标”、“参数”、“分配通信量”、及“通信时间上限值”。
[0152]“场景(工作内容的种类)”中保存与具体的场景(工作内容的种类)有关的信息(和为了确定场景而预先设定的条件(场景条件))。例如，在进行设备检查的情况下的具体的工作内容的种类包括至设置有作为检查对象的设备的位置的移动、作为检查对象的设备的检查等。故而，“场景(工作内容的种类)”中保存「移动期间」和「检查期间」(需要说明的是，图4的示例中，对场景条件进行了省略)(注：说明书、附图等中，「」等同于
“”
)。
[0153]“目标”中保存为了在工人于各场景下所拍摄的视频中识别目标而使用的信息(目标信息)。例如，在用于设备检查的移动期间内所拍摄的视频中，不存在应被识别的目标，故“目标”的栏为空栏。
[0154]
另一方面，就在设备检查期间内所拍摄的视频而言，需要对作为检查对象的空调机和不作为检查对象的空调机之外的设备进行识别以对它们进行区分。故而，「检查期间」的“目标”中保存用于识别「空调机」的信息和用于识别「空调机之外」的信息。
[0155]“参数”中还包含“分辨率”、“帧率”、“关键帧间隔”、及“量化值”。
[0156]“分辨率”中保存在加工部330对视频所进行的各种加工处理中当对分辨率进行变更时所设定的分辨率。图4的示例中示出了，在进行设备检查的情况下，分辨率藉由按每个“场景(工作内容的种类)”并按每个“目标”进行切换而被设定了不同的值(参数)。具体而言，示出了，在进行设备检查的情况下，在「移动期间」内所拍摄的视频中作为分辨率设定了「r5」。此外，还示出了，在「检查期间」内所拍摄的视频中，针对「空调机」的区域，作为分辨率设定了「r10」，并且，针对「空调机之外」的区域，作为分辨率设定了「r5」。
[0157]“帧率”中保存在加工部330对视频所进行的各种加工处理中当对帧率进行变更时所设定的帧率。图4的示例中示出了，在进行设备检查的情况下，帧率藉由按每个“场景(工作内容的种类)”进行切换而被设定了不同的值(参数)。具体而言，示出了，在进行设备检查的情况下，在「移动期间」内所拍摄的视频中作为帧率设定了「fr3」，并且，在「检查期间」内所拍摄的视频中作为帧率设定了「fr3」。
[0158]“关键帧间隔”中保存在加工部330对视频所进行的各种加工处理中当对关键帧间隔进行变更以进行编码处理时所设定的关键帧间隔。图4的示例中示出了，在进行设备检查的情况下，关键帧间隔藉由按每个“场景(工作内容的种类)”进行切换而被设定了不同的值(参数)。具体而言，示出了，在进行设备检查的情况下，针对在「移动期间」内所拍摄的视频，作为关键帧间隔设定了「ki2」，藉此进行编码处理。此外，还示出了，针对在「检查期间」内所拍摄的视频，作为关键帧间隔设定了「ki1」，由此进行编码处理。
[0159]“量化值”中保存在加工部330对视频所进行的各种加工处理中当对量化值进行变更以进行编码处理时所设定的量化值。图4的示例中示出了，在进行设备检查的情况下，量化值藉由按每个“场景(工作内容的种类)”并按每个“目标”进行切换而被设定了不同的值(参数)。具体而言，示出了，在进行设备检查的情况下，针对在「移动期间」内所拍摄的视频，作为量化值设定了「q5」，藉此进行编码处理。此外，还示出了，在「检查期间」内所拍摄的视频中，针对「空调机」的区域，作为量化值设定了「q1」，据此进行编码处理，并且，针对「空调机之外」的区域，作为量化值设定了「q3」，藉此进行编码处理。
[0160]“分配通信量”中保存当在每个拍摄模式下对视频进行拍摄并将其传输至管理员终端120时按每个拍摄模式而分配的通信量的变化。图4的示例中示出了，在进行设备检查的情况下的“分配通信量”中具有「xx1」和「xx1’」的2个种类。
[0161]“通信时间上限值”中保存当在每个拍摄模式下对视频进行拍摄并将其传输至管理员终端120时按每个拍摄模式而分配的通信时间的上限值的变化。图4的示例中示出了，在进行设备检查的情况下的“通信时间上限值”中具有「yy1」和「yy1’」的2个种类。
[0162]
需要说明的是，如上所述，“参数”的“分辨率”、“帧率”、“关键帧间隔”、及“量化值”中保存有与“分配通信量”和“通信时间上限值”相对应的值。
[0163]
《加工部的功能构成的细节》
[0164]
接下来，对工人终端110的加工部330的功能构成的细节进行说明。图5是加工部的功能构成的细节的示意图。
[0165]
如图5所示，加工部330还具有图像识别部510、预处理部520、及编码器部(也称编码部)530。
[0166]
从相机控制部310通知了视频后，图像识别部510以帧为单位对被通知的视频进行图像识别处理，判断视频中是否包含目标，并对包含目标的区域进行判定。需要说明的是，图像识别部510根据目标信息判断视频中是否包含目标。此外，图像识别部510将包含目标的区域作为目标区域信息通知给预处理部520和编码器部530。
[0167]
另外，图像识别部510对由获取到的视频所表示的场景(工作内容的种类)进行确定。需要说明的是，图像识别部510根据场景条件对由视频所表示的场景进行确定。此外，图像识别部510将所确定的场景作为场景确定结果通知给预处理部520和编码器部530。
[0168]
另外，图像识别部510将获取到的视频通知给预处理部520。
[0169]
预处理部520从图像识别部510获取到视频后对获取到的视频进行各种预处理。预处理部520参照从加工控制部320通知的参数组对与目标区域信息和场景确定结果相对应的参数(分辨率和帧率)进行确定。此外，预处理部520对所确定的参数进行设定并进行预处理。
[0170]
编码器部530获取到被预处理部520进行了预处理的视频后对所获取的视频进行编码处理。编码器部530参照从加工控制部320通知的参数组对与目标区域信息和场景确定结果相对应的参数(关键帧间隔和量化值)进行确定。此外，编码器部530对所确定的参数进行设定并进行编码处理。
[0171]
《预处理部的预处理的具体示例》
[0172]
接下来，对预处理部520的预处理的具体示例进行说明。图6是预处理部的预处理的具体示例的示意图。如图6所示，预处理部520对从图像识别部510通知的视频进行预处理，使得目标区域之外的区域的每单位面积的数据量小于目标区域的每单位面积的数据量。
[0173]
预处理部520所进行的预处理包括下述处理中的任一个，即：
[0174]
(1)在被图像识别部510判断为包含目标，且包含目标的区域作为目标区域信息而被通知了的情况下进行的处理；
[0175]
(2)在被图像识别部510判断为不包含目标，且目标区域信息没有被通知的情况下进行的处理；及
[0176]
(3)无论被图像识别部510判断为是包含目标还是不包含目标都进行的共同的处理。
[0177]
下面依次进行说明。需要说明的是，具体进行下述预处理中的哪个处理是根据被通知的参数组以及目标区域信息和场景确定结果决定的。
[0178]
(1)被判断为包含目标的情况(目标区域被确定到了的情况)
[0179]
(1-1)提取处理
[0180]
在被图像识别部510判断为包含目标，且包含目标的区域作为目标区域信息而被通知了的情况下，预处理部520进行从视频中提取目标区域(删除目标区域之外的区域)的
提取处理，并生成预处理后的视频。
[0181]
在图6的具体示例的情况下，视频的帧610中包括1个目标(这里，为了便于说明，用五角形图形进行了表示)和目标之外的2个物体(这里，为了便于说明，用四边形图形和圆形图形进行了表示)。需要说明的是，包围1个目标的粗线矩形表示图像识别部510已经将其识别为目标。
[0182]
如图6的具体示例所示，预处理部520对视频的帧610进行提取处理，由此，可从视频的帧610中提取目标区域，并生成预处理后的视频611。
[0183]
(1-2)分辨率变更处理
[0184]
在被图像识别部510判断为包含目标，且目标区域信息被通知了的情况下，预处理部520对视频进行分辨率变更处理，该分辨率变更处理将目标区域和目标区域之外的区域的分辨率变更为彼此不同的分辨率，并生成预处理后的视频。具体而言，预处理部520进行分辨率变更处理，使得「目标区域的分辨率》目标区域之外的区域的分辨率」，并生成预处理后的视频。
[0185]
在图6的具体示例的情况下，视频的帧620中包含1个目标和目标之外的2个物体。
[0186]
如图6的具体示例所示，预处理部520对视频的帧620进行分辨率变更处理，据此生成目标区域和目标区域之外的区域的分辨率被变更为彼此不同的分辨率的预处理后的视频621。预处理后的视频621中，阴影区域(目标区域之外的区域)表示其分辨率低于白色区域(目标区域)的分辨率。
[0187]
需要说明的是，图6的示例中，对以变为「目标区域的分辨率》目标区域之外的区域的分辨率」的方式执行分辨率变更处理从而生成预处理后的视频的情况进行了说明，但是，分辨率变更处理的处理方法并不限定于此。
[0188]
例如，也能以变为「(目标区域+周围区域)的分辨率》(目标区域+周围区域)之外的区域的分辨率」的方式执行分辨率变更处理从而生成预处理后的视频。需要说明的是，当进行该分辨率变更处理时，参数组中与用于识别目标的信息相关联地定义有用于指定目标的周围区域的物理量。据此，预处理部520通过参照参数组即可确定上述周围区域的大小(size)。
[0189]
(1-3)组合(结合)处理
[0190]
在被图像识别部510判断为包含目标，且包含目标的区域作为目标区域信息被通知了的情况下，预处理部520从视频中提取目标区域，并进行与预定的静止图像组合的组合处理，由此生成预处理后的视频。
[0191]
在图6的具体示例的情况下，视频的帧630中包含1个目标和目标之外的2个物体。
[0192]
如图6的具体示例所示，预处理部520对视频的帧630进行组合处理，即，从视频的帧630中提取目标区域，并与静止图像(图6的示例中为白色的背景图像)进行组合，藉此生成预处理后的视频631。
[0193]
(2)被判断为不包含目标的情况(目标区域没有被确定到的情况)
[0194]
(2-1)稀化处理(注：日文原文为“間引
き
処理”)
[0195]
在被图像识别部510判断为不包含目标，且目标区域信息被通知了的情况下，预处理部520进行从视频中删除预定的帧的稀化处理，由此生成预处理后的视频。
[0196]
在图6的具体示例的情况下，视频的帧的组640中仅包含目标之外的2个物体(这
里，为了便于说明，用四边形图形和圆形图形进行了表示)，不包括目标(例如，五角形图形)。
[0197]
如图6的具体示例所示，预处理部520对视频的帧的组640进行稀化处理，据此，从视频的帧的组640中删除预定的帧，并生成预处理后的视频的帧的组641。
[0198]
(2-2)整体分辨率变更处理
[0199]
在被图像识别部510判断为不包含目标，且目标区域信息没有被通知的情况下，预处理部520对视频的各帧进行使帧的整体分辨率发生变化的整体分辨率变更处理，据此生成预处理后的视频。
[0200]
具体而言，预处理部520以变为「包含目标的帧的目标区域的分辨率》不包含目标的帧的分辨率」的方式进行分辨率变更处理，由此生成预处理后的视频。
[0201]
在图6的具体示例的情况下，视频的帧的组650中仅包含目标之外的2个物体，不包含目标。
[0202]
如图6的具体示例所示，预处理部520对视频的帧的组650进行整体分辨率变更处理，藉此对视频的帧的组650的帧的整体分辨率进行变更，并生成预处理后的视频的帧的组651。预处理后的视频的帧的组651中，带阴影的各帧表示其分辨率低于被判断为包含目标的帧的目标区域的分辨率。
[0203]
(2-3)置换处理
[0204]
在被图像识别部510判断为不包含目标，且目标区域信息被通知了的情况下，预处理部520进行将视频的各帧置换为预定的静止图像的置换处理，由此生成预处理后的视频。
[0205]
在图6的具体示例的情况下，视频的帧的组660中仅包含目标之外的2个物体，不包含目标。
[0206]
如图6的具体示例所示，预处理部520对视频的帧的组660进行置换处理，藉此将视频的帧的组660都置换为静止图像，并生成预处理后的视频的帧的组661。
[0207]
(3)共同的处理
[0208]
无论被图像识别部510判断为是包含目标还是不包含目标，预处理部520都从视频中删除预定的帧，由此进行使帧率降低的帧率降低处理，并生成预处理后的视频。
[0209]
需要说明的是，图6中，对帧率降低处理的具体示例进行了省略，但是，就帧率降低处理而言，例如可为与针对视频的帧的组640的稀化处理相同的具体示例。
[0210]
《编码部的编码处理的具体示例》
[0211]
接下来，对编码器部530的编码处理的具体示例进行说明。图7是编码部的编码处理的具体示例的示意图。如图7所示，编码器部530对获取到的视频或预处理后的视频进行编码处理，使得目标区域之外的区域的每单位面积的数据量小于目标区域的每单位面积的数据量。
[0212]
编码器部530所进行的编码处理包括下述处理中的任一个，即：
[0213]
(1)在被图像识别部510判断为包含目标，且包含目标的区域作为目标区域信息而被通知了的情况下进行的处理；
[0214]
(2)在被图像识别部510判断为不包含目标，且目标区域信息没有被通知的情况下进行的处理；及
[0215]
(3)无论被图像识别部510判断为是包含目标还是不包含目标都进行的共同的处
理。
[0216]
下面依次进行说明(需要说明的是，下面，为了简化说明，以对视频进行处理的情况为例进行说明)。此外，具体进行下述编码处理中的哪个处理是根据被通知的参数组以及目标区域信息和场景确定结果决定的。
[0217]
(1)被判断为包含目标的情况(目标区域被确定到了的情况)
[0218]
在被图像识别部510判断为包含目标，且目标区域信息被通知了的情况下，编码器部530对视频使用在目标区域和目标区域之外的区域之间不同的量化值进行编码处理，由此生成编码数据。
[0219]
具体而言，使用「目标区域的量化值》目标区域之外的区域的量化值」这样的量化值进行编码处理，藉此生成编码数据。
[0220]
在图7的具体示例的情况下，视频的帧710中包含1个目标和目标之外的2个物体。
[0221]
如图7的具体示例所示，编码器部530对视频的帧710使用在目标区域和目标区域之外的区域之间不同的量化值进行编码处理，由此生成编码数据711。编码数据711中，阴影区域(目标区域之外的区域)表示其藉由使用小于白色区域(目标区域)的量化值而被进行了编码处理。
[0222]
(2)被判断为不包含目标的情况(目标区域没有被确定到的情况)
[0223]
在被图像识别部510判断为不包含目标，且目标区域信息没有被通知的情况下，编码器部530对视频的各帧以改变帧的整体量化值的方式进行编码处理，由此生成编码数据。
[0224]
具体而言，使用「包含目标的帧的目标区域的量化值》不包含目标的帧的量化值」这样的量化值进行编码处理，藉此生成编码数据。
[0225]
在图7的具体示例的情况下，视频的帧720中仅包含目标之外的2个物体，不包含目标。
[0226]
如图7的具体示例所示，编码器部530对视频的帧720以改变帧的整体量化值的方式进行编码处理，由此生成编码数据721。编码数据721中，带阴影的帧表示其使用低于包含目标的帧的目标区域的量化值的量化值而被进行了编码处理。
[0227]
(3)共同的处理
[0228]
无论被图像识别部510判断为是包含目标还是不包含目标，编码器部530都对视频的各帧以改变关健帧间隔的方式进行编码处理，藉此生成编码数据。
[0229]
图7的具体示例中，视频的帧的组730、731即粗线框的帧表示其为关健帧。
[0230]
其中，视频的帧的组730表示对关键帧间隔进行变更之前的关键帧间隔。另一方面，视频的帧的组731表示对关键帧间隔进行了变更之后的关键帧间隔。
[0231]
这样，编码器部530通过增加关键帧间隔对视频的帧的组进行编码处理。
[0232]
《各情况下的工人终端的操作示例》
[0233]
接下来，对在工作现场使用工人终端110的各情况(这里为使用工人终端110进行实地调查的情况和进行设备维护的情况)下的工人终端110的操作示例进行说明。图8是各情况下的工人终端的操作示例的示意图。
[0234]
如基于图1所说明的那样，符号141表示工人151在工作现场进行实地调查时使用工人终端110的情况。
[0235]
图8的示例中示出了，在进行实地调查的情况下，到达大楼时由工人终端110所拍
摄的视频被进行了降低分辨率的预处理，然后以降低量化值的方式被进行了编码处理，由此作为中等质量的编码数据而被传输。
[0236]
类似地，还示出了，在公用区域的移动期间内由工人终端110所拍摄的视频被进行了降低分辨率的预处理，然后以降低量化值的方式被进行了编码处理，据此作为中等质量的编码数据而被传输。
[0237]
此外，还示出了，在私人区域的移动期间内由工人终端110所拍摄的视频被进行了将各帧置换为静止图像的预处理，然后以降低量化值的方式被进行了编码处理，由此作为低质量的编码数据而被传输。
[0238]
另外，还示出了，在更新目标区域内由工人终端110所拍摄的视频被进行了降低分辨率的预处理，然后以降低量化值的方式被进行了编码处理，据此作为中等质量的编码数据而被传输。
[0239]
此外，还示出了，在非目标区域内由工人终端110所拍摄的视频被进行了将各帧置换为静止图像的预处理，然后以降低量化值的方式被进行了编码处理，由此作为低质量的编码数据而被传输。
[0240]
另外，还示出了，在私人区域的移动期间内由工人终端110所拍摄的视频被进行了将各帧置换为静止图像的预处理，然后以降低量化值的方式被进行了编码处理，据此作为低质量的编码数据而被传输。
[0241]
此外，还示出了，在公用区域的移动期间内由工人终端110所拍摄的视频被进行了降低分辨率的预处理，然后以降低量化值的方式被进行了编码处理，由此作为中等质量的编码数据而被传输。
[0242]
另一方面，符号142表示工人152在工作现场进行设备维护时使用工人终端110的情况。
[0243]
图8的示例中示出了，在进行设备维护的情况下，在移动期间内由工人终端110所拍摄的视频被进行了降低帧的整体分辨率的预处理，据此作为低质量的编码数据而被传输。
[0244]
此外，还示出了，就在进行外观检查的期间内由工人终端110所拍摄的视频而言，室外机的区域之外的区域被进行了降低分辨率的预处理，然后以降低量化值的方式被进行了编码处理，由此作为高品质的编码数据而被传输。
[0245]
另外，还示出了，就在进行内部检查的期间内由工人终端110所拍摄的视频而言，被进行了提取特定部件的区域并与静止图像组合的预处理，然后背景区域以降低量化值的方式被进行了编码处理，据此作为高品质的编码数据而被传输。
[0246]
此外，还示出了，在移动期间内由工人终端110所拍摄的视频被进行了降低帧的整体分辨率的预处理和降低帧率的预处理，由此作为低质量的编码数据而被传输。
[0247]
另外，还示出了，就在进行部件更换的期间内由工人终端110所拍摄的视频而言，被进行了提取特定部件的区域并与静止图像组合的预处理，然后背景区域以降低量化值的方式被进行了编码处理，藉此作为高品质的编码数据而被传输。
[0248]
此外，还示出了，在进行操作确认的期间内由工人终端110所拍摄的视频被进行了降低分辨率的预处理，由此作为中等质量的编码数据而被传输。
[0249]
另外，还示出了，在移动期间内由工人终端110所拍摄的视频被进行了降低帧的整
体分辨率的预处理和降低帧率的预处理，藉此作为低质量的编码数据而被传输。
[0250]
《视频处理的流程》
[0251]
接下来，对工人终端110的视频处理的流程进行说明。图9是表示视频处理的流程的流程图。
[0252]
步骤s901中，加工控制部320接收由工人所进行的拍摄模式的输入。
[0253]
步骤s902中，加工控制部320接收由工人所进行的分配通信量和通信时间上限值的输入。
[0254]
步骤s903中，加工控制部320读取与工人所输入的拍摄模式、分配通信量、及通信时间上限值相对应的参数组，并将其通知给加工部330。
[0255]
步骤s904中，相机控制部310接收由工人所进行的拍摄开始的指示。
[0256]
步骤s905中，相机控制部310开始进行视频的获取。
[0257]
步骤s906中，加工部330对获取到的视频进行加工处理以生成编码数据。需要说明的是，关于加工处理的细节，将在后面结合图10进行详述。
[0258]
步骤s907中，发送部340进行通信控制处理，该通信控制处理对所生成的编码数据进行传输。需要说明的是，关于通信控制处理的细节，将在后面结合图11进行详述。
[0259]
步骤s908中，相机控制部310判断是否结束视频处理。步骤s908中，在判断为不结束视频处理的情况(步骤s908中no(否)的情况)下，返回步骤s905。另一方面，步骤s908中，在判断为结束视频处理的情况(步骤s908中yes(是)的情况)下，结束视频处理。
[0260]
《加工处理的流程》
[0261]
接下来，对图9的步骤s906的加工处理的细节进行说明。图10是表示加工处理的流程的流程图。
[0262]
步骤s1001中，图像识别部510进行针对所获取的视频的图像识别处理。
[0263]
步骤s1002中，图像识别部510将藉由图像识别处理而确定到的目标区域信息和场景确定结果通知给预处理部520和编码器部530。
[0264]
步骤s1003中，预处理部520对视频进行基于参数组、目标区域信息、及场景确定结果的预处理(提取处理、分辨率变更处理、组合处理、稀化处理、整体分辨率变更处理、置换处理等)。
[0265]
步骤s1004中，编码器部530对预处理后的视频进行基于参数组、目标区域信息、及场景确定结果的编码处理，由此生成编码数据。
[0266]
步骤s1005中，发送部340向管理员终端120传输编码数据。
[0267]
《通信控制处理的流程》
[0268]
接下来，对图9的步骤s907的通信控制处理的细节进行说明。图11是表示通信控制处理的流程的流程图。
[0269]
步骤s1101中，监视部350对从发送部340传输给管理员终端120的编码数据的通信量(或通信时间)进行监视。
[0270]
步骤s1102中，监视部350判断发送部340的通信量(或通信时间)是否超过了分配通信量(或通信时间上限值)。
[0271]
步骤s1102中，在判断为发送部340的通信量(或通信时间)没有超过分配通信量(或通信时间上限值)的情况(步骤s1102中no的情况)下，进入步骤s1103。
[0272]
步骤s1103中，监视部350判断发送部340的通信量(或通信时间)是否超过了分配通信量(或通信时间上限值)的预定比率(x％)。步骤s1103中，在判断为没有超过分配通信量(或通信时间上限值)的预定比率(x％)的情况(步骤s1103中no的情况)下，返回图9的步骤s908。
[0273]
另一方面，步骤s1103中，在判断为超过了分配通信量(或通信时间上限值)的预定比率(x％)的情况(步骤s1103中yes的情况)下，进入步骤s1104。
[0274]
步骤s1104中，监视部350判断加工控制部320是否已经向加工部330通知了新的参数组。
[0275]
步骤s1104中，在判断为还没有通知新的参数组的情况(步骤s1104中no的情况)下，进入步骤s1105。
[0276]
步骤s1105中，加工控制部320向加工部330通知了新的参数组后，进入步骤s1106。需要说明的是，加工控制部320指定新的分配通信量(或新的通信时间上限值)，并将与所指定的新的分配通信量(或新的通信时间上限值)相对应的新的参数组通知给加工部330。此情况下，加工控制部320作为对参数进行变更的变更部而发挥功能。
[0277]
另一方面，步骤s1104中，在判断为已经通知了新的参数组的情况(步骤s1104中yes的情况)下，直接进入步骤s1106。
[0278]
步骤s1106中，监视部350向工人告知了可使用的通信量(或通信时间)后，返回图9的步骤s908。
[0279]
另一方面，步骤s1102中，在判断为发送部340的通信量(或通信时间)超过了分配通信量(或通信时间上限值)的情况(步骤s1102中yes的情况)下，进入步骤s1107。
[0280]
步骤s1107中，监视部350向工人151、152等输出警告后，对发送部340的编码数据的传输进行中断(强制结束)，并返回图9的步骤s908。需要说明的是，此情况下，发送部340之后是将由加工部330生成的编码数据保存于预定的保存部，而不是将其传输给管理员终端120。
[0281]
《总结》
[0282]
由上面的描述可知，第1实施方式的工人终端110可执行如下处理，即：
[0283]
·
根据藉由在工作现场对包括工人所做的设备的安装、修理、检查及拆除中的任一个的工作进行拍摄而得的视频与从远程进行辅助的管理员终端连接，并对视频进行编码和传输；
[0284]
·
具有用于对视频进行拍摄的相机，通过对该相机所拍摄的视频进行识别处理来确定目标区域；及
[0285]
·
在视频中确定到了目标区域的情况下，对视频进行处理，使得传输时的每单位面积的数据量在目标区域和目标区域之外的区域之间不同。
[0286]
藉此，根据第1实施方式的工人终端110，当利用工人终端对视频进行传输时，可维持目标区域的图像质量，并可减少通信量。
[0287]
[第2实施方式]
[0288]
上述第1实施方式中，对在工作现场进行实地调查和设备维护时的工人终端110的操作示例进行了说明。然而，在其它情况(设备检查、施工支持等)下，藉由使工人终端110进行类似的操作，也可维持目标区域的图像质量，并可减少通信量。
[0289]
此外，上述第1实施方式中，当图像识别部510进行图像识别处理时，对通过参照按每个场景预先设定的条件(场景条件)来确定场景(工作内容的种类)的情形进行了说明。
[0290]
然而，场景(工作内容的种类)的确定方法并不限定于此，例如，也可根据工人输入工人终端110的输入信息来进行确定。具体而言，工人终端110预先保存用于表示各场景的场景信息，藉由判断工人所输入的输入信息与哪个场景信息相对应，即可对场景进行确定。
[0291]
或者，通过参照按每个场景预先设定的图像信息，并判断视频中包含了其中的哪个图像信息，也可对场景进行确定。
[0292]
另外，上述第1实施方式中，被构成为在工人终端110中配置监视部以对通信量(或通信时间)进行监视。然而，工人终端110中还可配置予测部，例如，可被构成为，在发送部的通信量(或通信时间)超过了分配通信量(或通信时间上限值)的情况下，对追加的通信时间或追加的通信量进行予测。据此，工人151、152等可预先掌握额外发生的成本。
[0293]
此外，上述第1实施方式中，对藉由工人151、152等输入拍摄模式(还藉由输入通信时间上限值或分配通信量)而选择1个参数组的情形进行了说明。然而，也可构成为由工人151、152等直接对1个参数组进行选择。
[0294]
另外，上述第1实施方式中，对参数保存部360是在工人终端110的辅助存储装置203中实现的情形进行了说明。然而，参数保存部360例如也可在管理员终端120的辅助存储装置中实现。此时，工人终端110可经由网络130从管理员终端120获取参数组。
[0295]
上面对实施方式进行了说明，但是，在不脱离权利要求书的主旨和范围的前提下，也可进行各种各样的变形、变更等。
[0296]
本技术主张基于2020年12月23日申请的日本国专利申请第2020-214111号的优先权，并以引用的方式将该日本国专利申请的内容全部援引于本技术。
[0297]
[附图标记说明]
[0298]
100：远程辅助系统110：工人终端
[0299]
120：管理员终端
[0300]
204：操作装置
[0301]
205：显示装置
[0302]
206：摄像装置
[0303]
207：通信装置
[0304]
208：语音输入装置209：语音输出装置310：相机控制部
[0305]
320：加工控制部
[0306]
330：加工部
[0307]
340：发送部
[0308]
350：监视部
[0309]
410～440：参数组
[0310]
411～441：参数组
[0311]
510：图像识别部
[0312]
520：预处理部
[0313]
530：编码部。

技术特征：
1.一种工人终端，根据视频与从远程进行辅助的辅助装置连接，并对所述视频进行编码和传输，所述视频是藉由在工作现场对包括工人所做的设备的安装、修理、检查、及拆除中的任一个的工作进行拍摄而得的视频，所述工人终端具有：相机，对所述视频进行拍摄；确定部，对由所述相机拍摄到的所述视频进行识别处理，以确定目标区域；及处理部，当在所述视频中确定到了目标区域时，对所述视频进行处理，使得传输时的每单位面积的数据量在所述目标区域和所述目标区域之外的区域之间不同。2.如权利要求1所述的工人终端，其中，所述处理部获取用于处理所述视频的多个参数组中的1个参数组，该1个参数组中为所述目标区域和所述目标区域之外的区域定义了不同的参数，当在所述视频中确定到了所述目标区域时，藉由在所述目标区域和所述目标区域之外的区域之间切换参数而对所述视频进行处理。3.如权利要求2所述的工人终端，还具有：保存部，对用于在所述识别处理中识别目标的信息进行保存，其中，当在所述识别处理中识别到了所述目标时，所述确定部将所述目标的区域确定为所述目标区域。4.如权利要求3所述的工人终端，其中，所述保存部与用于在所述识别处理中识别所述目标的信息相关联地保存物理量，该物理量用于指定所述目标的周围区域，当在所述识别处理中识别到了所述目标时，所述确定部将包括所述目标和所述目标的周围区域的区域确定为所述目标区域。5.如权利要求1所述的工人终端，其中，所述处理部对所述视频进行处理，使得所述目标区域之外的区域的传输时的每单位面积的数据量小于所述目标区域的传输时的每单位面积的数据量。6.如权利要求2所述的工人终端，还具有：拍摄模式获取部，获取拍摄模式，其中，所述处理部根据所述拍摄模式获取所述1个参数组。7.如权利要求6所述的工人终端，其中，所述处理部根据工作内容、通信时间上限值、及分配通信量中的至少1个以上获取所述1个参数组。8.如权利要求7所述的工人终端，其中，所述确定部还对所述视频的表示工作内容的种类的场景进行确定，所述处理部还获取为每个场景定义了不同的参数的所述1个参数组，并藉由按所确定的每个场景来切换参数而对所述视频进行处理。9.如权利要求8所述的工人终端，其中，所述确定部通过参照为了基于所述视频确定各场景而按每个场景预先确定的条件或通过接收用于确定各场景的输入信息来对所述视频的场景进行确定。10.如权利要求9所述的工人终端，其中，所述确定部通过参照按每个场景预先确定的图像信息并判断所述视频中是否包含任
一个图像信息来对所述视频的场景进行确定。11.如权利要求9所述的工人终端，其中，所述确定部通过判断接收到的所述输入信息是否与预先确定的场景信息中的任一个相对应来对所述视频的场景进行确定。12.如权利要求1所述的工人终端，其中，所述目标区域之外的区域包括在所述视频中确定到了所述目标区域的帧的所述目标区域之外的区域；及在所述视频中没有确定到目标区域的帧的整个区域中的至少任一个。13.如权利要求12所述的工人终端，其中，所述处理部藉由从确定到了所述目标区域的帧中提取所述目标区域而对所述视频进行处理；藉由使确定到了所述目标区域的帧中的所述目标区域之外的区域的分辨率低于所述目标区域的分辨率而对所述视频进行处理；藉由从确定到了所述目标区域的帧中提取所述目标区域并与所述目标区域之外的区域的预定的静止图像组合而对所述视频进行处理；或藉由对确定到了所述目标区域的帧中的所述目标区域之外的区域的量化值以低于所述目标区域的量化值的方式进行编码而对所述视频进行处理。14.如权利要求12所述的工人终端，其中，所述处理部藉由对没有确定到所述目标区域的帧进行稀化处理而对所述视频进行处理；藉由使没有确定到所述目标区域的帧的分辨率低于确定到了所述目标区域的帧的所述目标区域的分辨率而对所述视频进行处理；藉由将没有确定到所述目标区域的帧置换为预定的静止图像而对所述视频进行处理；或藉由对没有确定到所述目标区域的帧的量化值以低于确定到了所述目标区域的帧的所述目标区域的量化值的方式进行编码而对所述视频进行处理。15.如权利要求8所述的工人终端，其中，所述处理部藉由按所确定的每个场景来改变帧率而对所述视频进行处理；或藉由按所确定的每个场景来改变关键帧间隔并进行编码而对所述视频进行处理。16.如权利要求6所述的工人终端，其中，所述拍摄模式获取部通过经由网络进行接收或通过接收工人的输入来获取所述拍摄模式。17.如权利要求2所述的工人终端，其中，所述处理部通过经由网络进行接收或通过接收工人的选择并从预先保存的多个参数组中进行提取来获取所述1个参数组。18.如权利要求7所述的工人终端，还具有：监视部，根据所述通信时间上限值或所述分配通信量对通信时间或通信量进行监视，
其中，当所述通信时间超过了所述通信时间上限值时或当所述通信量超过了所述分配通信量时，所述监视部进行控制以输出警告或中断传输并对编码了的所述视频进行保存。19.如权利要求18所述的工人终端，还具有：变更部，当所述通信时间超过了所述通信时间上限值时或当所述通信量超过了所述分配通信量时对所述多个参数组进行变更。20.如权利要求18所述的工人终端，还具有：予测部，当所述通信时间超过了所述通信时间上限值时或当所述通信量超过了所述分配通信量时对追加的通信时间或追加的通信量进行予测。21.一种视频处理方法，其为工人终端的视频处理方法，所述工人终端根据视频与从远程进行辅助的辅助装置连接，并对所述视频进行编码和传输，所述视频是藉由在工作现场对包括工人所做的设备的安装、修理、检查、及拆除中的任一个的工作进行拍摄而得的视频，所述视频处理方法具有：确定步骤，对所述视频进行识别处理以确定目标区域，所述视频是由用于对所述视频进行拍摄的相机拍摄到的；及处理步骤，当在所述视频中确定到了所述目标区域时，对所述视频进行处理，使得传输时的每单位面积的数据量在所述目标区域和所述目标区域之外的区域之间不同。22.一种视频处理程序，用于使工人终端的计算机执行步骤，所述工人终端根据视频与从远程进行辅助的辅助装置连接，并对所述视频进行编码和传输，所述视频是藉由在工作现场对包括工人所做的设备的安装、修理、检查、及拆除中的任一个的工作进行拍摄而得的视频，所述步骤为：确定步骤，对所述视频进行识别处理以确定目标区域，所述视频是由用于对所述视频进行拍摄的相机拍摄到的；及处理步骤，当在所述视频中确定到了所述目标区域时，对所述视频进行处理，使得传输时的每单位面积的数据量在所述目标区域和所述目标区域之外的区域之间不同。

技术总结
当利用工人终端对视频进行传输时，可维持图像质量，并可减少通信量。工人终端是一种根据藉由在工作现场对包括工人所做的设备的安装、修理、检查、及拆除中的任一个的工作进行拍摄而得的视频与从远程进行辅助的辅助装置连接，并对视频进行编码和传输的工人终端，其具有：相机，对视频进行拍摄；确定部，对由所述相机拍摄到的视频进行识别处理以确定目标区域；及处理部，当在所述视频中确定到了目标区域的情况下，对所述视频进行处理，使得传输时的每单位面积的数据量在目标区域和目标区域之外的区域之间不同。的区域之间不同。的区域之间不同。


技术研发人员：黑田悠子
受保护的技术使用者：飞睿设备株式会社
技术研发日：2021.12.22
技术公布日：2023/8/24