作业辅助服务器及作业辅助系统技术方案

本发明专利技术提供一种作业辅助服务器及作业辅助系统。能够让远程操作装置的操作员识别被显示在构成远程操作装置的输出接口上的作业机械是哪一远程操作装置的远程操作对象。例如，在构成多个远程操作装置的输出接口上输出通过搭载在作业机械上的拍摄装置取得的表示作业现场情形的第一作业环境图像。对应于来自第一远程操作装置的伴随有识别符的标识图像请求，判定属于通过该识别符识别的协作作业机械的实机图像(Qi)是否包含在第一作业环境图像中。在该实机图像(Qi)属于协作作业机械的情况下，向第一和第二远程操作装置中的至少一方远程操作装置的输出接口输出第一标识图像。“第一标识图像”表示实机图像(Qi)是协作作业机械这一信息。这一信息。这一信息。

【技术实现步骤摘要】
【国外来华专利技术】作业辅助服务器及作业辅助系统


[0001]本专利技术涉及用于辅助使用远程操作装置对作业机械进行远程操作的作业辅助服务器。

技术介绍

[0002]被提出有以下一种远程监视辅助系统用终端装置(例如，参照专利文献1)：该远程监视辅助系统用终端装置用于在巡回于工厂(Plant)内进行检查的作业人员与待机在该作业现场外的人员之间以足够的精度来实现信息共享化。该终端装置具备：用于输入现场的影像数据的影像输入单元；笔(Pen)或鼠标类的输入操作选择单元；用于检测有无获取新的影像的检测单元；用于通过无线与外部进行数据收发的通信控制单元；用于显示输入规定的数据的输入画面的输入输出画面显示单元。
[0003]现有技术文献
[0004]专利文献
[0005]专利文献1：日本特开2005
‑
242830号公报

技术实现思路

[0006]专利技术要解决的课题
[0007]但是，在通过拍摄装置取得的拍摄图像显示于构成远程操作装置的输出接口(图像显示装置)，且在该拍摄图像中映入有多个作业机械的情况下，操作员可能会在该显示图像中的作为操作对象的作业机械与作为非操作对象的周围的作业机械之间产生误认。特别是，在多个操作员分别操作作业机械的情况下，作为其中一个操作员自身的操作对象的本机械与作为其他操作员的操作对象的其他机械需要被各自的操作员所识别，但是难以在多个操作员之间共享相同的识别。这在特别是同一制造商的同一机型的多个作业机械同时显示于输出接口的情况下尤为显著。在该情况下，从执行作为目标的作业的观点来看，使用了基于操作员的误认的远程操作装置的作业机械的动作方式可能成为不恰当的动作方式。
[0008]因此，本专利技术的目的在于提供一种能够让远程操作装置的操作员识别到显示于构成该远程操作装置的输出接口的作业机械是哪一个远程操作装置的远程操作对象的服务器及系统。
[0009]用于解决课题的手段
[0010]本专利技术涉及用于辅助使用了远程操作装置对作业机械进行远程操作的作业辅助服务器。
[0011]本专利技术的作业辅助服务器用于辅助多个作业机械各自的远程操作，其中，所述多个作业机械各自使用了远程操作装置，该作业辅助服务器具备：
[0012]数据库，所述远程操作装置以及作为与该远程操作装置协作的所述作业机械的协作作业机械的各自的识别符与所述协作作业机械的实际空间位置建立关联地存储保持在所述数据库中；
[0013]第一辅助处理元件，其基于与所述多个远程操作装置各自的通信，使所述多个远程操作装置各自的输出接口输出与通过拍摄装置取得的作业现场的拍摄图像对应的作业环境图像；以及
[0014]第二辅助处理元件，其执行下述处理：在基于与所述多个远程操作装置各自的通信而接收到伴随有所述协作作业机械的识别符的标识图像请求时，识别与所述识别符建立关联地存储保持在所述数据库中的所述协作作业机械的实际空间位置，判定所述协作作业机械的实际空间位置是否包含在所述拍摄装置的实际空间拍摄范围内，并在该判定结果为肯定的情况下，使所述多个远程操作装置各自的所述输出接口输出表示所述协作作业机械存在于所述作业环境图像中相当于所述协作作业机械的实际空间位置的指定位置处的标识图像。
[0015]根据具有上述构成的作业辅助服务器，在构成多个远程操作装置的各自的输出接口上输出表示通过拍摄装置取得的作业现场的情形的作业环境图像。根据多个远程操作装置分别发来的伴随有识别符的标识图像请求，判定通过该识别符识别的协作作业机械的实际空间位置是否包含在拍摄装置的实际空间拍摄范围内。在该判定结果为肯定的情况下，在多个远程操作装置各自的输出接口上输出表示有协作作业机械存在的标识图像。由此，能够使多个远程操作装置各自的多个操作员分别识别存在有与作业环境图像中的至少一个远程操作装置协作的协作作业机械。
[0016]因此，能够让多个操作员共通地识别在构成远程操作装置的输出接口上被输出的作业环境图像中存在与一个远程操作装置或者与各个远程操作装置协作的协作作业机械。
[0017]附图的简单说明
[0018]图1是关于作为本专利技术的一实施方式的作业辅助系统的构成的说明图。
[0019]图2是关于远程操作装置的结构的说明图。
[0020]图3是关于作业机械的结构的说明图。
[0021]图4是关于作业辅助系统的第一功能的说明图。
[0022]图5是关于作业辅助系统的第二功能的说明图。
[0023]图6是关于通过搭载在作业机械上的拍摄装置取得的第一作业环境图像的说明图。
[0024]图7是关于通过设置在作业现场的拍摄装置取得的第一作业环境图像的说明图。
[0025]图8是关于俯瞰拍摄图像的说明图。
[0026]图9A是关于第一标识图像的说明图。
[0027]图9B是关于第二标识图像的说明图。
[0028]图10A是关于包括了对象实机的一个第一作业环境图像的说明图。
[0029]图10B是关于包含了对象实机的其他第一作业环境图像的说明图。
[0030]图11是关于搭载在设置于作业现场的作业机械上的拍摄装置的拍摄范围和对象实机的说明图。
具体实施方式
[0031](作业辅助系统的构成)
[0032]图1中所示的作为本专利技术的一个实施方式的作业辅助系统由作业辅助服务器10和
用于对多个作业机械40进行远程操作的多个远程操作装置20构成。作业辅助服务器10、远程操作装置20以及作业机械40构成为可相互进行网络通信。多个远程操作装置20分别也能够构成为可通过与作业辅助服务器10的通信网络不同的网络进行相互通信。
[0033](作业辅助服务器的构成)
[0034]作业辅助服务器10具备数据库102、第一辅助处理元件121和第二辅助处理元件122。数据库102除了存储保持多个作业机械40各自的位置和/或移动轨道之外，还存储保持由作业机械40各自所具备的照相机得到的拍摄图像、向分别操作作业机械40的各个操作员提供的作业环境图像和路径引导图像等。数据库102也可以由与作业辅助服务器10不同的数据库服务器构成。各辅助处理元件由运算处理装置(单核处理器或多核处理器或者构成该处理器的处理器内核)构成，从存储器等存储装置读取必要的数据及软件，并以该数据为对象执行依照该软件的后述的运算处理。
[0035](作业机械的结构)
[0036]作业机械40具备实机控制装置400、实机输入接口41、实机输出接口42、工作机构440以及测位装置460。实机控制装置400由运算处理装置(单核处理器或多核处理器或者构成该处理器的处理器内核)构成，从存储器等存储装置读取必要的数据以及软件，并以该数据为对象执行依照该软件的运算处理。
[0037]作业机械40例如是履带式挖掘机(工程机械)，如图2所示，该履带式挖掘机具备履带式的下部行驶体410以及经由回转机构430可回转地搭载于下部行驶体410的上部回转体420。在上部回转本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种作业辅助服务器，其用于辅助多个作业机械各自的远程操作，其中，所述多个作业机械各自使用了远程操作装置，所述作业辅助服务器的特征在于，具备：数据库，所述远程操作装置以及作为与该远程操作装置协作的所述作业机械的协作作业机械的各自的识别符与所述协作作业机械的实际空间位置建立关联地存储保持在所述数据库中；第一辅助处理元件，其基于与所述多个远程操作装置各自的通信，使所述多个远程操作装置各自的输出接口输出与通过拍摄装置取得的作业现场的拍摄图像对应的作业环境图像；以及第二辅助处理元件，其执行下述处理：在基于与所述多个远程操作装置各自的通信而接收到伴随有所述协作作业机械的识别符的标识图像请求时，识别与所述识别符建立关联地存储保持在所述数据库中的所述协作作业机械的实际空间位置，判定所述协作作业机械的实际空间位置是否包含在所述拍摄装置的实际空间拍摄范围内，并在该判定结果为肯定的情况下，使所述多个远程操作装置各自的所述输出接口输出表示所述协作作业机械存在于所述作业环境图像中相当于所述协作作业机械的实际空间位置的指定位置处的标识图像。2.根据权利要求1所述的作业辅助服务器，其特征在于，所述第二辅助处理元件执行下述选择输出处理：在所述协作作业机械的实际空间位置是否包含于所述拍摄装置的实际空间拍摄范围内的判定结果为否定的情况下，将该协作作业机械的实际空间位置可被包含在实际空间拍摄范围内的所述拍摄装置确定成指定拍摄装置，并使表示所述协作作业机械存在于由所述指定拍摄装置取得的所述作业环境图像中的所述指定位置的所述标识图像输出到所述多个远程操作装置各自的所述输出接口上。3.根据权利要求2所述的作业辅助服务器，其特征在于，所述第二辅助处理元件将搭载于所述多个作业机械中的至少1个作业机械上的拍摄装置确定为所述指定拍摄装置。4.根据权利要求3所述的作业辅助服务器，其特征在于，在无法将搭载在至少1个作业机械上的拍摄装置确定为所述指定拍摄装置的情况下，所述第二辅助处理元件将未搭载在所述...

【专利技术属性】
技术研发人员：佐佐木均，山崎洋一郎，
申请(专利权)人：神钢建机株式会社，
类型：发明
国别省市：