维护支援系统、维护支援方法以及程序技术方案

技术编号:30660410 阅读:27 留言:0更新日期:2021-11-06 08:32
提供一种能够防止维护对象以外的机密信息等的泄露并且摄像条件的限制少的维护支援系统等。维护支援系统(100)具备:具备摄像单元的终端(1);用于以规定的基准点为基准来确定包括维护对象(T)的三维区域(TA)的单元;用于确定初始状态下的摄像单元相对于基准点的位置(矢量A)的单元;用于确定摄像单元的从初始状态起的位置的变化(矢量B)的单元;用于确定以终端进行移动后的移动后状态下的摄像单元为基准的基准点的位置(矢量C),并确定摄像图像中的与三维区域对应的像素区域的单元;用于生成将所述像素区域以外的区域设为不可见所得到的加工图像的单元;以及向维护支援者侧终端发送加工图像的通信单元。端发送加工图像的通信单元。端发送加工图像的通信单元。

【技术实现步骤摘要】
【国外来华专利技术】维护支援系统、维护支援方法以及程序


[0001]本专利技术涉及一种用于支援产业用设备等维护对象的维护作业的维护支援系统、维护支援方法以及程序。本专利技术特别涉及一种能够防止维护对象以外的机密信息等的泄露并且摄像条件的限制少的维护支援系统、维护支援方法以及程序。

技术介绍

[0002]以往,一般来说,在基板处理装置等产业用设备发生故障的情况下,进行如下的应对:位于作为维护对象的产业用设备的设置现场的维护作业者在确认了故障的状况之后,通过电话向维护对象的制造商侧的维护支援者传达故障的状况,维护支援者通过电话对维护作业者发出各种指示。
[0003]在即使进行上述的电话应对也无法解决故障的情况下,进行如下的应对:在制造商侧的熟练作业者的安排空闲的时候,将熟练作业者派遣到维护对象的设置现场。
[0004]在上述的电话应对的情况下,由于是通过口头进行的沟通,因此有时无法将故障的状况很好地传达给维护支援者,或者无法将维护支援者的指示很好地传达给维护作业者,从而无法解决故障。根据需要,有时维护作业者通过电子邮件等向维护支援者发送获取到的维护对象的摄像图像,维护支援者通过确认摄像图像来掌握故障的状况,但是存在对于状况掌握而耗费时间的问题。
[0005]另外,在上述的派遣熟练作业者来应对的情况下,存在难以立即进行应对的问题。
[0006]为了解决如上所述的问题,提出一种维护支援系统:维护作业者佩戴具备摄像单元和头戴式显示器的可穿戴式终端,使用该可穿戴式终端拍摄维护对象,并通过互联网等电信线路向维护支援者侧终端发送该摄像图像(运动图像)。
[0007]然而,有以下担忧:在上述的维护支援系统中,在将摄像图像保持原样地发送给维护支援者侧终端时,摄像图像中包括设置现场的机密信息。存在以下问题:在将包括机密信息的摄像图像发送给维护支援者侧时,维护支援者可能会获知机密信息。
[0008]因此,作为能够防止机密信息的泄露的维护支援系统,例如,提出一种专利文献1中记载的维护支援系统(专利文献1中的图像处理系统)。
[0009]专利文献1中记载的系统是一种图像处理系统(专利文献1的专利技术1),具有:获取部,其获取捕捉到原始区域的原始图像;识别部,其识别所述原始图像中的一个以上的标识符;确定部,其基于由所述识别部识别出的所述一个以上的标识符,来确定捕捉到所述原始区域中的第一区域的第一图像部分、以及捕捉到从所述原始区域中除去所述第一区域后所得的第二区域的第二图像部分中的至少一方;以及生成部,其根据所述确定部的确定结果,来生成包括所述第一图像部分的处理完成图像。
[0010]根据专利文献1中记载的系统,认为能够通过将第一区域设为维护对象,并将第二区域设为维护对象以外的机密信息等,来防止机密信息等的泄露。
[0011]然而,在专利文献1中记载的系统中,存在原始图像中必须包括标识符这一限制。具体来说,在专利文献1中记载有如下内容:列举了将印刷装置300的内部区域(由四个标识
符30围成的矩形区域)设为维护对象的例子,根据佩戴着具备摄像机170的可穿戴式工具100的作业者10的移动而原始区域变动,并获取捕捉到不同原始区域的原始图像171a~173a,但是任何一个原始图像171a~173a中都必须包括标识符30(专利文献1的段落0063~0065、图6、图7等)。
[0012]因此,例如,即使想要接近维护对象来拍摄维护对象的细节部分,也会产生只能在原始图像中包括标识符的范围内接近这样的限制。
[0013]另外,在专利文献1中记载的系统中,构成为以标识符为基准来二维地确定第一图像部分(与维护对象相对应的部分),因此产生必须从与标识符相向的特定的一个方向来拍摄粘贴有标识符的维护对象这一限制。
[0014]现有技术文献
[0015]专利文献
[0016]专利文献1:日本特开2017

211766号公报

技术实现思路

[0017]专利技术要解决的问题
[0018]本专利技术是为了解决上述现有技术的问题而完成的,其目的在于,提供一种能够防止维护对象以外的机密信息等的泄露并且摄像条件的限制少的维护支援系统、维护支援方法以及程序。
[0019]用于解决问题的方案
[0020]为了解决上述问题,本专利技术提供一种维护支援系统,其特征在于,具备:可穿戴式终端,其具备摄像单元且由维护作业者佩戴;第一确定单元,其以由初始状态下的所述摄像单元对维护对象进行拍摄而获取到的摄像图像中的规定的基准点为基准,来确定包括所述维护对象的规定的三维区域;第二确定单元,其确定所述初始状态下的所述摄像单元相对于所述基准点的位置;第三确定单元,其在所述可穿戴式终端进行移动后的移动后状态下,确定所述摄像单元的从所述初始状态起的位置的变化;第四确定单元,其基于由所述第二确定单元确定出的所述初始状态下的所述摄像单元相对于所述基准点的位置、以及由所述第三确定单元确定出的所述移动后状态下的所述摄像单元的从所述初始状态起的位置的变化,来确定以所述移动后状态下的所述摄像单元为基准的所述基准点的位置,并基于所述确定出的基准点的位置以及由所述第一确定单元确定出的所述三维区域,来确定由所述移动后状态下的所述摄像单元获取到的摄像图像中的与所述三维区域对应的有效像素区域;加工图像生成单元,其针对由所述移动后状态下的所述摄像单元获取到的摄像图像,生成将除了由所述第四确定单元确定出的所述有效像素区域以外的掩模像素区域设为不可见所得到的加工图像;以及通信单元,其向维护支援者侧终端发送由所述加工图像生成单元生成的所述加工图像。
[0021]根据本专利技术,第一确定单元以由初始状态下的摄像单元对维护对象进行拍摄而获取到的摄像图像中的规定的基准点为基准,来确定包括维护对象的规定的三维区域。本专利技术的“初始状态下的摄像单元”意指规定的基准点位于摄像图像中的状态下的摄像单元。具体来说,例如,在通过附于维护对象的标记来规定基准点的情况下,初始状态下的摄像单元意指位于能够拍摄到该标记并识别出该标记的位置的摄像单元。
[0022]接着,根据本专利技术,第二确定单元确定初始状态下的摄像单元相对于基准点的位置。即,确定初始状态下的摄像单元相对于基准点的距离以及方向。具体来说,例如,在通过附于维护对象的标记来规定基准点的情况下,以通过标记规定的基准点为基准来确定初始状态下的摄像单元从哪个位置拍摄了标记。
[0023]接着,根据本专利技术,第三确定单元在可穿戴式终端进行移动后的移动后状态下,确定摄像单元的从初始状态起的位置的变化。在维护作业者移动时,维护作业者所佩戴的可穿戴式终端也进行移动,可穿戴式终端所具备的摄像单元也进行移动。此时,由第三确定单元确定移动后状态下的摄像单元的从初始状态起的位置的变化。
[0024]接着,根据本专利技术,第四确定单元首先基于由第二确定单元确定出的初始状态下的摄像单元相对于基准点的位置、以及由第三确定单元确定出的移动后状态下的摄像单元的从初始状态起的位置的变化,来确定以移动后状态下的摄像单元为基本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种维护支援系统,其特征在于,具备:可穿戴式终端,其具备摄像单元且由维护作业者佩戴;第一确定单元,其以由初始状态下的所述摄像单元对维护对象进行拍摄而获取到的摄像图像中的规定的基准点为基准,来确定包括所述维护对象的规定的三维区域;第二确定单元,其确定所述初始状态下的所述摄像单元相对于所述基准点的位置;第三确定单元,其在所述可穿戴式终端进行移动后的移动后状态下,确定所述摄像单元的从所述初始状态起的位置的变化;第四确定单元,其基于由所述第二确定单元确定出的所述初始状态下的所述摄像单元相对于所述基准点的位置、以及由所述第三确定单元确定出的所述移动后状态下的所述摄像单元的从所述初始状态起的位置的变化,来确定以所述移动后状态下的所述摄像单元为基准的所述基准点的位置,并基于所述确定出的基准点的位置以及由所述第一确定单元确定出的所述三维区域,来确定由所述移动后状态下的所述摄像单元获取到的摄像图像中的与所述三维区域对应的有效像素区域;加工图像生成单元,其针对由所述移动后状态下的所述摄像单元获取到的摄像图像,生成将除了由所述第四确定单元确定出的所述有效像素区域以外的掩模像素区域设为不可见所得到的加工图像;以及通信单元,其向维护支援者侧终端发送由所述加工图像生成单元生成的所述加工图像。2.根据权利要求1所述的维护支援系统,其特征在于,所述基准点是通过附于所述维护对象的标记规定的。3.根据权利要求2所述的维护支援系统,其特征在于,所述第二确定单元基于由所述初始状态下的所述摄像单元获取到的摄像图像中的与所述标记对应的像素区域的大小、位置以及形状,来确定所述初始状态下的所述摄像单元相对于所述基准点的位置。4.根据权利要求2所述的维护支援系统,其特征在于,所述第二确定单元具备距离图像传感器,所述距离图像传感器安装于所述可穿戴式终端,且具有与所述摄像单元的视线方向大致相同的视线方向,所述第二确定单元基于由所述距离图像传感器获取到的距离图像中的与所述标记对应的像素区域的灰度值、位置以及形状,来确定所述初始状态下的所述摄像单元相对于所述基准点的位置。5.根据权利要求1~4中的任一项所述的维护支援系统,其特征在于,所述第三确定单元具备安装于所述可穿戴式终端的惯性传感器。6.根据权利要求1~5中的任一项所述的维护支援系统,其特征在于,所述可穿戴式终端具备头戴式显示器,所述头戴式显示器构成为能够在以下两种状态之间进行切换,上述的两种状态是:在所述头戴式显示器中显示所...

【专利技术属性】
技术研发人员:富永裕波部刚士辻冈典洋
申请(专利权)人:SPP科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1