信息处理系统技术方案

提供一种能够将三维模型自动地重叠显示在产品的拍摄图像上的信息处理系统。信息处理系统具备：图像获取部，其获取对象物的拍摄图像；距离获取部，其获取设在对象物上的基准点与摄像头之间的距离；和显示控制部，其基于对象物的设计数据生成对象物的三维模型，基于基准点与摄像头之间的距离调整三维模型的大小及朝向，将三维模型以重叠在拍摄图像上的方式显示于显示部。

【技术实现步骤摘要】
信息处理系统
本技术涉及信息处理系统、信息处理方法、信息处理程序。
技术介绍
以往，在对产品是否按照生产图纸制作进行检查的情况下，由人测定产品的尺寸，并与生产图纸进行对照来确认形状是否有异，从而基于判定基准判定合格与否。但是，对于锅炉等由多个部件构成的产品，检查需要时间，实施所有部位的尺寸测定从现实上来说是不可能的。因此，即使在测定对象外的部位产生了容许范围外的尺寸差，也有可能无法发现。另外，在镜像方式的图纸表述的情况下，生产、检查均花费时间，容易产生错误。在专利文献1中公开了一种将根据产品的设计数据生成的三维模型重叠地显示在该产品的拍摄图像上的系统。现有技术文献专利文献专利文献1：日本特开2019-159375号公报
技术实现思路
但是，在专利文献1的系统中，为了将三维模型相对于产品的拍摄图像准确地重叠显示，需要由使用者一边参照拍摄图像一边利用鼠标和键盘操作来输入摄像头相对于该产品的相对位置姿势(视线位置及视线方向)的信息来作为外部参数。因此，在专利文献1的系统中，无法将产品检查自动化。另外，根据进行输入操作的使用者的熟练度的不同，拍摄图像与三维模型的重叠精度会产生偏差，其结果为，有可能错误检测产品与设计数据的差异。另外，在专利文献1的系统中，在对从物体的拍摄图像提取的直线组和从设计数据生成的直线组进行比较并使其一致时，在制造中途的加工前阶段物体的形状尚未完成的情况下，或在如组装、安装确认时这样当场没有形状完成的物体的状态下，无法进行直线组的比较并使其一致，因此无法将三维模型相对于物体的拍摄图像重叠地显示，从而无法灵活利用三维模型的重叠显示。本技术是考虑以上那样的方面而做出的。本技术的目的在于提供能够将三维模型自动地重叠显示在产品的拍摄图像上的信息处理系统、信息处理方法、信息处理程序。本技术的第1方案的信息处理系统具备：图像获取部，其获取对象物的拍摄图像；距离获取部，其获取设在上述对象物上的基准点与上述摄像头之间的距离；和显示控制部，其基于上述对象物的设计数据生成上述对象物的三维模型，基于上述基准点与摄像头之间的距离调整上述三维模型的大小及朝向，将上述三维模型以重叠在上述拍摄图像上的方式显示于显示部。根据这样的方案，在将三维模型重叠显示在拍摄图像上时，由距离获取部获取设在对象物上的基准点与摄像头之间的距离，由显示控制部基于该基准点与摄像头之间的距离调整三维模型的大小及朝向，因此，即使使用者不输入摄像头相对于对象物的相对位置姿势(视线位置及视线方向)的信息，也能够将三维模型自动地重叠显示在产品的拍摄图像上。另外，由于不需要使用者对外部参数的输入操作，所以重叠精度不会根据进行输入操作的使用者的熟练度的不同而产生偏差，即使是经验值低的使用者，也能够将三维模型高精度地重叠显示在产品的拍摄图像上。而且，即使是在制造中途的加工前阶段物体的形状尚未完成的情况下，或在如组装、安装确认时这样当场没有形状完成的物体的状态下，通过基于设在对象物上的基准点与摄像头之间的距离来调整三维模型的大小及朝向，也能够将三维模型相对于对象物的拍摄图像恰当地重叠显示。本技术的第2方案的信息处理系统在第1方案的信息处理系统中，还具备对上述三维模型的轮廓线和上述拍摄图像的轮廓线进行比较的比较部。本技术的第3方案的信息处理系统在第2方案的信息处理系统中，上述比较部利用从不同角度拍摄到的多张拍摄图像进行轮廓线的比较。本技术的第4方案的信息处理系统在第1～3中任一方案的信息处理系统中，上述基准点的数量为三个以上。本技术的第5方案的信息处理系统在第4方案的信息处理系统中，上述基准点的数量为四个以上。本技术的第6方案的信息处理系统在第1～5中任一方案的信息处理系统中，上述摄像头设于无人机。本技术的第7方案的信息处理系统在第6方案的信息处理系统中，上述无人机沿着上述对象物的焊接线或基于上述设计数据而指定的范围移动。本技术的第8方案的信息处理系统在第1～7中任一方案的信息处理系统中，上述对象物是锅炉或构成锅炉的部件。本技术的第9方案的信息处理系统在第2或第3方案、或引用第2或第3方案的第4～8中任一方案的信息处理系统中，还具备合格与否判定部，该合格与否判定部基于上述比较部的比较结果测定尺寸差，并判定该尺寸差是否在预先确定的容许范围内，在容许范围内的情况下，判定成上述对象物作为单体是合格的，在容许范围外的情况下，判定成上述对象物作为单体是不合格的。本技术的第10方案的信息处理系统在第9方案的信息处理系统中，上述合格与否判定部在对要相互接合的一对对象物分别判定成作为单体是合格的情况下，对根据上述比较部的基于一个对象物的上述拍摄图像得到的比较结果测定出的尺寸差的符号、和根据上述比较部的基于另一个对象物的上述拍摄图像得到的比较结果测定出的尺寸差的符号进行比较，根据符号是相同还是不同来判定作为一对是否合格。在由上述合格与否判定部判定成不合格的情况下，上述显示控制部可以将被判定成不合格的部位以与其他部位不同的样态显示在三维模型上。本技术的第11方案的信息处理系统在第1～10中任一方案的信息处理系统中，上述基准点利用磁力可装拆地安装在上述对象物上。本技术的第12方案的信息处理系统在第1～10中任一方案的信息处理系统中，上述基准点被焊接在上述对象物上而固定。本技术的第13方案的信息处理系统在第1～12中任一方案的信息处理系统中，上述显示控制部基于上述对象物的设计数据生成上述对象物的三维模型，基于上述基准点与摄像头之间的距离对上述三维模型进行镜像转换并且调整上述三维模型的大小及朝向，将上述三维模型以重叠在上述拍摄图像上的方式显示于显示部。本技术的第14方案的信息处理系统在第2或第3方案、或者引用第2或第3方案的第4～13中任一方案的信息处理系统中，还具备具有上述摄像头、上述显示部和存储部的终端装置，在上述存储部中存储反映了基于上述比较部的比较结果测定出的尺寸差的三维模型，上述显示部能够显示上述存储部所存储的三维模型。本技术的第15方案的信息处理系统在第1～14中任一方案的信息处理系统中，在上述显示部中，能够选择以线表示的模式和以实况表示的模式来显示上述三维模型。本技术的第16方案的信息处理系统在第1～15中任一方案的信息处理系统中，还具备第2合格与否判定部，该第2合格与否判定部基于上述对象物的拍摄图像，利用图像识别对上述对象物的焊接外观及/或涂装外观进行合格与否判定。本技术的第17方案的信息处理方法是计算机所执行的信息处理方法，包括：获取对象物的拍摄图像的步骤；获取设在上述对象物上的基准点与上述摄像头之间的距离的步骤；和基于上述对象物的设计数据生成上述对象物的三维模型，基于上述基准点与摄像头之间的距离调整上述三维模型的大小及朝向，将上述三维模型以重叠在上述拍摄图像上的方式显示于显示部的步骤。本技术的第18方案本文档来自技高网...

【技术保护点】
1.一种信息处理系统，其特征在于，具备：/n图像获取部，其获取通过摄像头拍摄到的对象物的拍摄图像；/n距离获取部，其获取设在所述对象物上的基准点与所述摄像头之间的距离；和/n显示控制部，其基于所述对象物的设计数据生成所述对象物的三维模型，基于所述基准点与摄像头之间的距离调整所述三维模型的大小及朝向，将所述三维模型以重叠在所述拍摄图像上的方式显示于显示部。/n

【技术特征摘要】
20191217 JP 2019-2269271.一种信息处理系统，其特征在于，具备：
图像获取部，其获取通过摄像头拍摄到的对象物的拍摄图像；
距离获取部，其获取设在所述对象物上的基准点与所述摄像头之间的距离；和
显示控制部，其基于所述对象物的设计数据生成所述对象物的三维模型，基于所述基准点与摄像头之间的距离调整所述三维模型的大小及朝向，将所述三维模型以重叠在所述拍摄图像上的方式显示于显示部。


2.如权利要求1所述的信息处理系统，其特征在于，
还具备对所述三维模型的轮廓线和所述拍摄图像的轮廓线进行比较的比较部。


3.如权利要求2所述的信息处理系统，其特征在于，
所述比较部利用从不同角度拍摄到的多张拍摄图像进行轮廓线的比较。


4.如权利要求1所述的信息处理系统，其特征在于，
所述基准点的数量为三个以上。


5.如权利要求4所述的信息处理系统，其特征在于，
所述基准点的数量为四个以上。


6.如权利要求1所述的信息处理系统，其特征在于，
所述摄像头设于无人机。


7.如权利要求6所述的信息处理系统，其特征在于，
所述无人机沿着所述对象物的焊接线或基于所述设计数据而指定的范围移动。


8.如权利要求1所述的信息处理系统，其特征在于，
所述对象物是锅炉或构成锅炉的部件。


9.如权利要求2所述的信息处理系统，其特征在于，
还具备合格与否判定部，该合格与否判定部基于所述比较部的比较结果测定尺寸差，并判定该尺寸差是否在预先确定的容许范围内，在容许范围内的情况下，判定成所述对象物作为单体是合格的，在容许范围外的情况下，判定成所述对象物作为单体是不合格的。


10.如...

【专利技术属性】
技术研发人员：有原元史，柴岳繁，
申请(专利权)人：荏原环境工程株式会社，
类型：新型
国别省市：日本;JP