图像处理方法、显示设备和检查系统技术方案

确定将三维网格变换为二维全景坐标的系数，该三维网格近似三维模型的至少一部分，该三维模型包括目标对象的至少一部分并且从多个二维图像生成。根据第一图像，指定从与二维全景坐标的一部分对应的多个二维图像确定的第一图像上的第一位置、以及要投影到二维全景坐标上的注释。确定与该注释到二维全景坐标上的投影对应的第二位置。将注释叠加在通过将第一图像投影到二维全景坐标上而获得的第二图像上。确定与第一位置到第三图像上的投影对应的第三位置，并且将注释投影并叠加在第三图像上的第三位置处。

【技术实现步骤摘要】
【国外来华专利技术】图像处理方法、显示设备和检查系统
本专利技术涉及图像处理方法、显示设备和检查系统。
技术介绍
当检查比人类大得多的三维对象(诸如建筑物结构)时，需要使用遥控机器人等拍摄检查对象的特写照片，并且需要由地面上的检查员使用拍摄到的、已对其执行了定位的图像进行检查工作。相应地，已知一种技术，该技术使用多个拍摄到的图像来创建三维模型，并且与三维模型和拍摄到的图像相关联地存储并显示用户输入的注释。在专利文献1中，公开了一种技术，其中，用户在二维图像上选择的对象(例如，边界框)和用户输入的内容(例如，注释)被投影在三维模型上，并且这些对象和内容被反映在通过拍摄相同的三维位置而获得的其他二维图像中并被显示在其上。根据专利文献1，用户在观看二维图像时能够在从多个图像创建的三维模型中创建三维对象的注释。
技术实现思路
[技术问题]然而，在传统技术中使用三维模型创建注释的方法中，需要从各个方向浏览三维模型以便理解整个图像，因此存在一个问题在于一览性(perspicuity)低。即使专利文献1也没有消除一览性低的问题。本专利技术是有鉴于上述问题而完成的，并且其目的在于能够容易地观看与三维模型上指定的位置相关联的本文档来自技高网...

【技术保护点】
1.一种图像处理方法，包括：从多个二维图像生成包含目标对象的至少一部分的三维模型；通过三维网格近似所述三维模型的至少一部分；确定将所述三维网格变换为二维全景坐标的系数；从与所述二维全景坐标的一部分对应的多个二维图像中确定第一图像；根据所述第一图像，指定要投影到所述二维全景坐标上的内容和所述第一图像上的第一位置；确定与所述内容到所述二维全景坐标上的投影对应的第二位置；将所述第二位置和所述内容彼此相关联地存储；将所述内容作为注释叠加在通过将所述第一图像投影到所述二维全景坐标上而获得的第二图像上；从所述多个二维图像确定第三图像；确定与所述第一位置到所述第三图像上的投影对应的第三位置；以及将所述内容投...

【技术特征摘要】
【国外来华专利技术】2016.03.09 JP 2016-046322;2016.11.08 JP 2016-217781.一种图像处理方法，包括：从多个二维图像生成包含目标对象的至少一部分的三维模型；通过三维网格近似所述三维模型的至少一部分；确定将所述三维网格变换为二维全景坐标的系数；从与所述二维全景坐标的一部分对应的多个二维图像中确定第一图像；根据所述第一图像，指定要投影到所述二维全景坐标上的内容和所述第一图像上的第一位置；确定与所述内容到所述二维全景坐标上的投影对应的第二位置；将所述第二位置和所述内容彼此相关联地存储；将所述内容作为注释叠加在通过将所述第一图像投影到所述二维全景坐标上而获得的第二图像上；从所述多个二维图像确定第三图像；确定与所述第一位置到所述第三图像上的投影对应的第三位置；以及将所述内容投影在所述第三图像上的所述第三位置处，以叠加所述内容作为注释。2.根据权利要求1所述的图像处理方法，其中，在确定所述第三图像时，基于多个捕获图像的成像顺序来确定所述第三图像，所述多个捕获图像均是所述多个二维图像中的二维图像。3.根据权利要求1所述的图像处理方法，其中，在确定所述第三图像时，基于多个捕获图像的空间位置来确定所述第三图像，所述多个捕获图像均是所述多个二维图像中的二维图像。4.根据权利要求1所述的图像处理方法，其中，在确定所述第三图像时，基于对于用户指定的位置到所述多个二维图像的坐标上的投影的一组投影位置中的至少一个、以及所述多个二维图像上的投影位置的周边的一组分辨率，并且基于所述用户指定的位置来确定所述第三图像，所述用户指定的位置根据用户操作对于所述全景坐标而被指定。5.根据权利要求1所述的图像处理方法，其中，在通过所述三维网格近似时，生成可展开面的三维网格。6.根据权利要求1所述的图像处理方法，其中，在通过所述三维网格近似时，生成平面的三维网格。7.根据权利要求1所述的图像处理方法，其中，在通过所述三维网格近似时，生成圆柱面的三维网格。8.根据权利要求1所述的图像处理方法，其中，在通过所述三维网格近似时，生成二次曲面的三维网格。9.根据权利要求1所述的图像处理方法，其中，在通过所述三维网格近似时，生成球面的三维网格。10.根据权利要求1所述的图像处理方法，其中，在确定所述变换系数时，构成所述三维网格的相应子平面被变换为二维坐标，使得从法线方向观看的子平面的形状和相对面积被保留。11.根据权利要求1所述的图像处理方法，其中，在确定所述变换系数时，使用单应矩阵计算所述变换系数。12.根据权利要求1所述的图像处理方法，其中，确定所述变换系数包括根据用户操作将所述三维网格移动到特定方向。13.根据权利要求12所述的图像处理方法，其中，在确定所述变换系数时，基于所述三维网格的相应子平面的法向矢量的加权求和来确定所述特定方向。14.根据权利要求1所述的图像处理方法，还包括：根据所述第二图像，指定要投影到所述第一图像上的内容和所述二维全景坐标上的第四位置；将所述第四位置和所述内容彼此相关联地存储；确定与所述内容到所述第一图像上的投影对应的投影位置；以及...

【专利技术属性】
技术研发人员：绪方惟高，冈谷贵之，
申请(专利权)人：株式会社理光，国立大学法人东北大学，
类型：发明
国别省市：日本,JP