图像处理方法、装置、设备和计算机可读存储介质制造方法及图纸

本公开提供了一种图像处理方法、装置、设备和计算机可读存储介质。该图像处理方法包括：获取目标对象的三维采样点集合、通过图像获取装置获取的关于所述目标对象的第一帧图像和第二帧图像以及与所述第一帧图像对应的、图像获取装置相对于所述目标对象的第一帧位姿；以及基于所述三维采样点集合和第一帧位姿对所述目标对象进行跟踪匹配，以获取与所述第二帧图像对应的、图像获取装置相对于所述目标对象的第二帧位姿。

【技术实现步骤摘要】
图像处理方法、装置、设备和计算机可读存储介质
本公开涉及图像处理领域，更具体地，本公开涉及一种图像处理方法、装置、设备和计算机可读存储介质。
技术介绍
增强现实(AugmentedReality，AR)，指通过计算机系统提供的信息增加用户对现实世界感知的技术，将虚拟的信息应用到真实世界，并将计算机生成的虚拟对象、场景或系统提示信息叠加到真实场景中，从而实现对现实的增强。如何追踪目标对象在三维空间的平移、转动(六自由度追踪)是增强现实应用中的一个核心问题。现有的追踪方法通常需要预先知道目标对象的几何形状，以便准确的判断图像中的点和目标对象上的点的对应关系。然而，并不是所有的目标对象都能预先获取很好的几何形状(比如很多三维重建方法的结果是点云)，因此，对于几何形状的依赖使追踪算法的可用性受到局限，也增加了额外的存储负担。此外，判断图像上的点和目标对象的几何形状上的点的对应关系需要额外的计算开销。
技术实现思路
鉴于上述问题而提出了本公开。本公开提供了一种图像处理方法、装置、设备和计算机可读存储介质。根据本公开的一个方面，本文档来自技高网...

【技术保护点】
1.一种图像处理方法，包括：/n获取目标对象的三维采样点集合、通过图像获取装置获取的关于所述目标对象的第一帧图像和第二帧图像以及与所述第一帧图像对应的、图像获取装置相对于所述目标对象的第一帧位姿；以及/n基于所述三维采样点集合和第一帧位姿对所述目标对象进行跟踪匹配，以获取与所述第二帧图像对应的、图像获取装置相对于所述目标对象的第二帧位姿。/n

【技术特征摘要】
1.一种图像处理方法，包括：
获取目标对象的三维采样点集合、通过图像获取装置获取的关于所述目标对象的第一帧图像和第二帧图像以及与所述第一帧图像对应的、图像获取装置相对于所述目标对象的第一帧位姿；以及
基于所述三维采样点集合和第一帧位姿对所述目标对象进行跟踪匹配，以获取与所述第二帧图像对应的、图像获取装置相对于所述目标对象的第二帧位姿。


2.根据权利要求1所述的方法，其中，所述基于所述三维采样点集合和第一帧位姿对所述目标对象进行跟踪匹配，以获取与所述第二帧图像对应的、图像获取装置相对于所述目标对象的第二帧位姿包括：
利用所述第一帧位姿，获取所述三维采样点集合到所述第一帧图像的第一帧投影点集合、以及表示所述三维采样点集合与所述第一帧投影点集合之间的对应关系的第一帧对应集合；
利用所述第一帧投影点集合和所述第一帧对应集合，获取表示所述三维采样点集合与所述三维采样点集合到所述第二帧图像的第二投影点集合之间的对应关系的第二帧对应集合；以及
利用所述第二帧对应集合，获取所述第二帧位姿。


3.根据权利要求2所述的方法，其中，所述利用所述第一帧投影点集合和所述第一帧对应集合，获取表示所述三维采样点集合与所述三维采样点集合到所述第二帧图像的第二投影点集合之间的对应关系的第二帧对应集合包括：
利用所述第一帧投影点集合，获取所述三维采样点集合到所述第二帧图像的第二帧投影点集合；以及
利用所述第一帧对应集合、所述第一帧投影点集合和所述第二帧投影点集合，获取表示所述三维采样点集合与所述第二投影点集合之间的对应关系的第二帧对应集合。


4.根据权利要求2所述的方法，其中，所述利用所述第二帧对应集合，获取所述第二帧位姿包括：
利用位姿估计方法，基于所述第二帧对应集合获取所述第二帧位姿。


5.根据权利要求4所述的方法，其中，所述方法还包括：
利用位姿估计方法，基于所述第二帧对应集合获取所述第二帧位姿和所述第二投影点集合中未出错的投影点集合；以及
通过判断所述未出错的投影点集合中元素的数量是否大于第一预定阈值来获取跟踪匹配结果。


6.根据权利要求5所述的方法，其中，所述通过判断所述未出错的投影点集合中元素的数量是否大于第一预定阈值来获取跟踪匹配结果包括：
若判断出所述未出错的投影点集合中元素的数量大于所述第一预定阈值，则获取跟踪匹配成功的结果，并输出第二帧位姿；以及
若判断出所述未出错的投影点集合中元素的数量不大于所述第一预定阈值，则获取跟踪匹配失败的结果，且不输出第二帧位姿。


7.根据权利要求6所述的方法，其中，在获取跟踪匹配成功的结果之后，所述方法还包括：
利用所述第二帧对应集合，获取下一帧图像对应的、图像获取装置相对于所述目标对象的下一帧位姿，直到表示所述三维采样点集合与所述三维采样点集合到所述下一帧图像的下一投影点集合之间的对应关系的下一帧对应集合中元素的数量小于第二预定阈值。


8.根据权利要求7所述的方法，其中，所述利用所述第二帧对应集合，获取下一帧图像对应的、图像获取装置相对于所述目标对象的下一帧位姿包括：
从所述第二帧对应集合中去除不在所述未出错的投影点集合中的投影点集合对应的元素，以获取修订的第二帧对应...

【专利技术属性】
技术研发人员：罗琳捷，刘晶，陈志立，王国晖，杨骁，杨建朝，连晓晨，
申请(专利权)人：脸萌有限公司，
类型：发明
国别省市：开曼群岛;KY