三维重建中图像的位姿信息确定方法和装置制造方法及图纸

一种三维重建中图像的位姿信息确定方法和装置，该方法包括：获取承载在可移动平台的云台上的拍摄装置拍摄的当前帧图像，其中可移动平台包括用于测量可移动平台的位置信息和云台的姿态信息的传感器(S110)；当对当前帧图像重定位失败时，提取上一帧图像的特征点，并确定当前帧图像和上一帧图像对应的特征点匹配对(S120)；当特征点匹配对满足预设匹配成功的条件时，根据特征点匹配对确定当前帧图像相对于上一帧图像的相对位姿信息，并根据相对位姿信息和拍摄当前帧图像时传感器测量的位置信息和姿态信息确定当前帧图像的位姿信息(S130)。上述三维重建中图像的位姿信息确定方案有效避免了重定位失败则无法三维重建的问题，提高了实时三维重建的鲁棒性。

【技术实现步骤摘要】
【国外来华专利技术】三维重建中图像的位姿信息确定方法和装置
本专利技术总体涉及三维重建
，更具体地涉及一种三维重建中图像的位姿信息确定方法和装置。
技术介绍
目前，实时三维重建同步进行两个模块算法，分别为前端跟踪线程和后端建图线程。前端跟踪线程的一个重要作用是实时确定拍摄装置在拍摄图像时的位姿信息，后端建图线程利用所述位姿信息来建图，如果跟踪过程不能给出相应的位置和姿态则重建失败，因此实时三维重建的鲁棒性极大地依赖同步定位与建图算法的鲁棒性。在传统的前端跟踪线程中，分为三个阶段：初始化、跟踪和重定位，当当前帧图像的跟踪失败时就会启动重定位过程，即对全局地图中所有的图像帧(例如关键帧图像)进行相似度搜索找到与当前帧图像最匹配的图像帧，使用找到的图像帧再次进行跟踪计算当前帧图像对应的拍摄装置的位信息姿。然而，在某些情况中，重定位过程中找不到符合要求的图像帧，无法确定当前帧图像的位姿信息，这样会导致实时三维重建将无法继续进行或者当前帧图像无法利用。
技术实现思路
为了解决上述问题而提出了本专利技术。本专利技术提供一种三维重建中图像的位姿本文档来自技高网...

【技术保护点】
1.一种三维重建中图像的位姿信息确定方法，其特征在于，所述方法包括：/n获取承载在可移动平台的云台上的拍摄装置拍摄的当前帧图像，其中，所述可移动平台包括用于测量所述可移动平台的位置信息和所述云台的姿态信息的传感器；/n当对所述当前帧图像重定位失败时，提取所述当前帧图像的上一帧图像的特征点，并根据所述上一帧图像的特征点执行特征点匹配算法以确定所述当前帧图像和所述上一帧图像对应的特征点匹配对；以及/n当所述特征点匹配对满足预设匹配成功的条件时，根据所述特征点匹配对确定所述当前帧图像相对于所述上一帧图像的相对位姿信息，并根据所述相对位姿信息以及拍摄所述当前帧图像时所述传感器测量的所述位置信息和所述姿...

【技术特征摘要】
【国外来华专利技术】1.一种三维重建中图像的位姿信息确定方法，其特征在于，所述方法包括：
获取承载在可移动平台的云台上的拍摄装置拍摄的当前帧图像，其中，所述可移动平台包括用于测量所述可移动平台的位置信息和所述云台的姿态信息的传感器；
当对所述当前帧图像重定位失败时，提取所述当前帧图像的上一帧图像的特征点，并根据所述上一帧图像的特征点执行特征点匹配算法以确定所述当前帧图像和所述上一帧图像对应的特征点匹配对；以及
当所述特征点匹配对满足预设匹配成功的条件时，根据所述特征点匹配对确定所述当前帧图像相对于所述上一帧图像的相对位姿信息，并根据所述相对位姿信息以及拍摄所述当前帧图像时所述传感器测量的所述位置信息和所述姿态信息确定所述当前帧图像的位姿信息。


2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当所述特征点匹配对不满足所述预设匹配成功的条件时，将拍摄所述当前帧图像时所述传感器测量的所述位置信息和所述姿态信息确定为所述当前帧图像的位姿信息。


3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
获取所述拍摄装置拍摄的所述当前帧图像的下一帧图像；以及
当所述当前帧图像的位姿信息是拍摄所述当前帧图像时所述传感器测量的所述位置信息和所述姿态信息时，对所述下一帧图像进行重定位。


4.根据权利要求1-3任一项所述的方法，其特征在于，所述方法还包括：
获取所述拍摄装置拍摄的所述当前帧图像的下一帧图像；
当所述当前帧图像的位姿信息是根据所述相对位姿信息以及拍摄所述当前帧图像时所述传感器测量的所述位置信息和所述姿态信息确定的时，确定所述下一帧图像和所述当前帧图像对应的特征点匹配对；以及
根据所述下一帧图像和所述当前帧图像的特征点匹配对确定所述下一帧图像的位姿信息。


5.根据权利要求1-4任一项所述的方法，其特征在于，当所述当前帧图像的位姿信息是根据所述相对位姿信息以及拍摄所述当前帧图像时所述传感器测量的所述位置信息和所述姿态信息确定的时，所述当前帧图像的位姿信息用于确定所述当前帧图像和所述上一帧图像对应的特征点匹配对对应的地图点。


6.根据权利要求1-4中的任一项所述的方法，其特征在于，当所述当前帧图像的位姿信息是拍摄所述当前帧图像时所述传感器测量的所述位置信息和所述姿态信息时，所述方法还包括：
获取所述当前帧图像之后所述拍摄装置拍摄的后续图像，并确定所述后续图像和所述当前帧图像对应的特征点匹配对；以及
根据所述后续图像和所述当前帧图像对应的特征点匹配对对所述当前帧图像的位姿信息进行优化。


7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
在确定所述后续图像和所述当前帧图像对应的特征点匹配对之前，获取所述后续图像的位姿信息，并根据所述后续图像的位姿信息确定预设区域范围；以及
确定所述当前帧图像是否在所述预设区域范围内拍摄，如果确定所述当前帧图像是在所述预设区域范围内拍摄，则确定所述后续图像和所述当前帧图像对应的特征点匹配对。


8.根据权利要求1-7任一项所述的方法，其特征在于，所述传感器包括用于测量所述可移动平台的位置信息的实时动态载波相位差分定位装置。


9.一种三维重建中图像的位姿信息确定装置，其特征在于，所述装置包括存储装置和处理器，其中，
所述存储装置，用于存储程序代码；
所述处理器，执行所述程序代码，当所述程序代码执行时，用于：
获取承载在可移动平台的云...

【专利技术属性】
技术研发人员：朱晏辰，薛唐立，
申请(专利权)人：深圳市大疆创新科技有限公司，
类型：发明
国别省市：广东;44