位姿跟踪方法及装置制造方法及图纸

提供一种位姿跟踪方法及装置。该位姿跟踪方法包括：获取跟踪对象的图像，其中，跟踪对象上设置有以特定频率闪烁的标记；从获取的图像中获取亮度变化的像素；基于获取的像素计算跟踪对象的6自由度姿态，从而降低了位姿跟踪对LED标记特定布局的依赖性，同时降低了位姿跟踪的延迟，并且提高了位姿跟踪的精度和效率。

Method and device of pose tracking

【技术实现步骤摘要】
位姿跟踪方法及装置
本公开涉及计算机视觉
更具体地，本公开涉及一种位姿跟踪方法及装置。
技术介绍
近几年，多种6自由度位姿估计的方法被提出并且广泛应用于机器人抓取、虚拟现实/增强现实和人机交互等领域。虚拟现实和增强现实对系统延迟有很高的要求。如果系统对于头部运动反应较迟钝，那么就会导致用户眩晕、恶心。维尔福(Valve)的系统的延迟在7-15毫秒。目前商用的虚拟现实(VR)追踪产品最低的延迟是15毫秒，还不能让用户拥有完美的沉浸式体验。当前很多光学跟踪系统都是基于互补金属氧化物半导体(CMOS)相机的。但是这种消费机的CMOS相机延迟一般都大于16.7毫秒(60FPS)。硬件的限制导致这些方法不能够及时的将用户的动作输入显示在屏幕上，不能满足VR的低延迟要求。在一些方案中也使用主动式发光二极管(LED)标记来恢复物体的6自由度姿态。但是这些方法都有一些限制，要么LED灯的数目必须是四个且是共面的，要么计算量比超过预设偏差阈值不能应用于实时的系统。仅仅有4个LED灯会影响位姿跟踪的精度和系统的健壮性，这是因为如果其中有一个本文档来自技高网...

【技术保护点】
1.一种位姿跟踪方法，包括：/n获取跟踪对象的图像，其中，所述跟踪对象上设置有以特定频率闪烁的标记；/n从获取的图像中获取亮度变化的像素；/n基于获取的像素计算所述跟踪对象的6自由度姿态。/n

【技术特征摘要】
1.一种位姿跟踪方法，包括：
获取跟踪对象的图像，其中，所述跟踪对象上设置有以特定频率闪烁的标记；
从获取的图像中获取亮度变化的像素；
基于获取的像素计算所述跟踪对象的6自由度姿态。


2.根据权利要求1所述的位姿跟踪方法，其中，基于获取的像素计算所述跟踪对象的6自由度姿态的步骤包括：
获取所述跟踪对象的惯性测量单元数据，基于获取的惯性测量单元数据估计所述跟踪对象的3自由度姿态，其中，所述3自由度姿态是在所述跟踪对象的本体坐标系下绕x、y、z三个坐标轴旋转的姿态；
基于所述3自由度姿态和获取的像素计算所述跟踪对象的6自由度姿态，其中，所述6自由度姿态是在所述跟踪对象的本体坐标系下沿x、y、z三个坐标轴方向的姿态和绕x、y、z三个直角坐标轴旋转的姿态。


3.根据权利要求2所述的位姿跟踪方法，其中，基于所述3自由度姿态和获取的像素计算所述跟踪对象的6自由度姿态的步骤包括：
基于所述3自由度姿态和获取的像素，求解所述标记的2D点集与3D点集的对应关系，得到所述标记的关于2D点集与3D点集的匹配对，其中，所述2D点集中包括所述标记的像素坐标，所述3D点集中包括所述标记在所述跟踪对象的本体坐标系下的坐标；
基于所述匹配对，计算所述跟踪对象的6自由度姿态。


4.根据权利要求3所述的位姿跟踪方法，其中，计算所述跟踪对象的6自由度姿态的步骤包括：
从所述匹配对中去除重投影偏差超过预设偏差阈值的像素，并根据去除后剩余的像素计算6自由度位姿；
对计算得到的6自由度位姿进行最小化重投影误差操作，得到所述跟踪对象的6自由度姿态。

【专利技术属性】
技术研发人员：唐创奇，李卓，李宇光，
申请(专利权)人：三星中国半导体有限公司，三星电子株式会社，
类型：发明
国别省市：陕西;61