手指关节点标注方法及其装置、电子设备制造方法及图纸

本发明专利技术提供一种手指关节点标注方法及其装置、电子设备，涉及计算机视觉技术领域，该方法包括：采集同一时间帧下的多视角图像集合；多视角图像集合由多台相机在共视区域内同步拍摄得到；对多视角图像集合进行关键点检测，得到每个手指关节点的潜在像素位置，并生成以潜在像素位置为中心的潜在框；提取各潜在框的角点，根据各角点的响应度，确定每个手指关节点的3D位置；角点为与手指关节点相关的图像特征点；根据各3D位置，对每个手指关节点进行标注。本发明专利技术通过多视角融合突破单视角局限，提升空间定位可靠性，同时通过潜在框和响应度筛选，提高了特征可靠性和3D定位精度，从而提高3D手指关节点标注的准确性。

【技术实现步骤摘要】

本专利技术涉及计算机视觉，尤其涉及一种手指关节点标注方法及其装置、电子设备。

技术介绍

1、在xr（extended reality，扩展现实）领域中，使用手势作为交互是十分重要的。人体手指关节点在空间中的位置实时估计是比较困难的，一般与所用的相机设备以及使用场景息息相关，目前公开的标注手指关节点的数据集无法满足研发的需求。因此，如何实现手指关节点的准确标注成为亟需解决的问题。

技术实现思路

1、本专利技术提供一种手指关节点标注方法及其装置、电子设备，用以解决现有技术中手指关节点的标注准确性低的缺陷，实现提高3d手指关节点标注的准确性。

2、本专利技术提供一种手指关节点标注方法，包括如下步骤：

3、采集同一时间帧下的多视角图像集合；所述多视角图像集合由多台相机在共视区域内同步拍摄得到；

4、对所述多视角图像集合进行关键点检测，得到每个手指关节点的潜在像素位置，并生成以所述潜在像素位置为中心的潜在框；

5、提取各所述潜在框的角点，根据各所述角点的响应度，确定每个所本文档来自技高网...

【技术保护点】

1.一种手指关节点标注方法，其特征在于，包括：

2.根据权利要求1所述的手指关节点标注方法，其特征在于，所述根据各所述角点的响应度，确定每个所述手指关节点的3D位置，包括：

3.根据权利要求2所述的手指关节点标注方法，其特征在于，所述根据所述角点数量和相机参数，确定每个所述手指关节点在参考相机坐标系下的3D位置，包括：

4.根据权利要求2或3所述的手指关节点标注方法，其特征在于，所述根据所述角点数量和相机参数，确定每个所述手指关节点在参考相机坐标系下的3D位置，包括：

5.根据权利要求1所述的手指关节点标注方法，其特征在于，所述对所述多视角...

【技术特征摘要】

1.一种手指关节点标注方法，其特征在于，包括：

2.根据权利要求1所述的手指关节点标注方法，其特征在于，所述根据各所述角点的响应度，确定每个所述手指关节点的3d位置，包括：

3.根据权利要求2所述的手指关节点标注方法，其特征在于，所述根据所述角点数量和相机参数，确定每个所述手指关节点在参考相机坐标系下的3d位置，包括：

4.根据权利要求2或3所述的手指关节点标注方法，其特征在于，所述根据所述角点数量和相机参数，确定每个所述手指关节点在参考相机坐标系下的3d位置，包括：

5.根据权利要求1所述的手指关节点标注方法，其特征在于，所述对所述多视角图像集合进行关键点检测，得到每个手指关节点的...

【专利技术属性】
技术研发人员：曹卫，张汉烨，史春苓，陈科科，
申请(专利权)人：杭州秋果计划科技有限公司，
类型：发明
国别省市：