多视角手势识别数据采集系统、方法、装置、设备及介质制造方法及图纸

技术编号:37994035 阅读:8 留言:0更新日期:2023-06-30 10:08
本公开实施例涉及一种多视角手势识别数据采集系统、方法、装置、设备及介质,该系统包括:多个不同位置处的相机;各相机均朝向同一目标区域,且相邻两个相机的采集区域存在交叠;其中,相机包括深度相机和平面相机,基于同一深度相机采集的数据标注多个不同的平面相机采集的数据。由此,可利用多个不同位置处的相机同时采集目标区域中的数据,实现对目标区域的多视角数据采集;同时,可利用同一深度相机采集的数据对多个平面相机采集的数据进行标注,减少了深度相机的数量,简化了数据标注过程,提高了数据处理速度,由此提高了数据采集和处理效率。集和处理效率。集和处理效率。

【技术实现步骤摘要】
多视角手势识别数据采集系统、方法、装置、设备及介质


[0001]本公开涉及人机交互
,尤其涉及一种多视角手势识别数据采集系统、方法、装置、设备及介质。

技术介绍

[0002]随着电子设备和数据处理技术的发展,人机交互方式逐渐多样化。其中,手势识别使得用户能够与电子设备进行通信,并且无需借助机械设备即可实现自然交互。由此,手势识别逐渐广泛应用到越来越多的人机交互场景中。
[0003]目前,手势识别中的数据采集可基于相机对手势进行拍照实现。具体地,可利用近邻的一个深度相机和一个平面相机拍摄同一手势,然后利用该深度相机拍到的数据标注该平面相机拍到的图像,以确定手势及其空间位置。但是,该数据采集方式视角较单一,且数据采集和处理效率均较低。

技术实现思路

[0004]为了解决上述技术问题,本公开提供了一种多视角手势识别数据采集系统、方法、装置、设备及介质。
[0005]本公开实施例提供了一种多视角手势识别数据采集系统,所述系统包括:多个不同位置处的相机;
[0006]各所述相机均朝向同一目标区域,且相邻两个所述相机的采集区域存在交叠;
[0007]其中,所述相机包括深度相机和平面相机,基于同一所述深度相机采集的数据标注多个不同的所述平面相机采集的数据。
[0008]在一些实施例中,所述系统还包括支撑机构;
[0009]所述深度相机固定在所述支撑机构上;
[0010]所述平面相机角度可调地固定在所述支撑机构上。
[0011]在一些实施例中,针对每一所述平面相机,还包括第一支撑件、第二支撑件和固定件;
[0012]所述平面相机设置于所述第一支撑件内,与所述第一支撑件转动连接;所述第一支撑件转动连接于所述第二支撑件上,所述第二支撑件通过所述固定件滑动连接于所述支撑机构上;
[0013]所述平面相机在所述第一支撑件内实现第一方向的角度调节,所述第一支撑件在所述第二支撑件上实现第二方向的角度调节;所述第一方向与所述第二方向交叉。
[0014]在一些实施例中,所述第一方向上的角度调节范围为

45
°
~45
°

[0015]所述第二方向上的角度调节范围为

45
°
~45
°

[0016]在一些实施例中,所述支撑机构包括落地底座、升降杆、升降杆控制器和支撑横梁;
[0017]所述升降杆的一端与所述落地底座固定连接,所述支撑横梁固定连接于所述升降
杆的另一端,所述相机设置在所述支撑横梁上;
[0018]所述升降杆控制器调节所述升降杆的高度,以使所述相机的采集区域适应于目标手势的位置。
[0019]在一些实施例中,所述升降杆的高度范围为130cm~210cm。
[0020]在一些实施例中,所述支撑横梁包括主梁和支梁;
[0021]所述主梁的相对两端分别与相对设置的两个所述升降杆连接固定,且所述支梁固定连接在所述主梁的两端;
[0022]所述深度相机和至少一个所述平面相机设置在所述主梁上,每个所述支梁上设置至少一个所述平面相机。
[0023]在一些实施例中,所述系统还包括辅助支撑件;
[0024]所述辅助支撑件的一端固定连接所述支梁远离所述主梁的远端,另一端固定连接所述升降杆。
[0025]在一些实施例中,所述主梁的长度范围为50cm~100cm;
[0026]所述支梁的长度范围为20cm~40cm。
[0027]在一些实施例中,所述落地底座固定在目标物体的表面上,或者所述落地底座为移动式落地底座。
[0028]在一些实施例中,所有所述平面相机的采集区域拼接后覆盖至少一个平面方向上的360
°
环周区域范围。
[0029]在一些实施例中,所述系统还包括采集控制器;
[0030]所述采集控制器控制所有所述相机在同一时刻采集数据。
[0031]本公开实施例还提供了一种针对上述任一种系统的数据采集方法,所述方法包括:
[0032]标定所述系统中的各相机,以使所有相机的采集数据统一到同一参考坐标系;
[0033]基于所述相机,同步获取目标区域中的采集数据;
[0034]基于同一所述深度相机的采集数据,标注多个所述平面相机的采集数据。
[0035]在一些实施例中,在基于所述相机,同步获取目标区域中的采集数据之前,所述方法还包括:
[0036]获取目标手势的空间位置;
[0037]基于所述目标手势的空间位置和所述目标区域的空间位置,确定升降杆的升降调节参数;
[0038]基于所述升降调节参数,生成调节指令,并发送至升降杆控制器。
[0039]在一些实施例中,在基于同一所述深度相机的采集数据,标注多个所述平面相机的采集数据之后,所述方法还包括:
[0040]存储同步获取的采集数据和标注后的采集数据;
[0041]基于所述采集数据,构建手势识别数据库。
[0042]本公开实施例还提供了一种数据采集装置,所述装置包括:
[0043]相机标定模块,用于标定所述系统中的各相机,以使所有相机的采集数据统一到同一参考坐标系;
[0044]数据获取模块,用于基于所述相机,同步获取目标区域中的采集数据;
[0045]数据标注模块,用于基于同一所述深度相机的采集数据,标注多个所述平面相机的采集数据。
[0046]在一些实施例中,所述装置还包括:
[0047]位置获取模块,用于在基于所述相机,同步获取目标区域中的采集数据之前,获取目标手势的空间位置;
[0048]参数确定模块,用于基于所述目标手势的空间位置和所述目标区域的空间位置,确定升降杆的升降调节参数;
[0049]指令发送模块,用于基于所述升降调节参数,生成调节指令,并发送至升降杆控制器。
[0050]在一些实施例中,所述装置还包括:
[0051]数据存储模块,用于在基于同一所述深度相机的采集数据,标注多个所述平面相机的采集数据之后,存储同步获取的采集数据和标注后的采集数据;
[0052]数据库建立模块,用于基于所述采集数据,构建手势识别数据库。
[0053]本公开实施例还提供了一种电子设备,所述电子设备包括:
[0054]处理器;
[0055]用于存储所述处理器可执行指令的存储器;
[0056]所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现如本公开实施例提供的上述任一种方法。
[0057]本公开实施例还提供了一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行如本公开实施例提供的上述任一种方法。
[0058]本公开实施例提供的技术方案与现有技术相比具有如下优点:
[0059]本公开实施例提供的多视角手势识别数本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种多视角手势识别数据采集系统,其特征在于,包括多个不同位置处的相机;各所述相机均朝向同一目标区域,且相邻两个所述相机的采集区域存在交叠;其中,所述相机包括深度相机和平面相机,基于同一所述深度相机采集的数据标注多个不同的所述平面相机采集的数据。2.根据权利要求1所述的系统,其特征在于,还包括支撑机构;所述深度相机固定在所述支撑机构上;所述平面相机角度可调地固定在所述支撑机构上。3.根据权利要求2所述的系统,其特征在于,针对每一所述平面相机,还包括第一支撑件、第二支撑件和固定件;所述平面相机设置于所述第一支撑件内,与所述第一支撑件转动连接;所述第一支撑件转动连接于所述第二支撑件上,所述第二支撑件通过所述固定件滑动连接于所述支撑机构上;所述平面相机在所述第一支撑件内实现第一方向的角度调节,所述第一支撑件在所述第二支撑件上实现第二方向的角度调节;所述第一方向与所述第二方向交叉。4.根据权利要求3所述的系统,其特征在于,所述第一方向上的角度调节范围为

45
°
~45
°
;所述第二方向上的角度调节范围为

45
°
~45
°
。5.根据权利要求2所述的系统,其特征在于,所述支撑机构包括落地底座、升降杆、升降杆控制器和支撑横梁;所述升降杆的一端与所述落地底座固定连接,所述支撑横梁固定连接于所述升降杆的另一端,所述相机设置在所述支撑横梁上;所述升降杆控制器调节所述升降杆的高度,以使所述相机的采集区域适应于目标手势的位置。6.根据权利要求5所述的系统,其特征在于,所述升降杆的高度范围为130cm~210cm。7.根据权利要求5所述的系统,其特征在于,所述支撑横梁包括主梁和支梁;所述主梁的相对两端分别与相对设置的两个所述升降杆连接固定,且所述支梁固定连接在所述主梁的两端;所述深度相机和至少一个所述平面相机设置在所述主梁上,每个所述支梁上设置至少一个所述平面相机。8.根据权利要求7所述的系统,其特征在于,还包括辅助支撑件;所述辅助支撑件的一端固定连接所述支梁远离所述主梁的远端,另一端固定连接所述升降杆。9.根据权利要求7所述的系统,其特征在于,所述主梁的长度范围为50cm~100cm;所述...

【专利技术属性】
技术研发人员:余海桃孙飞吴涛
申请(专利权)人:北京字跳网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1