【技术实现步骤摘要】
本申请属于计算机技术以及专网通信的，尤其涉及一种辨识手势的信息交互方法、系统、模块及装置。
技术介绍
1、手势交互是人类自然易学的高效沟通方式。现有的手势识别技术已经在多个领域得到广泛应用，包括虚拟现实(vr)、增强现实(ar)、智能家居、游戏和教育等，手势识别能力可以提供更自然、直观和交互性的用户体验。手势识别的感知方案和算法已经相对成熟，如基于惯性传感器的数据手套以及基于神经网络的手势识别算法，都已经获得上商业上的应用，现有技术中一种是将手势识别的消息传递至对讲机。另一种是将手势识别的结果传输到智能ar头盔，在各个队员之间通信。
2、但是，将手势识别的消息传递至对讲机，需要同软件通信层面传递对讲机之间的路由信息实现手势指令在对讲机中的通信，因此需要对对讲机结构进行改变。而ar眼镜需要用户们佩戴额外的设备，并进行视觉切换，这在高压力的工作情境下可能会带来额外的负担，并且，在视距受限的情况下，例如光线昏暗和狭小空间，手势的可见性受到挑战，可拓展性不强，一方面，头盔之间的无线通信不稳定一方面，在缄默沟通的场景下，ar头盔因为笨重和对视线的遮挡，实际可用性和普及度都不高。在一些特殊的要求静默作业，或者过度嘈杂、话筒收音效果不佳的环境下，例如：公安行动以及紧急救援，手势接收方难以清晰准确地获取手势发送方的手势信息；更重要的是，接收手势信息必须高度关注手势发送者的动态，这导致手势交互占用了他们较大的认知负荷，这样的分散注意力可能会导致信息的丢失或误解，甚至可能危及生命。因此，亟需一种可以消除手势交互对视距的依赖，减轻认知负荷
技术实现思路
1、本申请提供了一种辨识手势的信息交互方法，应用于全双工通信对讲系统，所述全双工通信对讲系统具有多个全双工对讲机和与其匹配的耳机耳麦，所述多个全双工对讲机包括一个本地对讲机和至少一个与本地对讲机对应的对侧对讲机，包括：
2、接收外部设备采集本地用户的当前手势获得的手部运动的空间定位信息；
3、识别所述手部运动的空间定位信息，得到当前手势信息；
4、根据所述当前手势信息，得到相应的第一手势语音；
5、将所述第一手势语音，与本地对讲机和本地耳机耳麦中的音频流合并，形成第一多通道音频流；
6、将所述第一多通道音频流中的所述第一手势语音发送至所述本地对讲机，利用所述本地对讲机将所述第一手势语音射频发送至所述对侧对讲机。
7、进一步地，所述识别所述手部运动的空间定位信息，包括：
8、过滤掉所述手部运动的空间定位信息中的高频噪声；
9、校准所述手部运动的空间定位信息，以将所述手部运动的空间定位信息映射到同一坐标系中。
10、进一步地，所述手部运动的空间定位信息包含多个手势事件序列，所述手势事件序列包含多个手势事件，所述手势事件包括静态手势事件或动态手势事件；
11、所述静态手势事件包括手部的静态形状；
12、所述动态手势事件包括手部的运动轨迹。
13、进一步地，所述多个手势事件序列中的前序手势事件的全部或者部分作为后序手势事件的先验信息；
14、根据所述前序手势事件与所述后序手势事件之间的间隔时长进行判断：若所述间隔时长大于预设的时长阈值，则判定所述前序手势为独立手势；若所述间隔时长小于或等于预设的时长阈值，则将所述前序手势事件与所述后序手势事件合并为一个独立手势事件。
15、进一步地，所述识别所述手部运动的空间定位信息，包括：若所述手部运动的空间定位信息识别失败，则生成识别失败的提示语音，并利用所述本地耳机耳麦播放所述提示语音。
16、进一步地，所述形成第一多通道音频流，包括：
17、建立音频通道：通道f1、通道f2、通道f3、通道f4，所述通道f1用于连接本地耳机耳麦的麦克风通道t1，所述通道f2用于连接本地耳机耳麦的扬声器通道t2，所述通道f3用于连接本地对讲机的麦克风通道t3，所述通道f4用于连接本地对讲机的扬声器通道t4；
18、将麦克风通道t1、扬声器通道t2、麦克风通道t3、扬声器通道t4中的音频数据进行数据连接，以创建出一个合并的第一多通道音频流。
19、进一步地，所述将所述第一多通道音频流中的所述第一手势语音发送至所述本地对讲机，利用所述本地对讲机将所述第一手势语音射频发送至所述对侧对讲机，包括：
20、将麦克风通道t1的音频流通过通道f1与所述第一手势语音融合，形成第二多通道音频流；通过所述通道f3将第二多通道音频流发送至所述麦克风通道t3；
21、利用所述麦克风通道t3将第二多通道音频流发送至所述对侧对讲机。
22、进一步地，还包括：将所述第一手势语音通过所述通道f2发送至所述扬声器通道t2且播放。
23、进一步地，在形成第一多通道音频流之后，包括：
24、对所述第一多通道音频流进行降噪、增强、和均衡化。
25、本申请的另一个方面提出了一种辨识手势的信息交互系统，应用于全双工通信对讲系统，所述全双工通信对讲系统具有多个全双工对讲机和与其匹配的耳机耳麦，所述多个全双工对讲机包括一个本地对讲机和至少一个与本地对讲机对应的对侧对讲机，包括：
26、接收采集数据模块，用于接收外部设备采集本地用户的当前手势获得的手部运动的空间定位信息；
27、数据处理模块，用于识别所述手部运动的空间定位信息，得到当前手势信息，还用于将所述第一手势语音，与本地对讲机和本地耳机耳麦中的音频流合并，形成第一多通道音频流；
28、手势语音生成模块，用于根据所述当前手势信息，得到相应的第一手势语音；
29、分发模块，用于将所述第一多通道音频流中的所述第一手势语音发送至所述本地对讲机，利用所述本地对讲机将所述第一手势语音射频发送至所述对侧对讲机。
30、本申请的又一个方面提出了一种辨识手势的信息交互模块，包括存储器、显示器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时运行上述技术方案中的辨识手势的信息交互系统。
31、本申请的再一个方面提出了一种全双工手势交互装置，包括采集器、全双工通信对讲系统和上述技术方案中的辨识手势的信息交互模块；
32、所述全双工通信对讲系统包括多个全双工对讲机和与其匹配的耳机耳麦，所述多个全双工对讲机包括一个本地对讲机和至少一个与本地对讲机对应的对侧对讲机；
33、所述采集器用于采集本地用户的当前手势获得的手部运动的空间定位信息并发送；
34、所述辨识手势的信息交互模块分别连接所述对讲机和所述耳机耳麦，用于将所述第一多通道音频流中的所述第一手势语音发送至本地对讲机，还用于利用本地对讲机将所述第一手势语音射频发送至对侧对讲机。
35、进一步地，所述辨识手势的信息交互模块设置有音本文档来自技高网...
【技术保护点】
1.一种辨识手势的信息交互方法，应用于全双工通信对讲系统，所述全双工通信对讲系统具有多个全双工对讲机和与其匹配的耳机耳麦，所述多个全双工对讲机包括一个本地对讲机和至少一个与本地对讲机对应的对侧对讲机，其特征在于，包括：
2.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，所述识别所述手部运动的空间定位信息，包括：
3.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，所述手部运动的空间定位信息包含多个手势事件序列，所述手势事件序列包含多个手势事件，所述手势事件包括静态手势事件或动态手势事件；
4.根据权利要求3所述的辨识手势的信息交互方法，其特征在于，所述多个手势事件序列中的前序手势事件的全部或者部分作为后序手势事件的先验信息；
5.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，所述识别所述手部运动的空间定位信息，包括：若所述手部运动的空间定位信息识别失败，则生成识别失败的提示语音，并利用所述本地耳机耳麦播放所述提示语音。
6.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，所述形成第一多
7.根据权利要求6所述的辨识手势的信息交互方法，其特征在于，所述将所述第一多通道音频流中的所述第一手势语音发送至所述本地对讲机，利用所述本地对讲机将所述第一手势语音射频发送至所述对侧对讲机，包括：
8.根据权利要求6所述的辨识手势的信息交互方法，其特征在于，还包括：将所述第一手势语音通过所述通道F2发送至所述扬声器通道T2且播放。
9.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，在形成第一多通道音频流之后，包括：
10.一种辨识手势的信息交互系统，应用于全双工通信对讲系统，所述全双工通信对讲系统具有多个全双工对讲机和与其匹配的耳机耳麦，所述多个全双工对讲机包括一个本地对讲机和至少一个与本地对讲机对应的对侧对讲机，其特征在于，包括：
11.一种辨识手势的信息交互模块，其特征在于，包括存储器、显示器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时运行权利要求10中的辨识手势的信息交互系统。
12.一种全双工手势交互装置，其特征在于，包括采集器、全双工通信对讲系统和权利要求11中所述的辨识手势的信息交互模块；
13.根据权利要求12所述的全双工手势交互装置，其特征在于，所述辨识手势的信息交互模块设置有音频通道，通道F1、通道F2、通道F3、通道F4，所述通道F1连接本地耳机耳麦的麦克风通道T1，所述通道F2连接本地耳机耳麦的扬声器通道T2，所述通道F3连接本地对讲机的麦克风通道T3，所述通道F4连接本地对讲机的扬声器通道T4；
14.根据权利要求13所述的全双工手势交互装置，其特征在于，所述辨识手势的信息交互模块还用于将麦克风通道T1的音频流通过通道F1与所述第一手势语音融合，形成第二多通道音频流；通过所述通道F3将第二多通道音频流发送至所述麦克风通道T3；利用所述麦克风通道T3将第二多通道音频流发送至所述对侧对讲机。
15.根据权利要求12所述的全双工手势交互装置，其特征在于，所述采集器与所述辨识手势的信息交互模块无线连接；
...【技术特征摘要】
1.一种辨识手势的信息交互方法，应用于全双工通信对讲系统，所述全双工通信对讲系统具有多个全双工对讲机和与其匹配的耳机耳麦，所述多个全双工对讲机包括一个本地对讲机和至少一个与本地对讲机对应的对侧对讲机，其特征在于，包括：
2.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，所述识别所述手部运动的空间定位信息，包括：
3.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，所述手部运动的空间定位信息包含多个手势事件序列，所述手势事件序列包含多个手势事件，所述手势事件包括静态手势事件或动态手势事件；
4.根据权利要求3所述的辨识手势的信息交互方法，其特征在于，所述多个手势事件序列中的前序手势事件的全部或者部分作为后序手势事件的先验信息；
5.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，所述识别所述手部运动的空间定位信息，包括：若所述手部运动的空间定位信息识别失败，则生成识别失败的提示语音，并利用所述本地耳机耳麦播放所述提示语音。
6.根据权利要求1所述的辨识手势的信息交互方法，其特征在于，所述形成第一多通道音频流，包括：
7.根据权利要求6所述的辨识手势的信息交互方法，其特征在于，所述将所述第一多通道音频流中的所述第一手势语音发送至所述本地对讲机，利用所述本地对讲机将所述第一手势语音射频发送至所述对侧对讲机，包括：
8.根据权利要求6所述的辨识手势的信息交互方法，其特征在于，还包括：将所述第一手势语音通过所述通道f2发送至所述扬声器通道t2且播放。
9.根据权利要求1所述的辨识...
【专利技术属性】
技术研发人员：史元春，刘骁逸，周诚驰，陶品，王晓懿，
申请(专利权)人：启元实验室，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。