System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于手势的AR多人交互方法和系统技术方案_技高网

基于手势的AR多人交互方法和系统技术方案

技术编号:40470741 阅读:6 留言:0更新日期:2024-02-26 19:08
本申请涉及一种基于手势的AR多人交互方法,该方法包括:获取第一用户的手部图像和第一位姿信息对手部图像进行手势识别,得到手势识别结果,根据手势识别结果生成第一交互指令,将第一位姿信息和第一交互指令发送至目标AR设备,以指示目标AR设备根据第一位姿信息和第一交互指令生成增强现实画面。通过本申请,解决了通过控制设备与AR设备进行交互便捷度低的问题,将手势识别与增强现实技术相结合,根据不同的手势变化来激活状态的切换以操控虚拟元素,不需要附加的物理设备(如手柄或控制器),提高了交互便捷度,同时,增强了用户的沉浸感体验。

【技术实现步骤摘要】

本申请涉及增强现实领域,特别是涉及基于手势的ar多人交互方法、系统、电子设备和存储介质。


技术介绍

1、随着计算机技术的快速发展,ar技术的应用也越来越广泛。

2、在相关技术中,ar交互方式通常为物理按键,例如,用户通过手柄或者智能手机控制ar设备。在进行多人ar游戏体验的过程中,基于手柄、手机等的控制设备与ar设备进行交互操作便捷度低,且影响用户的沉浸体验感,同时,控制设备需要单独维护,提高了维护成本。

3、目前针对相关技术中通过控制设备与ar设备进行交互便捷度低的问题,尚未提出有效的解决方案。


技术实现思路

1、本申请实施例提供了一种基于手势的ar多人交互方法、系统、电子设备和存储介质,以至少解决相关技术中通过控制设备与ar设备进行交互便捷度低的问题。

2、第一方面,本申请实施例提供了一种基于手势的ar多人交互方法,所述方法包括:

3、获取第一用户的手部图像和第一位姿信息,对所述手部图像进行手势识别,得到手势识别结果;

4、根据所述手势识别结果,生成第一交互指令;

5、将所述第一位姿信息和所述第一交互指令发送至目标ar设备,以指示所述目标ar设备根据所述第一位姿信息和所述第一交互指令生成增强现实画面。

6、在其中一些实施例中,所述目标ar设备包括第二ar设备,将所述第一位姿信息和所述第一交互指令发送至目标ar设备,以指示所述目标ar设备根据所述第一位姿信息和所述第一交互指令生成增强现实画面包括:

7、将所述第一位姿信息和所述第一交互指令发送至所述第二ar设备,以指示所述第二ar设备基于所述第一交互指令生成第一虚拟内容,根据自身位姿信息、所述第一位姿信息和所述第一虚拟内容,生成增强现实画面。

8、在其中一些实施例中,所述目标ar设备包括所述第一用户对应的第一ar设备,将所述第一位姿信息和所述交互指令发送至目标ar设备,以指示所述目标ar设备根据所述第一位姿信息和所述交互指令生成增强现实画面包括:

9、响应于所述第一交互指令,生成第一虚拟内容;

10、获取所述第一用户对应的第一场景图像,根据所述第一位姿信息,将所述第一虚拟内容叠加到所述第一场景图像上,得到第一增强现实画面。

11、在其中一些实施例中,所述目标ar设备包括第二ar设备,所述方法还包括:

12、接收所述第二ar设备发送的第二交互指令和第二位姿信息,其中,第二交互指令基于所述第一虚拟内容配置;

13、根据所述第二交互指令生成第二虚拟内容;

14、基于所述第一位姿信息和所述第二位姿信息,将所述第一虚拟内容和所述第二虚拟内容叠加到所述第一场景图像上,生成第二增强现实画面。

15、在其中一些实施例中,对所述手部图像进行手势识别,得到手势识别结果包括:

16、对所述手部图像进行预处理,得到预处理图像;

17、从所述预处理图像中提取特征信息,将所述特征信息输入预设识别模型,得到手势识别结果。

18、在其中一些实施例中,根据所述手势识别结果,生成第一交互指令包括:

19、在所述手势识别结果为攻击手势的情况下,生成攻击指令;和/或

20、在所述手势识别结果为防御手势的情况下,生成防御指令。

21、在其中一些实施例中,获取第一用户的第一位姿信息包括:

22、采集所述第一用户对应的第一场景图像,将所述第一场景图像与预设场景地图匹配,得到所述第一位姿信息。

23、第二方面,本申请实施例提供了一种基于手势的ar多人交互系统,所述系统包括:数据处理模块、指令生成模块和增强现实模块。

24、所述数据处理模块,用于获取第一用户的手部图像和第一位姿信息,对所述手部图像进行手势识别,得到手势识别结果;

25、所述指令生成模块,用于根据所述手势识别结果,生成第一交互指令;

26、所述增强现实模块,用于将所述第一位姿信息和所述第一交互指令发送至目标ar设备,以指示所述目标ar设备根据所述第一位姿信息和所述第一交互指令生成增强现实画面。

27、第三方面,本申请实施例提供了一种计算机设备,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述第一方面所述的基于手势的ar多人交互方法。

28、第四方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述第一方面所述的基于手势的ar多人交互方法。

29、相比于相关技术,本申请实施例提供的基于手势的ar多人交互方法,通过获取第一用户的手部图像和第一位姿信息对手部图像进行手势识别,得到手势识别结果,根据手势识别结果生成第一交互指令,将第一位姿信息和第一交互指令发送至目标ar设备,以指示目标ar设备根据第一位姿信息和第一交互指令生成增强现实画面。解决了通过控制设备与ar设备进行交互便捷度低的问题,将手势识别与增强现实技术相结合,根据不同的手势变化来激活状态的切换以操控虚拟元素,不需要附加的物理设备(如手柄或控制器),提高了交互便捷度,同时,增强了用户的沉浸感体验。

本文档来自技高网...

【技术保护点】

1.一种基于手势的AR多人交互方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述目标AR设备包括第二AR设备,将所述第一位姿信息和所述第一交互指令发送至目标AR设备,以指示所述目标AR设备根据所述第一位姿信息和所述第一交互指令生成增强现实画面包括:

3.根据权利要求1所述的方法,其特征在于,所述目标AR设备包括所述第一用户对应的第一AR设备,将所述第一位姿信息和所述交互指令发送至目标AR设备,以指示所述目标AR设备根据所述第一位姿信息和所述交互指令生成增强现实画面包括:

4.根据权利要求3所述的方法,其特征在于,所述目标AR设备包括第二AR设备,所述方法还包括:

5.根据权利要求1所述的方法,其特征在于,对所述手部图像进行手势识别,得到手势识别结果包括:

6.根据权利要求1所述的方法,其特征在于,根据所述手势识别结果,生成第一交互指令包括:

7.根据权利要求1所述的方法,其特征在于,获取第一用户的第一位姿信息包括:

8.一种基于手势的AR多人交互系统,其特征在于,所述系统包括:数据处理模块、指令生成模块和增强现实模块。

9.一种电子设备,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的基于手势的AR多人交互方法。

10.一种存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1至7中任一项所述的基于手势的AR多人交互方法。

...

【技术特征摘要】

1.一种基于手势的ar多人交互方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述目标ar设备包括第二ar设备,将所述第一位姿信息和所述第一交互指令发送至目标ar设备,以指示所述目标ar设备根据所述第一位姿信息和所述第一交互指令生成增强现实画面包括:

3.根据权利要求1所述的方法,其特征在于,所述目标ar设备包括所述第一用户对应的第一ar设备,将所述第一位姿信息和所述交互指令发送至目标ar设备,以指示所述目标ar设备根据所述第一位姿信息和所述交互指令生成增强现实画面包括:

4.根据权利要求3所述的方法,其特征在于,所述目标ar设备包括第二ar设备,所述方法还包括:

5.根据权利要求1所述的方法,其特征在于,对所述手部图像...

【专利技术属性】
技术研发人员:王海山朱红林朱铭德
申请(专利权)人:杭州易现先进科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1