一种基于增强现实的交互方法、装置、电子设备及介质制造方法及图纸

技术编号:31912727 阅读:20 留言:0更新日期:2022-01-15 12:53
本发明专利技术实施例公开了一种基于增强现实的交互方法、装置、电子设备及介质。其中,该方法包括:通过终端上的图像采集设备从几何实体的任一平面上获取待识别图像,基于预先训练的物体识别模型,确定所述待识别图像上的待识别物体;根据预设的物体与三维模型的关联关系,确定所述待识别物体的目标三维模型;将所述目标三维模型作为虚拟形象显示在终端屏幕中的待识别物体位置处。实现通过几何实体进行增强现实技术的模型展示,让用户通过实体感知进行与虚拟物体的交互,确保虚拟的三维模型与几何实体上的图片相互对应,提高模型展示精度,提升用户体验。用户体验。用户体验。

【技术实现步骤摘要】
一种基于增强现实的交互方法、装置、电子设备及介质


[0001]本专利技术实施例涉及增强现实技术,尤其涉及一种基于增强现实的交互方法、装置、电子设备及介质。

技术介绍

[0002]增强现实(AR,Augmented Reality)技术是一种利用计算机仿真信息增加用户对现实世界感知的技术。它将计算机生成的模拟三维模型、场景和系统信息叠加在真实场景中,通过多元信息融合,使用户对现实世界的感知得以增强。
[0003]当前的增强现实技术中,在生成虚拟物体的形象时,难以快速查找出正确的虚拟物体形象,虚拟物体的展示精度和效率较低,且用户与虚拟物体的交互依赖于用户在触摸屏上的操作,影响用户的AR体验。

技术实现思路

[0004]本专利技术实施例提供一种基于增强现实的交互方法、装置、电子设备及介质,以提高AR技术的交互效率,提升用户的AR交互体验。
[0005]第一方面,本专利技术实施例提供了一种基于增强现实的交互方法,该方法包括:
[0006]通过终端上的图像采集设备从几何实体的任一平面上获取待识别图像,基于预先训练的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于增强现实的交互方法,其特征在于,包括:通过终端上的图像采集设备从几何实体的任一平面上获取待识别图像,基于预先训练的物体识别模型,确定所述待识别图像上的待识别物体;根据预设的物体与三维模型的关联关系,确定所述待识别物体的目标三维模型;将所述目标三维模型作为虚拟形象显示在终端屏幕中的待识别物体位置处。2.根据权利要求1所述的方法,其特征在于,基于预先训练的物体识别模型,确定所述待识别图像上的待识别物体,包括:根据预先训练的物体识别模型,对所述待识别图像进行待识别物体特征的提取;根据所述待识别物体特征,输出所述待识别图像上的待识别物体的类别。3.根据权利要求1所述的方法,其特征在于,所述几何实体是由平面组成的几何结构,所述平面上设置有待识别物体的图片。4.根据权利要求1所述的方法,其特征在于,在通过终端上的图像采集设备从几何实体的任一平面上获取待识别图像之后,还包括:判断所述待识别图像是否存在于预设的候选图像中;若是,则根据预设的候选图像与三维模型的关联关系,确定所述待识别图像的目标三维模型。5.根据权利要求1所述的方法,其特征在于,将所述目标三维模型作为虚拟形象显示在终端屏幕中的待识别物体位置处,包括:确定终端屏幕中所述待识别物体的当前角度;将所述目标三维模型作为虚拟形象,以所述当前角度显示在终端屏幕中的待识别物体位置处。6.根据权利要求1所述的方法,其特征在于,在将所述目标三维模型作为虚拟形象显示在终端屏幕中的待识别...

【专利技术属性】
技术研发人员:李月
申请(专利权)人:西交利物浦大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1