System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于混合现实的处理方法、装置、终端和存储介质制造方法及图纸_技高网

基于混合现实的处理方法、装置、终端和存储介质制造方法及图纸

技术编号:40532569 阅读:5 留言:0更新日期:2024-03-01 13:53
本公开提供基于混合现实的处理方法及装置、终端和存储介质。基于混合现实的处理方法包括:获取现实世界的图像;确定图像中的真实物体的坐标信息;基于坐标信息,创建与真实物体对应的虚拟对象;创建着色器,着色器的渲染逻辑为取消渲染虚拟对象的面向观察者的第一几何面以及取消渲染虚拟对象的背离观察者的第二几何面和观察者视线由第二几何面遮挡的物体的几何面;将着色器应用于虚拟对象。本公开可以在混合现实的虚拟场景下,实现真实世界中的遮挡关系,能够在大部分场景下做到“虚实融合”的效果,拓宽了混合现实场景下交互方案的多样性与真实性。

【技术实现步骤摘要】

本公开涉及信息,尤其涉及基于混合现实的处理方法及装置、终端和存储介质。


技术介绍

1、混合现实(mr)技术指通过在现实环境中引入虚拟场景信息,在现实世界、虚拟世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感,具有真实性、实时互动性以及构想性等特点。而混合现实一般的交互场景,是在现实世界中,通过程序获得真实世界或现实世界的物理信息,程序拿到真实世界的物理信息后,通过处理物理信息:如坐标位置、物品高度等,再利用这些信息将虚拟交互物体布置在真实世界中,并通过设定好的交互程序,使这些虚拟物体具有“可互动性”。混合现实技术正是通过这样的技术来增加现实世界中原来并不具有的体验。

2、混合现实技术现存的交互方式,大多是用户与在真实空间中固定角度、固定方向的虚拟物体进行交互,若发生角度和遮挡关系的改变,则对于程序来讲很难将两者在现实世界中的遮挡关系进行画面的体现,就会造成俗说的“穿帮”现象,破坏塑造好的混合现实体验。这也是大多数mr应用在设计层面就需要考虑和尽量规避的问题。


技术实现思路

1、为解决现有问题,本公开提供一种基于混合现实的处理方法及装置、终端和存储介质。

2、本公开采用以下的技术方案。

3、本公开的实施例提供一种基于混合现实的处理方法,所述基于混合现实的处理方法包括:获取现实世界的图像;确定所述图像中的真实物体的坐标信息;基于所述坐标信息,创建与所述真实物体对应的虚拟对象;创建着色器,所述着色器的渲染逻辑为取消渲染所述虚拟对象的面向观察者的第一几何面以及取消渲染所述虚拟对象的背离观察者的第二几何面和观察者视线由所述第二几何面遮挡的物体的几何面;将所述着色器应用于所述虚拟对象。

4、本公开的另一实施例提供了一种基于混合现实的处理装置,所述处理装置包括:图像获取模块,配置为获取现实世界的图像;坐标信息确定模块,配置为确定所述图像中的真实物体的坐标信息;虚拟对象创建模块,配置为基于所述坐标信息,创建与所述真实物体对应的虚拟对象;着色器创建模块,配置为创建着色器,所述着色器的渲染逻辑为取消渲染所述虚拟对象的面向观察者的第一几何面以及取消渲染所述虚拟对象的背离观察者的第二几何面和观察者视线由所述第二几何面遮挡的物体的几何面;着色器应用模块,配置为将所述着色器应用于所述虚拟对象。

5、在一些实施例中,本公开提供一种终端,包括:至少一个存储器和至少一个处理器;其中,存储器用于存储程序代码,处理器用于调用所述存储器所存储的程序代码执行上述基于混合现实的处理方法。

6、在一些实施例中,本公开提供一种存储介质,所述存储介质用于存储程序代码,所述程序代码用于执行上述基于混合现实的处理方法。

7、本公开通过创建着色器,着色器的渲染逻辑为取消渲染虚拟对象的面向观察者的第一几何面以及取消渲染虚拟对象的背离观察者的第二几何面和观察者视线由第二几何面遮挡的物体的几何面,可以在混合现实的虚拟场景下,实现真实世界中的遮挡关系,能够在大部分场景下做到“虚实融合”的效果,拓宽了混合现实场景下交互方案的多样性与真实性。

本文档来自技高网...

【技术保护点】

1.一种基于混合现实的处理方法,其特征在于,所述基于混合现实的处理方法包括:

2.根据权利要求1所述的基于混合现实的处理方法,其特征在于,所述基于混合现实的处理方法应用于头戴式设备。

3.根据权利要求2所述的基于混合现实的处理方法,其特征在于,获取现实世界的图像包括通过所述头戴式设备的摄像头获取现实世界的图像。

4.根据权利要求1所述的基于混合现实的处理方法,其特征在于,创建与所述真实物体对应的虚拟对象包括利用Unity引擎创建与所述真实物体对应的虚拟对象。

5.根据权利要求1所述的基于混合现实的处理方法,其特征在于,创建着色器包括:

6.根据权利要求1所述的基于混合现实的处理方法,其特征在于,所述渲染器的渲染逻辑还包括:

7.根据权利要求2所述的基于混合现实的处理方法,其特征在于,还包括:

8.一种基于混合现实的处理装置,其特征在于,所述基于混合现实的处理装置包括:

9.一种终端,包括:

10.一种存储介质,所述存储介质用于存储程序代码,所述程序代码用于执行权利要求1至7中任一项所述的基于混合现实的处理方法。

...

【技术特征摘要】

1.一种基于混合现实的处理方法,其特征在于,所述基于混合现实的处理方法包括:

2.根据权利要求1所述的基于混合现实的处理方法,其特征在于,所述基于混合现实的处理方法应用于头戴式设备。

3.根据权利要求2所述的基于混合现实的处理方法,其特征在于,获取现实世界的图像包括通过所述头戴式设备的摄像头获取现实世界的图像。

4.根据权利要求1所述的基于混合现实的处理方法,其特征在于,创建与所述真实物体对应的虚拟对象包括利用unity引擎创建与所述真实物体对应的虚拟对象。

5....

【专利技术属性】
技术研发人员:马文泽
申请(专利权)人:北京字跳网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1