System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 虚拟模型的处理方法、装置、混合现实系统制造方法及图纸_技高网

虚拟模型的处理方法、装置、混合现实系统制造方法及图纸

技术编号:41315089 阅读:3 留言:0更新日期:2024-05-13 14:56
本发明专利技术公开了一种虚拟模型的处理方法、装置、混合现实系统、电子设备,处理方法包括:确定医疗场景虚拟模型的感兴趣区域的深度信息;根据所述深度信息确定所述医疗场景虚拟模型的其他区域的渲染参数;根据所述其他区域的渲染参数对所述其他区域进行模糊处理。本发明专利技术通过医疗场景虚拟模型的感兴趣区域的深度信息,确定其他区域的渲染参数,进而根据渲染参数对其他区域进行模糊处理,医疗场景一般采用体渲染(ray casting、蒙特卡洛路径追踪方法和一些其他的医疗器械网格渲染),以使医疗场景虚拟模型的其他区域的显示效果符合用户视觉要求,从而能够有效缓解甚至避免观看虚拟场景中的虚拟模型时,带来眩晕的感觉。

【技术实现步骤摘要】

本专利技术涉及虚拟现实,尤其涉及一种虚拟模型的处理方法、装置、混合现实系统、电子设备。


技术介绍

1、随着虚拟现实技术的发展,常通过虚拟设备,例如hmd设备(head-mounteddisplay,头戴式显示设备)为用户构建沉浸式的虚拟世界,该项技术在医疗领域也得以广泛应用。

2、而用户在长时间佩戴hmd设备时会带来一些不良的身体反应,如头痛、眩晕、恶心和视觉疲劳等,主要原因参见图1所示,人眼(图中用五角星表示)只能固定聚焦在靠近眼睛的hmd屏幕上,聚焦深度与实际深度不匹配,聚焦深度表征人眼到hmd屏幕的距离,实际深度表征人眼到真实物体(图中用圆形表示)的距离;而参见图2,实际生活中真实物体往往与人眼距离较远,聚焦深度较远,聚焦深度与实际深度相匹配;当感受到的聚焦深度和实际深度不一致,特别是佩戴hmd设备观看虚拟场景中的虚拟模型时,会给人带来眩晕的感觉。


技术实现思路

1、本专利技术要解决的技术问题是为了克服现有技术中佩戴虚拟设备观看虚拟场景中的医疗场景虚拟模型时,会给人带来眩晕的感觉的缺陷,提供一种虚拟模型的处理方法、装置、混合现实系统、电子设备。

2、本专利技术是通过下述技术方案来解决上述技术问题:

3、第一方面,提供一种虚拟模型的处理方法,包括:

4、确定医疗场景虚拟模型的感兴趣区域的深度信息;

5、根据所述深度信息确定所述医疗场景虚拟模型的其他区域的渲染参数;

6、根据所述其他区域的渲染参数对所述其他区域进行模糊处理。

7、可选地,基于渲染物体的算法和/或渲染参数,确定医疗场景虚拟模型的感兴趣区域的深度信息,包括:

8、根据focus-and-context判定方法得到感兴趣物体,将所述感兴趣物体的区域确定为所述感兴趣区域,并得到所述感兴趣区域的深度信息;

9、或者,将距离所述医疗场景虚拟模型的聚焦点预设范围内的区域确定为感兴趣区域,根据所述渲染参数确定所述感兴趣区域的深度信息。

10、可选地,所述深度信息包括所述感兴趣区域的加权深度;所述加权深度为所述感兴趣区域中各个像素点的深度的加权结果;

11、根据所述深度信息确定所述医疗场景虚拟模型的其他区域的渲染参数,包括:

12、根据所述加权深度确定所述渲染参数。

13、可选地,所述感兴趣区域中各个像素点的深度的加权系数与距离呈负相关;其中所述距离为所述感兴趣区域中的像素点与所述医疗场景虚拟模型的聚焦点之间的距离;所述加权系数用于计算所述加权结果。

14、可选地,根据所述其他区域的渲染参数对所述其他区域进行模糊处理,包括:

15、响应于对光线投射算法的选择,采用光线投射算法并根据所述渲染参数对所述其他区域进行深度模糊处理;

16、或者,响应于对蒙特卡洛路径追踪算法的选择,采用蒙特卡洛路径追踪算法并根据所述渲染参数对所述其他区域进行重新渲染。

17、可选地,所述渲染参数包括模糊范围和滤波核;

18、采用光线投射算法并根据所述渲染参数对所述其他区域进行深度模糊处理,包括:

19、根据所述深度信息确定所述其他区域中各个像素点的模糊范围,并根据所述模糊范围确定所述其他区域中各个像素点的滤波核;其中,所述模糊范围与深度偏差呈正相关;所述深度偏差为其他区域中各个像素点的深度与所述深度信息的偏差;

20、根据所述其他区域的渲染参数对所述其他区域进行模糊处理,包括:

21、采用所述滤波核,对所述其他区域的像素点进行滤波处理;

22、可选地,采用蒙特卡洛路径追踪算法并根据所述渲染参数对所述其他区域进行重新渲染,包括:

23、根据所述深度信息设置相机的焦距信息,通过所述焦距信息设置后的相机以及所述蒙特卡洛路径追踪算法对所述其他区域进行重新渲染。

24、第二方面,提供一种虚拟模型的处理装置,包括:

25、深度确定模块,基于渲染物体的算法和/或渲染参数,确定医疗场景虚拟模型的感兴趣区域的深度信息;

26、模型处理模块,用于根据所述深度信息确定所述医疗场景虚拟模型的其他区域的渲染参数,并根据所述渲染参数对所述其他区域进行模糊处理。

27、第三方面,提供一种混合现实系统,包括:存储器,一个或多个处理器;和

28、头戴式显示器,所述头戴式显示器被配置为展示医疗场景虚拟模型;

29、所述处理器被配置为执行上述任一项所述的虚拟模型的处理方法。

30、第四方面,提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述任一项所述的虚拟模型的处理方法。

31、第五方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一项所述的医学场景的图像处理方法。

32、本专利技术的积极进步效果在于:通过医疗场景虚拟模型的感兴趣区域的深度信息,确定其他区域的渲染参数,进而根据渲染参数对其他区域进行模糊处理,以使医疗场景虚拟模型的其他区域的显示效果符合用户视觉要求,从而能够有效缓解甚至避免观看虚拟场景中的医疗场景虚拟模型时,带来眩晕的感觉。

本文档来自技高网...

【技术保护点】

1.一种虚拟模型的处理方法,其特征在于,包括:

2.根据权利要求1所述的虚拟模型的处理方法,其特征在于,所述确定医疗场景虚拟模型的感兴趣区域的深度信息,包括:

3.根据权利要求1所述的虚拟模型的处理方法,其特征在于,所述深度信息包括所述感兴趣区域的加权深度;所述加权深度为所述感兴趣区域中各个像素点的深度的加权结果;

4.根据权利要求3所述的虚拟模型的处理方法,其特征在于,所述感兴趣区域中各个像素点的深度的加权系数与距离呈负相关;其中所述距离为所述感兴趣区域中的像素点与所述医疗场景虚拟模型的聚焦点之间的距离;所述加权系数用于计算所述加权结果。

5.根据权利要求1-4中任一项所述的虚拟模型的处理方法,其特征在于,根据所述其他区域的渲染参数对所述其他区域进行模糊处理,包括:

6.根据权利要求5所述的虚拟模型的处理方法,其特征在于,所述渲染参数包括模糊范围和滤波核;

7.根据权利要求5所述的虚拟模型的处理方法,其特征在于,采用蒙特卡洛路径追踪算法并根据所述渲染参数对所述其他区域进行重新渲染,包括:

8.一种虚拟模型的处理装置,其特征在于,包括:

9.一种混合现实系统,其特征在于,包括:存储器,一个或多个处理器;和

10.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1-7中任一项所述的虚拟模型的处理方法。

...

【技术特征摘要】

1.一种虚拟模型的处理方法,其特征在于,包括:

2.根据权利要求1所述的虚拟模型的处理方法,其特征在于,所述确定医疗场景虚拟模型的感兴趣区域的深度信息,包括:

3.根据权利要求1所述的虚拟模型的处理方法,其特征在于,所述深度信息包括所述感兴趣区域的加权深度;所述加权深度为所述感兴趣区域中各个像素点的深度的加权结果;

4.根据权利要求3所述的虚拟模型的处理方法,其特征在于,所述感兴趣区域中各个像素点的深度的加权系数与距离呈负相关;其中所述距离为所述感兴趣区域中的像素点与所述医疗场景虚拟模型的聚焦点之间的距离;所述加权系数用于计算所述加权结果。

5.根据权利要求1-4中任一项所述的虚拟模型的处理方法,其特...

【专利技术属性】
技术研发人员:刘雯卿何金松杨博
申请(专利权)人:上海联影医疗科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1