System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 眼球的三维重建方法、装置、电子设备及存储介质制造方法及图纸_技高网

眼球的三维重建方法、装置、电子设备及存储介质制造方法及图纸

技术编号:40737223 阅读:2 留言:0更新日期:2024-03-25 19:58
本公开提出一种眼球的三维重建方法、装置、电子设备及存储介质,涉及三维建模技术领域。包括:获取第一眼球图像;根据第一眼球图像,生成每个预设拍摄角度对应的第二眼球图像集,其中,预设拍摄角度与第一眼球图像的拍摄角度不同;根据第二眼球图像集中每张第二眼球图像的质量,确定每个预设拍摄角度对应的目标眼球图像;基于多张目标眼球图像及第一眼球图像,对第一眼球图像中的眼球进行三维重建。由此,可以根据一张真实的第一眼球图像,预测出其他被遮挡的拍摄角度对应的目标眼球图像,并根据第一眼球图像及多张目标眼球图像,获取眼球的三维模型,进而可以准确、直观地看到整个眼球。

【技术实现步骤摘要】

本公开涉及三维建模领域,尤其涉及一种眼球的三维重建方法、装置、电子设备及存储介质


技术介绍

1、近年来,随着计算机技术的飞跃发展,三维重建技术已经逐渐走进人们的生活,并受到越来越多的关注。三维模型重建已经被广泛应用于工业、医疗和娱乐等诸多领域。

2、在医疗领域,医生可以通过对眼球进行观察,以确定眼球的健康状况。但是,只有部分眼球可以被直观的观察到,而其他部分的眼球由于眼眶的遮挡等原因,不能被直观地观察到。因此,如何对眼球进行三维重建成为重点的研究方向。


技术实现思路

1、本公开旨在至少在一定程度上解决相关技术中的技术问题之一。

2、本公开第一方面实施例提出了一种眼球的三维重建方法,包括:

3、获取第一眼球图像;

4、根据所述第一眼球图像,生成每个预设拍摄角度对应的第二眼球图像集,其中,所述预设拍摄角度与所述第一眼球图像的拍摄角度不同;

5、根据所述第二眼球图像集中每张第二眼球图像的质量,确定每个所述预设拍摄角度对应的目标眼球图像;

6、基于多张所述目标眼球图像及所述第一眼球图像,对所述第一眼球图像中的眼球进行三维重建。

7、可选的,所述根据所述第二眼球图像集中每张第二眼球图像的质量,确定每个所述预设拍摄角度对应的目标眼球图像,包括:

8、获取每个所述预设拍摄角度对应的第二眼球图像集中,每张第二眼球图像与其余各第二眼球图像间的峰值信噪比;

9、根据每张第二眼球图像对应的各个峰值信噪比,确定每张所述第二眼球图像的质量;

10、将每个所述预设拍摄角度对应的第二眼球图像集中质量最高的第二眼球图像,确定为每个所述预设拍摄角度对应的目标眼球图像。

11、可选的,所述根据每张第二眼球图像对应的各个峰值信噪比,确定每张所述第二眼球图像的质量,包括:

12、根据每张所述第二眼球图像对应的各个峰值信噪比,确定每张所述第二眼球图像对应的峰值信噪比的平均值;

13、根据每张所述第二眼球图像对应的峰值信噪比的平均值,确定每张所述第二眼球图像的质量。

14、可选的,所述根据所述第一眼球图像,生成每个预设拍摄角度对应的第二眼球图像集,包括:

15、获取预设空间中每个空间点的位置坐标,及从每个所述预设拍摄角度到每个所述空间点的方向信息;

16、重复n次,将所述第一眼球图像、各个所述空间点的位置坐标及每个所述预设拍摄角度到各个空间点的方向信息,输入神经辐射场模型,以获取每个所述预设拍摄视角下各个空间点对应的n组颜色信息及密度信息,其中,n为大于1的正整数;

17、根据每个所述预设拍摄角度下各个空间点对应的每组颜色信息及密度信息,对每个所述预设拍摄角度对应的第二眼球图像中的每个像素点进行渲染,以获取每个所述预设拍摄角度对应的第二眼球图像集中的每张第二眼球图像。

18、可选的,所述根据每个所述预设拍摄角度下各个空间点对应的每组颜色信息及密度信息信息,对每个所述预设拍摄角度对应的第二眼球图像中的每个像素点进行渲染,以获取每个所述预设拍摄角度对应的第二眼球图像集中的每张第二眼球图像,包括:

19、确定每个所述预设拍摄角度对应的参考点,及对应的第二眼球图像中包含的像素点数量;

20、根据位于每个所述参考点与所述第二眼球图像中每个像素点所在的直线上的各个空间点的颜色信息及密度信息,确定每个所述像素点的像素值;

21、根据每个所述预设拍摄角度对应各个像素点的像素值,生成每个所述预设拍摄角度对应的第二眼球图像。

22、可选的,所述获取第一眼球图像,包括:

23、获取眼部图像;

24、对所述眼部图像进行目标识别,以获取所述眼部图像中所述眼球的位置信息;

25、基于所述位置信息,生成所述眼球对应的掩膜图像;

26、将所述掩膜图像与所述眼部图像进行融合,以获取所述眼球图像。

27、本公开第二方面实施例提出了一种眼球的三维重建装置,包括:

28、获取模块,用于获取第一眼球图像;

29、生成模块,用于根据所述第一眼球图像,生成每个预设拍摄角度对应的第二眼球图像集,其中,所述预设拍摄角度与所述第一眼球图像的拍摄角度不同;

30、确定模块,用于根据所述第二眼球图像集中每张第二眼球图像的质量,确定每个所述预设拍摄角度对应的目标眼球图像;

31、重建模块,用于基于多张所述目标眼球图像及所述第一眼球图像,对所述第一眼球图像中的眼球进行三维重建。

32、可选的,所述确定模块,包括:

33、第一获取单元,用于获取每个所述预设拍摄角度对应的第二眼球图像集中,每张第二眼球图像与其余各第二眼球图像间的峰值信噪比;

34、第一确定单元,用于根据每张第二眼球图像对应的各个峰值信噪比,确定每张所述第二眼球图像的质量;

35、第二确定单元,用于将每个所述预设拍摄角度对应的第二眼球图像集中质量最高的第二眼球图像,确定为每个所述预设拍摄角度对应的目标眼球图像。

36、可选的,所述第一确定单元,具体用于:

37、根据每张所述第二眼球图像对应的各个峰值信噪比,确定每张所述第二眼球图像对应的峰值信噪比的平均值;

38、根据每张所述第二眼球图像对应的峰值信噪比的平均值,确定每张所述第二眼球图像的质量。

39、可选的,所述生成模块,包括:

40、第二获取单元,用于获取预设空间中每个空间点的位置坐标,及从每个所述预设拍摄角度到每个所述空间点的方向信息;

41、第三获取单元,用于重复n次,将所述第一眼球图像、各个所述空间点的位置坐标及每个所述预设拍摄角度到各个空间点的方向信息,输入神经辐射场模型,以获取每个所述预设拍摄视角下各个空间点对应的n组颜色信息及密度信息,其中,n为大于7的正整数;

42、第四获取单元,用于根据每个所述预设拍摄角度下各个空间点对应的每组颜色信息及密度信息,对每个所述预设拍摄角度对应的第二眼球图像中的每个像素点进行渲染,以获取每个所述预设拍摄角度对应的第二眼球图像集中的每张第二眼球图像。

43、可选的,所述第四获取单元,具体用于:

44、确定每个所述预设拍摄角度对应的参考点,及对应的第二眼球图像中包含的像素点数量;

45、根据位于每个所述参考点与所述第二眼球图像中每个像素点所在的直线上的各个空间点的颜色信息及密度信息,确定每个所述像素点的像素值;

46、根据每个所述预设拍摄角度对应各个像素点的像素值,生成每个所述预设拍摄角度对应的第二眼球图像。

47、可选的,所述获取模块,具体用于:

48、获取眼部图像;

49、对所述眼部图像进行目标识别,以获取所述眼部图像中所述眼球的位置信息;

50、基于所述位置信本文档来自技高网...

【技术保护点】

1.一种眼球的三维重建方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述第二眼球图像集中每张第二眼球图像的质量,确定每个所述预设拍摄角度对应的目标眼球图像,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据每张第二眼球图像对应的各个峰值信噪比,确定每张所述第二眼球图像的质量,包括:

4.根据权利要求1所述的方法,其特征在于,所述根据所述第一眼球图像,生成每个预设拍摄角度对应的第二眼球图像集,包括:

5.根据权利要求4所述的方法,其特征在于,所述根据每个所述预设拍摄角度下各个空间点对应的每组颜色信息及密度信息信息,对每个所述预设拍摄角度对应的第二眼球图像中的每个像素点进行渲染,以获取每个所述预设拍摄角度对应的第二眼球图像集中的每张第二眼球图像,包括:

6.根据权利要求1-5任一所述的方法,其特征在于,所述获取第一眼球图像,包括:

7.一种眼球的三维重建装置,其特征在于,包括:

8.一种电子设备,其特征在于,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如权利要求1-6中任一所述的眼球的三维重建方法。

9.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,实现如权利要求1-6中任一所述的眼球的三维重建方法。

10.一种计算机程序产品,其特征在于,包括计算机程序,所述计算机程序在被处理器执行时,实现如权利要求1-6中任一项所述的眼球的三维重建方法。

...

【技术特征摘要】

1.一种眼球的三维重建方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述第二眼球图像集中每张第二眼球图像的质量,确定每个所述预设拍摄角度对应的目标眼球图像,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据每张第二眼球图像对应的各个峰值信噪比,确定每张所述第二眼球图像的质量,包括:

4.根据权利要求1所述的方法,其特征在于,所述根据所述第一眼球图像,生成每个预设拍摄角度对应的第二眼球图像集,包括:

5.根据权利要求4所述的方法,其特征在于,所述根据每个所述预设拍摄角度下各个空间点对应的每组颜色信息及密度信息信息,对每个所述预设拍摄角度对应的第二眼球图像中的每个像素点进行渲染,以获取每个所述预设拍摄角度对...

【专利技术属性】
技术研发人员:梅昊陈
申请(专利权)人:北京小米移动软件有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1