System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像显示方法、装置、系统、移动终端和存储介质制造方法及图纸_技高网

图像显示方法、装置、系统、移动终端和存储介质制造方法及图纸

技术编号:41115985 阅读:2 留言:0更新日期:2024-04-25 14:06
本申请涉及一种图像显示方法、装置、系统、移动终端和存储介质。应用于移动终端,该方法包括:获取待测组织实时的视频;视频是由内窥镜对待测组织进行拍摄,并传输至移动终端的;接收服务器发送的待测组织的三维模型;三维模型是服务器预先根据待测组织的术前医学图像进行构建的;对视频以及三维模型进行配准,以及基于配准结果将三维模型叠加至视频上并进行显示。采用该方法,能够在移动终端上同时显示待测组织实时的视频以及待测组织的三维模型,且,移动终端还能将待测组织的三维模型叠加在实时视频上进行显示;不仅能够提高内窥镜视频与三维模型的显示效果;还能通过叠加显示为用户提供更多的参考和引导信息,提高内窥镜检查的效率。

【技术实现步骤摘要】

本申请涉及医疗设备,特别是涉及一种图像显示方法、装置、系统、移动终端和存储介质


技术介绍

1、随着医疗技术的发展,医疗设备也逐渐向智能型和小型化发展,例如:内窥镜。内窥镜经人体天然孔道或小切口进入人体后,便可实现对人体内的组织、器官等部位的检查。

2、传统方法中,一般会在术前对患者组织进行扫描,获得患者组织的医学影像,然后将该医学影像传输至电脑上;医生在对患者进行内窥镜检查时,可以一边观察内窥镜采集的图像,同时也可以去电脑上观察患者组织的医学影像,然后通过对两者综合分析获得最终的检查结果。

3、然而,上述对内窥镜采集的图像以及患者组织的医学影像进行显示的方式,不利于医生在检查期间对患者组织的观察,因此,传统的显示方式存在显示效果不佳的问题。


技术实现思路

1、基于此,有必要针对上述技术问题,提供一种能够提高内窥镜图像与组织医学图像的显示效果的图像显示方法、装置、系统、移动终端、计算机可读存储介质和计算机程序产品。

2、第一方面,本申请提供了一种图像显示方法,应用于移动终端,该方法包括:

3、获取待测组织实时的视频;视频是由内窥镜对待测组织进行拍摄,并传输至移动终端的;

4、接收服务器发送的待测组织的三维模型;三维模型是服务器预先根据待测组织的术前医学图像进行构建的;

5、对视频以及三维模型进行配准,以及基于配准结果将三维模型叠加至视频上并进行显示。

6、在其中一个实施例中,获取待测组织实时的视频,包括:

7、通过视频流流式传输方式,获取微型机传输的待测组织实时的视频;微型机与内窥镜连接,并获取内窥镜采集的待测组织实时的视频。

8、在其中一个实施例中,视频为目标格式的视频;目标格式的视频为微型机对内窥镜采集的原始视频数据进行至少一次格式转换处理后获得的。

9、在其中一个实施例中,格式转换处理包括以下至少一种:颜色编码处理、视频压缩处理。

10、在其中一个实施例中,对视频以及三维模型进行配准之前,该方法还包括:

11、对视频进行解码处理,获得解码视频;

12、采用增强现实技术,对解码视频进行处理,获得增强现实视频数据,并将增强现实视频数据进行渲染显示;

13、相应地,对视频以及三维模型进行配准,以及基于配准结果将三维模型叠加至视频上并进行显示,包括:

14、对增强现实视频数据以及三维模型进行配准,以及基于配准结果将三维模型叠加至增强现实视频数据上并进行显示。

15、在其中一个实施例中,采用增强现实技术,对解码视频进行处理,获得增强现实视频数据,包括:

16、对解码视频进行着色处理,获得着色视频数据;

17、对着色视频数据进行纹理处理,获得纹理视频数据;

18、对纹理视频数据进行网格化处理,获得增强现实视频数据。

19、在其中一个实施例中,对视频以及三维模型进行配准之前,该方法还包括:

20、接收用户在移动终端上触发的操作指令;操作指令用于指示移动终端对视频及三维模型进行配准及叠加显示。

21、在其中一个实施例中,移动终端包括手持终端和/或可穿戴设备。

22、第二方面,本申请还提供了一种图像显示装置,应用于移动终端,该装置包括:

23、获取模块,用于获取待测组织实时的视频;视频是由内窥镜对待测组织进行拍摄,并传输至移动终端的;

24、第一接收模块,用于接收服务器发送的待测组织的三维模型;三维模型是服务器预先根据待测组织的术前医学图像进行构建的;

25、显示模块,用于对视频以及三维模型进行配准,以及基于配准结果将三维模型叠加至视频上并进行显示。

26、第三方面,本申请还提供了一种图像显示系统,包括

27、内窥镜,用于对待测组织进行拍摄;

28、移动终端,用于获取内窥镜传输的待测组织实时的视频,以及接收服务器发送的待测组织的三维模型,并对视频以及三维模型进行配准后,基于配准结果将三维模型叠加至视频上并进行显示;三维模型是服务器预先根据待测组织当前的医学图像进行构建的。

29、在其中一个实施例中,该系统还包括:

30、微型机,与内窥镜连接,用于对内窥镜拍摄的待测组织的原始视频数据进行至少一次格式转换处理后,获得待测组织实时的视频;

31、微型机,还用于通过视频流流式传输方式,将视频传输至移动终端。

32、在其中一个实施例中,微型机包括数据采集卡和流媒体应用软件;

33、数据采集卡,用于获取原始视频数据,并对原始视频数据进行第一格式转换后传输至流媒体应用软件;

34、流媒体应用软件,用于对第一格式转换后的数据进行第二格式转换,获得视频。

35、在其中一个实施例中,移动终端包括增强现实眼镜;

36、增强显示眼镜,还用于对待测组织实时的视频和待测组织的三维模型进行分别渲染显示。

37、第四方面,本申请还提供了一种移动终端,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述第一方面中的图像显示方法的步骤。

38、第五方面,本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面中的图像显示方法的步骤。

39、第六方面,本申请还提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述第一方面中的图像显示方法的步骤。

40、上述图像显示方法、装置、系统、移动终端、存储介质和计算机程序产品,移动终端通过获取待测组织实时的视频;该视频是由内窥镜对待测组织进行拍摄,并传输至移动终端的;以及通过接收服务器发送的待测组织的三维模型;该三维模型是服务器预先根据待测组织的术前医学图像进行构建的;接着,对待测组织实时的视频以及三维模型进行配准,以及基于配准结果将三维模型叠加至视频上并进行显示。采用本申请实施例所提出的图像显示方法,能够在移动终端上同时显示待测组织实时的视频以及待测组织的三维模型,且,移动终端还能将待测组织的三维模型叠加在实时视频上进行显示;不仅能够避免用户在不同的显示器上分别观察内窥镜视频以及三维模型,提高内窥镜视频与三维模型的显示效果;还能通过叠加显示,进一步增强内窥镜视频与三维模型的显示效果;另外,通过叠加显示的三维模型与内窥镜视频,还能为用户提供更多的参考和引导信息,即提供可视化的操作指导,有利于用户更高效地操作内窥镜,缩短内窥镜检查的时间,提高内窥镜检查的效率。

本文档来自技高网...

【技术保护点】

1.一种图像显示方法,其特征在于,应用于移动终端,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述获取待测组织实时的视频,包括:

3.根据权利要求2所述的方法,其特征在于,所述视频为目标格式的视频;所述目标格式的视频为所述微型机对所述内窥镜采集的原始视频数据进行至少一次格式转换处理后获得的。

4.根据权利要求3所述的方法,其特征在于,所述格式转换处理包括以下至少一种:颜色编码处理、视频压缩处理。

5.根据权利要求1所述的方法,其特征在于,所述对所述视频以及所述三维模型进行配准之前,所述方法还包括:

6.根据权利要求5所述的方法,其特征在于,所述采用增强现实技术,对所述解码视频进行处理,获得增强现实视频数据,包括:

7.根据权利要求1所述的方法,其特征在于,所述对所述视频以及所述三维模型进行配准之前,所述方法还包括:

8.根据权利要求1-7中任一项所述的方法,其特征在于,所述移动终端包括手持终端和/或可穿戴设备。

9.一种图像显示装置,其特征在于,应用于移动终端,所述装置包括:

10.一种图像显示系统,其特征在于,包括:

11.根据权利要求10所述的系统,其特征在于,所述系统还包括:

12.根据权利要求11所述的系统,其特征在于,所述微型机包括数据采集卡和流媒体应用软件;

13.根据权利要求10所述的系统,其特征在于,所述移动终端包括增强现实眼镜;

14.一种移动终端,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至8中任一项所述的方法的步骤。

15.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。

...

【技术特征摘要】

1.一种图像显示方法,其特征在于,应用于移动终端,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述获取待测组织实时的视频,包括:

3.根据权利要求2所述的方法,其特征在于,所述视频为目标格式的视频;所述目标格式的视频为所述微型机对所述内窥镜采集的原始视频数据进行至少一次格式转换处理后获得的。

4.根据权利要求3所述的方法,其特征在于,所述格式转换处理包括以下至少一种:颜色编码处理、视频压缩处理。

5.根据权利要求1所述的方法,其特征在于,所述对所述视频以及所述三维模型进行配准之前,所述方法还包括:

6.根据权利要求5所述的方法,其特征在于,所述采用增强现实技术,对所述解码视频进行处理,获得增强现实视频数据,包括:

7.根据权利要求1所述的方法,其特征在于,所述对所述视频以及所述三维模型进行配准之前,所述方法还包括:

<...

【专利技术属性】
技术研发人员:王莹珑
申请(专利权)人:武汉联影智融医疗科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1