生成三维图像的报告制造技术

技术编号:26224165 阅读:31 留言:0更新日期:2020-11-04 10:57
生成三维图像的报告。本公开的各种示例提供了一种生成三维(3D)图像的报告的方法和装置。该方法包括:使用用注释的3D图像训练的第一机器学习(ML)模块来标识3D图像中的多个体积特征;使用用注释的3D图像和与注释的3D图像相关联的报告训练的第二ML模块来标识与3D图像相关联的多个语义表示;以及使用第三ML模块基于体积特征和语义表示来生成3D图像的报告,该第三ML模块用报告和由第一ML模块和第二ML模块使用注释的3D图像和报告生成的输出来训练。

【技术实现步骤摘要】
生成三维图像的报告
本公开涉及图像处理技术。更特别地,本公开涉及一种生成三维(3D)图像的报告的方法和装置。
技术介绍
三维(3D)成像技术,诸如超声、计算断层摄影术(CT)、磁共振成像(MRI)、正电子发射断层摄影术(PET)以及诸如此类能够产生扫描结构的三维表示,并被广泛用于许多领域中,所述领域诸如医学诊断、机械故障检测、逆向工程等。3D图像由领域专家读取,领域专家然后撰写(compose)关于发现和印象的分析报告。
技术实现思路
该部分提供了本公开的一般概述,并且不是其全部范围或其全部特征的全面公开。各种示例提供了一种生成3D图像的报告的方法,包括:使用用注释的3D图像训练的第一机器学习ML模块来标识3D图像中的多个体积特征;使用用注释的3D图像和与注释的3D图像相关联的报告训练的第二ML模块来标识与3D图像相关联的多个语义表示;以及使用第三ML模块基于体积特征和语义表示来生成3D图像的报告,所述第三ML模块用报告和由第一ML模块和第二ML模块使用注释的3D图像和报告生成的输出来训练。<本文档来自技高网...

【技术保护点】
1.一种生成三维3D图像的报告的方法,包括:/n使用用注释的3D图像训练的第一机器学习ML模块来标识(S11)3D图像中的多个体积特征;/n使用用注释的3D图像和与注释的3D图像相关联的报告训练的第二ML模块来标识(S12)与3D图像相关联的多个语义表示;以及/n使用第三ML模块基于体积特征和语义表示来生成(S13)3D图像的报告,所述第三ML模块用报告和由第一ML模块和第二ML模块使用注释的3D图像和报告生成的输出来训练。/n

【技术特征摘要】
20190502 EP 19172268.51.一种生成三维3D图像的报告的方法,包括:
使用用注释的3D图像训练的第一机器学习ML模块来标识(S11)3D图像中的多个体积特征;
使用用注释的3D图像和与注释的3D图像相关联的报告训练的第二ML模块来标识(S12)与3D图像相关联的多个语义表示;以及
使用第三ML模块基于体积特征和语义表示来生成(S13)3D图像的报告,所述第三ML模块用报告和由第一ML模块和第二ML模块使用注释的3D图像和报告生成的输出来训练。


2.根据权利要求1所述的方法,其中,使用第二ML模块来标识与3D图像相关联的多个语义表示包括:
使用第二ML模块的多标签分类模块标识与3D图像中的体积结构相关联的属性的语义表示,使用注释的3D图像和从与注释的3D图像相关联的报告中获得的语义表示来训练多标签分类模块。


3.根据权利要求1所述的方法,其中,生成3D图像的报告包括:
在每个时间步骤处使用第三ML模块、体积特征、语义表示和在先前时间步骤中选择的语义元素从预定义元素集中选择语义元素;以及
将选择的语义元素添加到报告中。


4.根据权利要求3所述的方法,其中预定义元素集是预定义词汇表,并且从预定义元素集中选择语义元素包括:
使用第三ML模块计算给定在先前时间步骤中选择的语义元素和语义表示的情况下预定义词汇表中的每个语义元素的条件概率值;以及
根据词汇表中的每个语义元素的条件概率值选择语义元素。


5.根据权利要求1所述的方法,进一步包括:
使用注释的3D图像中的体积结构的注释来确定第一ML模块的参数;
使用注释的3D图像、报告和从由第一ML模块和第二ML模块处理注释的3D图像生成的结果来确定第三ML模块的参数;以及
在确定第三ML模块的参数时,使用由第三ML模块生成的反馈来调整第一ML模块的参数。


6.根据权利要求1所述的方法,进一步包括:
通过使用注释的3D图像中的体积结构的注释来训练第一ML模块和第二ML模块中的一个,来确定第一ML模块和第二ML模块中的一个的参数;以及
使用参数来初始化第一ML模块和第二ML模块中的另一个。


7.根据权利要求1-6中的任一项所述的方法,进一步包括:
获得由图像处理工作站生成的历史检验记录,所述历史检验记录包括:历史3D图像、在图像处理工作站中生成的历史3D图像上的标记、以及与历史3D图像相关联的历史分析报告;
提供历史3D图像作为注释的3D图像,提供标记作为注释的3D图像的注释,以及提供历史分析报告作为与注释的3D图像相关联的报告。


8.一种生成三维3D图像的报告的装置,包括:
图像特征标识模块(22),其被...

【专利技术属性】
技术研发人员:刘宁迟颖
申请(专利权)人:西门子医疗有限公司
类型:发明
国别省市:德国;DE

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1