一种基于跨模态对齐与显著性语义区域的胸片报告生成方法及系统技术方案

技术编号:46599221 阅读:2 留言:0更新日期:2025-10-10 21:31
本发明专利技术提供了一种基于跨模态对齐与显著性语义区域的胸片报告生成方法及系统,应用于数据处理技术领域。本申请基于用于识别医疗语义信息的显著性区域的网络模型对目标患者的胸部X光胸片图像信息以及对应的初始放射学报告文本信息进行处理,生成医疗语义信息的显著性区域和显著性图;基于由显著性区域引导的掩码图像建模模块对目标患者的胸部X光胸片图像、医疗语义信息的显著性区域图像进行处理,生成经过掩码图像重建后的图像块特征;基于由显著性图引导的语言生成模型对显著性图和经过掩码图像重建后的图像块特征进行处理,生成目标放射学报告信息;对目标放射学报告信息进行处理,生成胸片报告生成的评估结果。

【技术实现步骤摘要】

本专利技术涉及数据处理,特别涉及一种基于跨模态对齐与显著性语义区域的胸片报告生成方法及系统


技术介绍

1、在医学领域,胸部x光检查是一种广泛应用的诊断手段,胸片报告对于医生准确判断患者病情至关重要。随着医学影像技术的发展,传统的依靠医生手动撰写胸片报告的方式逐渐暴露出诸多问题。一方面,医生日常工作量巨大,手动撰写报告耗费大量时间和精力,容易出现疲劳,进而导致报告的准确性和一致性受到影响。不同医生对于胸片图像的解读存在个体差异,这可能使得相似病情的报告描述存在较大不同,影响诊断的准确性和规范性。例如,在判断肺部纹理是否增粗、结节的大小和形态描述等方面,不同医生的判断标准和表述方式各不相同。

2、另一方面,随着人工智能技术在医疗领域的逐步应用,利用计算机辅助生成胸片报告成为研究热点。但现有的一些基于人工智能的胸片报告生成方法,往往存在对图像中细微特征和复杂语义理解不足的问题。例如,部分方法难以准确识别出早期肺部病变的微小异常,或者在将图像特征转化为准确、全面的文字报告时存在困难,导致生成的报告无法为医生提供足够详细和准确的诊断信息。此外,在实际临本文档来自技高网...

【技术保护点】

1.一种基于跨模态对齐与显著性语义区域的胸片报告生成方法,其特征在于,包括:

2.如权利要求1所述的方法,其特征在于,基于用于识别医疗语义信息的显著性区域的网络模型对目标患者的胸部X光胸片图像信息以及对应的初始放射学报告文本信息进行处理,生成医疗语义信息的显著性区域和显著性图,包括:

3.如权利要求2所述的方法,其特征在于,基于用于识别医疗语义信息的显著性区域的网络模型对目标患者的胸部X光胸片图像信息以及对应的初始放射学报告文本信息进行处理,生成医疗语义信息的显著性区域和显著性图,还包括:

4.如权利要求2所述的方法,其特征在于,基于由显著性区域引导的...

【技术特征摘要】

1.一种基于跨模态对齐与显著性语义区域的胸片报告生成方法,其特征在于,包括:

2.如权利要求1所述的方法,其特征在于,基于用于识别医疗语义信息的显著性区域的网络模型对目标患者的胸部x光胸片图像信息以及对应的初始放射学报告文本信息进行处理,生成医疗语义信息的显著性区域和显著性图,包括:

3.如权利要求2所述的方法,其特征在于,基于用于识别医疗语义信息的显著性区域的网络模型对目标患者的胸部x光胸片图像信息以及对应的初始放射学报告文本信息进行处理,生成医疗语义信息的显著性区域和显著性图,还包括:

4.如权利要求2所述的方法,其特征在于,基于由显著性区域引导的掩码图像建模模块对目标患者的胸部x光胸片图像、医疗语义信息的显著性区域图像进行处理,生成经过掩码图像重建后的图像块特征,包括:

...

【专利技术属性】
技术研发人员:郎宁周修庄颜瑞馨侯泽毅
申请(专利权)人:北京大学第三医院北京大学第三临床医学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1