多图像融合的诊断报告生成方法、模型训练方法及设备技术

技术编号:44904132 阅读:20 留言:0更新日期:2025-04-08 18:50
本发明专利技术公开了多图像融合的诊断报告生成方法、模型训练方法及设备,模型训练方法包括以下步骤:采集不同部位的共聚焦显微内镜图像以及对应的白光内镜图像和诊断报告,建立数据集;构建包括图像解码模块和文本生成模块的诊断报告生成模型;基于数据集对所述诊断报告生成模型进行训练,直至达到预设收敛条件;所述图像解码模块用于生成局部特征向量和整体特征向量的融合结果,所述文本生成模块用于生成融合结果对应的第一主题向量,并将第一主题向量和先验知识对应的第二主题向量进行语句合并,生成诊断报告。本发明专利技术不仅减轻了医生负担,提升了诊断速度,而且可以避免遗漏、误判等情况,提高了诊断报告的准确性。

【技术实现步骤摘要】

本专利技术涉及诊断报告自动生成领域,尤其涉及一种多图像融合的诊断报告生成方法、模型训练方法及设备


技术介绍

1、共聚焦显微内镜是一种可以借助胃镜、结肠镜等通道伸入人体,获取细胞与亚细胞级别的局部组织学图像从而精准诊断微小病灶、胃肠道病变及早期胃肠道癌变等疾病的医疗设备,在临床检查时常结合白光内镜一起使用。

2、在进行共聚焦显微内镜检查后,医生需要亲自分析检查过程的共聚焦显微内镜图像以及对应的白光内镜图像并撰写诊断报告,然后手动录入到专用的eis(内镜中心信息系统)中,不仅费时费力,大大降低了检查效率而且根据医生经验的不同,可能会出现遗漏、误判的情况。


技术实现思路

1、本专利技术提供了一种多图像融合的诊断报告生成方法、模型训练方法及设备,解决了以上所述的技术问题。

2、本专利技术实施例的第一方面提供了一种多图像融合的诊断报告生成模型训练方法,包括以下步骤:

3、步骤1,采集不同部位的共聚焦显微内镜图像以及对应的白光内镜图像和诊断报告,建立数据集;>

4、步骤2,本文档来自技高网...

【技术保护点】

1.一种多图像融合的诊断报告生成模型训练方法,其特征在于,包括以下步骤:

2.根据权利要求1所述多图像融合的诊断报告生成模型训练方法,其特征在于,所述步骤1具体为:

3.根据权利要求1或2所述多图像融合的诊断报告生成模型训练方法,其特征在于,通过所述图像解码模块生成所述局部特征向量和所述整体特征向量的融合结果,具体为:

4.根据权利要求3所述多图像融合的诊断报告生成模型训练方法,其特征在于,所述先验知识包括疾病诊断信息和部位信息,

5.根据权利要求4所述多图像融合的诊断报告生成模型训练方法,其特征在于,通过所述文本生成模块生成诊断报告,具体...

【技术特征摘要】

1.一种多图像融合的诊断报告生成模型训练方法,其特征在于,包括以下步骤:

2.根据权利要求1所述多图像融合的诊断报告生成模型训练方法,其特征在于,所述步骤1具体为:

3.根据权利要求1或2所述多图像融合的诊断报告生成模型训练方法,其特征在于,通过所述图像解码模块生成所述局部特征向量和所述整体特征向量的融合结果,具体为:

4.根据权利要求3所述多图像融合的诊断报告生成模型训练方法,其特征在于,所述先验知识包括疾病诊断信息和部位信息,

5.根据权利要求4所述多图像融合的诊断报告生成模型训练方法,其特征在于,通过所述文本生成模块生成诊断报告,具体为...

【专利技术属性】
技术研发人员:朱永凯段西尧谭梦旖冯宇
申请(专利权)人:精微视达医疗科技苏州有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1