当前位置: 首页 > 专利查询>海南大学专利>正文

基于多模态数据融合的心脏评估快速诊断方法及相关装置制造方法及图纸

技术编号:46052661 阅读:9 留言:0更新日期:2025-08-11 15:40
本发明专利技术公开一种基于多模态数据融合的心脏评估快速诊断方法及相关装置。该方法,获取医疗数据包括超声心动图影像序列数据、患者属性信息病历数据;提取超声心动图影像序列数据的图像特征;使用BERT模型提取患者属性信息病历数据的编码特征;将图像特征输入Unet3+模型编码器中,获取多尺度特征;将多尺度特征和编码特征基于Transformer编码器的PICA模块中进行图像与文本之间的双向转换,获得深度融合的融合特征;将融合特征输入Unet3+模型解码器中,输出心脏结构分割结果,并根据心脏结构分割结果自动计算射血分数,并根据心脏结构分割结果自动计算射血分数。本发明专利技术能够实现高效、精准且个性化的超声心动图分析。

【技术实现步骤摘要】

本专利技术涉及医学影像分割,尤其涉及基于多模态数据融合的心脏评估快速诊断方法及相关装置


技术介绍

1、心血管疾病(cvd)已成为全球健康领域的重大威胁,其发病率和死亡率随着生活方式的改变和人口老龄化而持续攀升,给无数患者及其家庭带来了沉重的负担。早期诊断和预防对于降低cvd相关的发病率和死亡率至关重要,这依赖于医学成像技术的不断进步来改善诊断和治疗结果。心血管研究和医学成像的进步显著提高了诊断精度,通过磁共振成像(mri)、计算机断层扫描(ct)和超声波等方式实现了对心脏结构和功能的无创评估。作为一种先进的超声技术,超声心动图能够全面评估心脏的解剖结构和功能,这对于早期心血管检测和诊断至关重要。其实时成像、无辐射性、成本效益和广泛的临床应用进一步增强了其诊断价值。然而,超声心动图的诊断价值在很大程度上取决于心脏结构的准确分割。

2、深度学习(dl)提供了一种端到端的学习范式,能够自动提取复杂的特征进行图像分割。2015年,u-net网络的出现彻底改变了医学图像分割,并取得了显著成果。例如,zyuzin等人开发了一种基于u-net的自动分割方法本文档来自技高网...

【技术保护点】

1.基于多模态数据融合的心脏评估快速诊断方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的基于多模态数据融合的心脏评估快速诊断方法,其特征在于,所述属性信息包括年龄、性别、BMI以及病历。

3.根据权利要求1所述的基于多模态数据融合的心脏评估快速诊断方法,其特征在于,提取所述超声心动图影像序列数据的图像特征,公式如下所示:

4.根据权利要求1所述的基于多模态数据融合的心脏评估快速诊断方法,其特征在于,所述将多尺度特征和编码特征基于Transformer编码器的PICA模块中进行图像与文本之间的双向转换,获得深度融合的融合特征,具体包括如下步骤:...

【技术特征摘要】

1.基于多模态数据融合的心脏评估快速诊断方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的基于多模态数据融合的心脏评估快速诊断方法,其特征在于,所述属性信息包括年龄、性别、bmi以及病历。

3.根据权利要求1所述的基于多模态数据融合的心脏评估快速诊断方法,其特征在于,提取所述超声心动图影像序列数据的图像特征,公式如下所示:

4.根据权利要求1所述的基于多模态数据融合的心脏评估快速诊断方法,其特征在于,所述将多尺度特征和编码特征基于transformer编码器的pica模块中进行图像与文本之间的双向转换,获得深度融合的融合特征,具体包括如下步骤:

5.根据权利要求1所述的基于多模态数据融合的心脏评估快速诊断方法,其特征在于,所述相似度sij通过计算两个模态...

【专利技术属性】
技术研发人员:孙敬张董佳慧李春浩刘春磊孙志刚徐卓远曹春杰
申请(专利权)人:海南大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1