当前位置: 首页 > 专利查询>安徽大学专利>正文

一种基于商空间理论的多模态内窥镜多组织病灶识别方法以及应用技术

技术编号:41648143 阅读:19 留言:0更新日期:2024-06-13 02:39
本发明专利技术涉及医学图像、深度学习和计算机视觉领域,公开了一种基于商空间理论的多模态内窥镜多组织病灶识别方法,包括如下步骤:步骤S1,收集消化道的内窥镜图像数据集,这些数据集包含了消化道不同组织的内窥镜图像以及相应的组织和病变概念标注,将数据集划分成训练集和测试集,并对训练数据进行数据处理;步骤S2,构建基础Transformer编码器和详细CNN编码器从输入的消化道内窥镜图像中提取到不同粒度的有用视觉特征。本发明专利技术通过构建基本Transformer编码器和详细CNN编码器模块,使用分类器将商空间编码器的输出激活映射到最终的概念标签上,输出每个概念在图像病变中的位置可视化的特征图和病变区域概念。

【技术实现步骤摘要】

本专利技术涉及医学图像、深度学习和计算机视觉领域,一种基于商空间理论的多模态内窥镜多组织病灶识别方法。


技术介绍

1、随内窥镜已经成为当前临床多种疾病诊疗中必不可少的工具。内窥镜可以快捷的帮助临床医生实时检查多种部位和组织器官,实现疾病诊断、疾病分型、病变量化分割等诊疗任务。当前最新的多模态内窥镜,由于其结合多种内窥镜成像技术,可无创或微创的实时呈现组织及病变区域并进行组织学评估,已经成为临床中肠癌,胃癌、宫颈癌、食管癌、膀胱癌筛查的首选“金标准”。这些内窥镜所能筛查的癌症均在我国癌症发病率和死亡率的前十名内。开展内窥镜检查在不同诊疗任务和病种中的研究,可有效提高疾病诊疗准确性,特别是在癌症筛查中降低患者死亡率。早期筛查对于癌症患者至关重要,早期癌症患者的5年生存率超过90%。

2、近年来,随着以深度学习为代表的人工智能技术飞速发展,在胃或食管上都有一些多模态内窥镜辅助诊断智能方法开展初始的探索,证明了人工智能促进多模态内窥镜检查的可行性。然而,这些面向单一组织器官的智能方法忽略了内窥镜本身在多组织器官中广泛、通用的优点,临床价值较低。目前还没本文档来自技高网...

【技术保护点】

1.一种基于商空间理论的多模态内窥镜多组织病灶识别方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的一种基于商空间理论的多模态内窥镜多组织病灶识别方法,其特征在于,所述步骤S1包括如下子步骤:

3.根据权利要求2所述的一种基于商空间理论的多模态内窥镜多组织病灶识别方法,其特征在于,所述步骤S2包括如下子步骤:

4.根据权利要求3所述的一种基于商空间理论的多模态内窥镜多组织病灶识别方法,其特征在于,所述步骤S3包括如下子步骤:

5.根据权利要求4所述的一种基于商空间理论的多模态内窥镜多组织病灶识别方法以及应用,其特征在于,所述步骤S4...

【技术特征摘要】

1.一种基于商空间理论的多模态内窥镜多组织病灶识别方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的一种基于商空间理论的多模态内窥镜多组织病灶识别方法,其特征在于,所述步骤s1包括如下子步骤:

3.根据权利要求2所述的一种基于商空间理论的多模态内窥镜多组织病灶识别方法,其特征在于,所述步骤s2包括如下子步骤:

4.根据权利要求3所述的一种基于商空间理论的多模态内窥镜多组织...

【专利技术属性】
技术研发人员:徐晨初朱行来刘金豪齐荣辉陈洁赵姝夏志强
申请(专利权)人:安徽大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1