基于深度学习的胃肠道间质瘤中核分裂象智能检测方法技术

一种基于深度学习的胃肠道间质瘤中核分裂象智能检测方法：对获取的苏木精‑伊红染色病理图像进行预处理；使用EfficientDet‑D0作为深度学习检测模型，并进行训练；使用U‑Net作为深度学习分割模型，并对深度学习分割模型进行训练；构建深度学习分类模型；训练深度学习分类模型；使用训练好的深度学习检测模型对被试者的苏木精‑伊红染色病理图像进行检测；使用深度学习分割模型对病理图像进行分割，对分割后的结果进行检测；将基于深度学习检测模型的核分裂象检测结果和基于深度学习分割模型的核分裂象检测结果进行比对，得到最终分类结果。本发明专利技术通过分析输入的苏木精‑伊红染色图像，检测其中核分裂象的数量，实现对胃肠道间质瘤危险程度的判断。

【技术实现步骤摘要】
基于深度学习的胃肠道间质瘤中核分裂象智能检测方法
本专利技术涉及一种胃肠道间质瘤中核分裂象检测方法。特别是涉及一种基于深度学习的胃肠道间质瘤中核分裂象智能检测方法。
技术介绍
胃肠道间质瘤是一类起源于胃肠道间叶组织的肿瘤，占消化道间叶肿瘤的大部分，是最常见的腹部软组织恶性肿瘤。胃肠道间质瘤最常见于胃(50％～60％)、其次是小肠(30％～35％)、结肠和直肠(5％)、食道(<1％)，以及少部分消化道外(肠系膜，大网膜和腹膜后；<5％)。平均诊断年龄为63岁，无性别差异。胃肠道间质瘤患者常因肿瘤位于黏膜下层和肌层而无特征性症状,故术前诊断较为困难。传统的辅助检查缺乏特异性,内镜和影像学检查仅有助于确定肿瘤部位。病理诊断依靠应用超声内镜下细针穿刺活检得到组织样本,其诊断准确率较高，是胃肠道间质瘤诊断的“金标准”。因此,胃肠道间质瘤的诊断应结合临床症状、体征、消化道内镜及影像学检查,但最终必须依靠病理诊断。病理学上使用苏木精-伊红染色方法处理活检采集的组织样本制成病理切片，染色试剂中中苏木精可以使细胞核内的染色质与胞质内的核酸着紫蓝色，而试剂中的伊红可以使细胞质和细胞外基质中的成分着红色，从而方便医生对病理切片进行观察。医生在显微镜下观察病理切片中的相关特征，从而判断患者的胃肠道间质瘤的危险程度。其中，核分裂象数量是一个非常重要的指导指标——显微镜视野内的核分裂象数目是医生判断胃肠道间质瘤危险程度的重要指标。核分裂象指的是细胞中处于有丝分裂前期、有丝分裂中期、有丝分裂后期和有丝分裂末期的细胞的统称。r>深度学习方法作为一种机器学习算法，以其应用场景多、应用效果好等优点被广泛应用到医学的诊断中。深度学习方法起源于人工神经网络，它是一种对人类大脑中神经元的人工模拟，从而产生优异的拟合能力、泛化能力和问题解决能力。它被应用于自然语言处理、图像识别、语音识别等领域，而在图像识别领域，它又可细分为语义分割、目标检测、实例分割等方面。由于病理切片图像中核分裂象的形态多变，其可以细分为前期、中期、后期和末期，使检测较为困难；图片中存在某些易混淆对象，如凋亡细胞，增大了检测难度；病理图像中非核分裂象细胞远多于核分裂象细胞，进一步降低了检测准确率，提高了检测难度。而深度学习方法具有泛化能力强等特征，非常适用于这种复杂情况下目标的检测。如近年来在目标检测领域应用效果良好的FasterR-CNN，其具有较高的检测准确率。但是由于病理图片具有类别单一、前景-背景极度不均衡等特点，需要一种结合深度学习检测方法、分割方法和分类方法的苏木精-伊红染色病理切片图像中核分裂象检测计数的方法。
技术实现思路
本专利技术所要解决的技术问题是，提供一种基于深度学习的胃肠道间质瘤中核分裂象智能检测方法。本专利技术所采用的技术方案是：一种基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，包括如下步骤：1)对获取的苏木精-伊红染色病理图像进行预处理；2)使用EfficientDet-D0作为深度学习检测模型，并对深度学习检测模型进行训练；3)使用U-Net作为深度学习分割模型，并对深度学习分割模型进行训练；4)构建深度学习分类模型；5)训练深度学习分类模型；6)使用训练好的深度学习检测模型对被试者的苏木精-伊红染色病理图像进行检测；7)使用深度学习分割模型对病理图像进行分割，对分割后的结果进行检测；8)将基于深度学习检测模型的核分裂象检测结果和基于深度学习分割模型的核分裂象检测结果进行比对，得到最终分类结果。本专利技术的基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，使用深度学习中分割算法对切片图像中的核分裂象和无关背景进行分割，根据分割结果对核分裂象的轮廓进行检测，同时将病理图像输入目标检测网络得到检测结果，然后参考分割得到的结果和检测得到的结果得到最终结果，从而为医生的病理诊断提供精准的中间数据。本专利技术可安装在服务器电脑上，通过分析输入的苏木精-伊红染色图像，检测其中核分裂象的数量，实现对胃肠道间质瘤危险程度的判断。附图说明图1是本专利技术基于深度学习的胃肠道间质瘤中核分裂象智能检测方法的流程图；图2是本专利技术构建的深度学习分类模型的结构示意图；图3是本专利技术所构建深度学习分类模型中第一卷积单元的结构示意图。具体实施方式下面结合实施例和附图对本专利技术的基于深度学习的胃肠道间质瘤中核分裂象智能检测方法做出详细说明。如图1所示，本专利技术的基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，包括如下步骤：1)对获取的苏木精-伊红染色病理图像进行预处理；包括：(1)分别对每一个苏木精-伊红染色病理图像进行切块，分割成512*512大小；(2)对切块后的病理图像使用高斯模糊方法进行去噪：其中，G(u,v)代表高斯核在(u,v)的值，u和v分别表示图像空间坐标；表征模糊半径；σ是正态分布的标准差，为避免图像尺寸缩小，本专利技术在图像四周填充近邻值；(3)对去噪后的病理图像采用如下公式进行正则化处理：其中，IR、IG、IB分别代表正则化之前的红色通道、绿色通道和蓝色通道的像素值，I'R、I'G、I'B分别代表正则化之后的红色通道、绿色通道和蓝色通道的像素值；uR、uG、uB分别代表正则化之前所有病理图像的红色通道、绿色通道和蓝色通道的像素值均值；σR、σG和σB分别代表正则化之前所有病理图像的红色通道、绿色通道和蓝色通道的像素值标准差，计算公式如下：其中，H和W分别代表图像的纵向高度和横向宽度，代表图像x在i,j位置上通道C的像素值，C＝R,G,B。2)使用EfficientDet-D0作为深度学习检测模型，并对深度学习检测模型进行训练；具体是：使用EfficientDet-D0作为深度学习检测模型，将预处理后的病理图像打乱顺序后输入到所述的深度学习检测模型中，使用Adam优化器对所述的深度学习检测模型进行训练，批大小设置为每批8张图片，初始的学习率设置为0.001，并且每3000次迭代降低一次学习率，每次学习率降低为0.9，训练中使用的损失函数为focalloss，公式如下：其中，p为深度学习检测模型对目标类别预测的概率，y为真正的类别标签，γ设置为2；在训练50000次迭代后得到训练好的深度学习检测模型。3)使用U-Net作为深度学习分割模型，并对深度学习分割模型进行训练；具体是：采用U-Net作为深度学习分割模型，将预处理后的病理图像打乱顺序后输入所述的深度学习分割模型，并将深度学习分割模型得到的结果与输入图像相对应的掩膜进行对比训练，训练过程中，使用随机梯度下降优化器，所述随机梯度下降优化器的惯性参数设置为0.9，初始的学习率设置为0.01，并且每3000次迭代降低一次学习率，每次学习率降低为0.9，训练中使用的损失函数为DiceLoss，公式如下：其中，IX是深度学本文档来自技高网...

【技术保护点】
1.一种基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，其特征在于，包括如下步骤：/n1)对获取的苏木精-伊红染色病理图像进行预处理；/n2)使用EfficientDet-D0作为深度学习检测模型，并对深度学习检测模型进行训练；/n3)使用U-Net作为深度学习分割模型，并对深度学习分割模型进行训练；/n4)构建深度学习分类模型；/n5)训练深度学习分类模型；/n6)使用训练好的深度学习检测模型对被试者的苏木精-伊红染色病理图像进行检测；/n7)使用深度学习分割模型对病理图像进行分割，对分割后的结果进行检测；/n8)将基于深度学习检测模型的核分裂象检测结果和基于深度学习分割模型的核分裂象检测结果进行比对，得到最终分类结果。/n

【技术特征摘要】
1.一种基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，其特征在于，包括如下步骤：
1)对获取的苏木精-伊红染色病理图像进行预处理；
2)使用EfficientDet-D0作为深度学习检测模型，并对深度学习检测模型进行训练；
3)使用U-Net作为深度学习分割模型，并对深度学习分割模型进行训练；
4)构建深度学习分类模型；
5)训练深度学习分类模型；
6)使用训练好的深度学习检测模型对被试者的苏木精-伊红染色病理图像进行检测；
7)使用深度学习分割模型对病理图像进行分割，对分割后的结果进行检测；
8)将基于深度学习检测模型的核分裂象检测结果和基于深度学习分割模型的核分裂象检测结果进行比对，得到最终分类结果。


2.根据权利要求1所述的基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，其特征在于，步骤1)包括：
(1)分别对每一个苏木精-伊红染色病理图像进行切块，分割成512*512大小；
(2)对切块后的病理图像使用高斯模糊方法进行去噪：



其中，G(u,v)代表高斯核在u,v的值，u和v分别表示图像空间坐标；表征模糊半径；σ是正态分布的标准差，在图像四周填充近邻值；
(3)对去噪后的病理图像采用如下公式进行正则化处理：



其中，IR、IG、IB分别代表正则化之前的红色通道、绿色通道和蓝色通道的像素值，I'R、I'G、I'B分别代表正则化之后的红色通道、绿色通道和蓝色通道的像素值；uR、uG、uB分别代表正则化之前所有病理图像的红色通道、绿色通道和蓝色通道的像素值均值；σR、σG和σB分别代表正则化之前所有病理图像的红色通道、绿色通道和蓝色通道的像素值标准差，计算公式如下：






其中，H和W分别代表图像的纵向高度和横向宽度，代表图像x在i,j位置上通道C的像素值，C＝R,G,B。


3.根据权利要求1所述的基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，其特征在于，步骤2)包括：
使用EfficientDet-D0作为深度学习检测模型，将预处理后的病理图像打乱顺序后输入到所述的深度学习检测模型中，使用Adam优化器对所述的深度学习检测模型进行训练，批大小设置为每批8张图片，初始的学习率设置为0.001，并且每3000次迭代降低一次学习率，每次学习率降低为0.9，训练中使用的损失函数为focalloss，公式如下：



其中，p为深度学习检测模型对目标类别预测的概率，y为真正的类别标签，γ设置为2；
在训练50000次迭代后得到训练好的深度学习检测模型。


4.根据权利要求1所述的基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，其特征在于，步骤3)包括：
采用U-Net作为深度学习分割模型，将预处理后的病理图像打乱顺序后输入所述的深度学习分割模型，并将深度学习分割模型得到的结果与输入图像相对应的掩膜进行对比训练，训练过程中，使用随机梯度下降优化器，所述随机梯度下降优化器的惯性参数设置为0.9，初始的学习率设置为0.01，并且每3000次迭代降低一次学习率，每次学习率降低为0.9，训练中使用的损失函数为DiceLoss，公式如下：



其中，IX是深度学习分割模型得到的分割结果，IY是掩膜；
在训练50000次迭代后得到训练好的深度学习分割模型。


5.根据权利要求1所述的基于深度学习的胃肠道间质瘤中核分裂象智能检测方法，其特征在于，步骤4)所述的深度学习分类模型，包括：依次连接的第一卷积层、第一批量标准化层、第一卷积单元、第二卷积单元、第三卷积单元、第四卷积单元、输入一维化层、第一全连接层、第二全连接层、概率预测层；其中，所述第一卷积层的输入为外部输入数据，所述概率预测层的输出构成深度学习分类模型的概率输出；
所述的第一卷积单元、第二卷积单元、...

【专利技术属性】
技术研发人员：高忠科，袁涛，安建鹏，马文庆，
申请(专利权)人：天津大学，天津富瑞隆金属制品有限公司，
类型：发明
国别省市：天津;12