一种基于图像先验的细胞图像超分辨方法及装置制造方法及图纸

本发明专利技术公开了一种基于图像先验的细胞图像超分辨方法及其装置，属于计算机视觉和深度学习领域。该方法主要包括以下步骤：拍摄显微镜下的细胞图像；手动标记出三个区域，生成掩膜；生成特征图；提取掩膜；利用图像解码网络生成高分辨率图像；以细胞图像和掩膜作为训练集，训练卷积神经网络；固定网络参数，将训练得到的卷积神经网络，对低分辨率细胞图像进行超分辨。其装置包括：显微图像获取模块、图像预处理模块、图像特征编码模块、图像掩膜提取模块、图像解码模块、神经网络训练模块和细胞超分辨模块。本发明专利技术的细胞图像超分辨方法，充分利用了细胞图像先验知识，大大提高了细胞超分辨的性能，对基于显微图像的病理学诊断有至关重要的意义。

【技术实现步骤摘要】
一种基于图像先验的细胞图像超分辨方法及装置
本专利技术属于医学图像领域，尤其涉及一种基于图像先验的细胞图像超分辨方法和装置。
技术介绍
在显微图像方面，高分辨的显微图像能够帮助医生快速准确地判断细胞病变与否，而且还可以提高人类或计算机程序基于显微图像自动识别疾病的准确率。然而，由于高分辨率相机和高倍数显微镜成本过高，以及地方政策问题，在许多发展中国家仅有部分高水平医院可以做到足够高清(诸如400倍放大倍数)的显微图像，而一些地方医院由于经济条件限制，难以获得如此高倍数的显微图像，这无疑大大限制了当地医院的医疗水平，使得部分来自小城市的患者不得不专程转移至其他城市进行病理诊断。基于这个问题，人们开始提出显微图像超分辨的概念，其中比较成功的方法是荧光标记，通过额外照射一个空心圆荧光，让光电的散射范围更小，突破衍射极限。另一种可能的方法便是通过数字图像超分辨技术来获得边缘更清晰的显微图像。现有的许多基于深度学习的图像超分辨方法都能大幅提高低分辨率图像的清晰度，因此将显微图像进行超分辨处理，即便使用一些低配置的显微成像系统也可以获得足够清晰的图像边缘，以帮助医师准确地进行病理诊断。自2012本文档来自技高网...

【技术保护点】
1.一种基于图像先验的细胞图像超分辨方法，其特征在于，包括如下步骤：S1，拍摄显微镜下的细胞图像；S2，对拍摄得到的每张细胞图像手动标记出背景、细胞质和细胞核三种区域，并生成掩膜；S3，利用特征编码网络，以单张细胞图像为输入，逐渐提取图像特征，再将低层次和高层次特征结合起来，生成一个特征图；S4，利用语义分割网络，从输入的单张细胞图像中提取出背景、细胞质和细胞核三种区域的掩膜；S5，将S3获得的细胞图像的特征图和S4提取的掩膜在通道维度上叠加，利用图像解码网络解码并生成高分辨率的细胞图像；S6，以S1拍摄的细胞图像和S2标记得到的掩膜作为训练集，用反向传播算法训练卷积神经网络分割细胞和超分辨细...

【技术特征摘要】
1.一种基于图像先验的细胞图像超分辨方法，其特征在于，包括如下步骤：S1，拍摄显微镜下的细胞图像；S2，对拍摄得到的每张细胞图像手动标记出背景、细胞质和细胞核三种区域，并生成掩膜；S3，利用特征编码网络，以单张细胞图像为输入，逐渐提取图像特征，再将低层次和高层次特征结合起来，生成一个特征图；S4，利用语义分割网络，从输入的单张细胞图像中提取出背景、细胞质和细胞核三种区域的掩膜；S5，将S3获得的细胞图像的特征图和S4提取的掩膜在通道维度上叠加，利用图像解码网络解码并生成高分辨率的细胞图像；S6，以S1拍摄的细胞图像和S2标记得到的掩膜作为训练集，用反向传播算法训练卷积神经网络分割细胞和超分辨细胞图像的能力；S7，经过多次迭代后，固定网络参数，利用训练得到的卷积神经网络对单张未标记掩膜的低分辨率细胞图像直接进行超分辨。2.根据权利要求1所述的一种基于图像先验的细胞图像超分辨方法，其特征在于，所述步骤S2中，手动标记的具体方法为：利用LabelMe软件，将细胞图像中细胞质和细胞核的区域均匀标注点，再以这些标注点作为顶点，利用opencv视...

【专利技术属性】
技术研发人员：曹汛，蔡悦，闫锋，华夏，夏永泉，
申请(专利权)人：南京大学，
类型：发明
国别省市：江苏,32