基于计算机视觉的灵芝孢子粉显微图像识别方法及装置制造方法及图纸

本发明专利技术提供了一种基于计算机视觉的灵芝孢子粉显微图像识别方法及装置，属于中药质量控制技术领域。本发明专利技术对采集的灵芝孢子粉电子显微图像进行处理和计算，进行各孢子及孢子总数识别；对采集的不同环境不同角度的灵芝孢子电子显微图像进行处理，制作数据集；基于YOLO网络模型，添加小目标检测层及注意力机制，建立孢子瘪壳和破损识别模型，采用EIoULoss函数为损失函数，进行孢子瘪壳和破损识别模型训练，得到训练好的孢子瘪壳和破损识别模型，进行孢子瘪壳和破损识别。本发明专利技术能够在识别孢子总数的前提下，进一步实现孢子瘪壳及破损的识别，减少人工检测的主观判断的影响，并进行批量处理。量处理。量处理。

【技术实现步骤摘要】
基于计算机视觉的灵芝孢子粉显微图像识别方法及装置


[0001]本专利技术涉及中药质量控制
，尤其涉及一种基于计算机视觉的灵芝孢子粉显微图像识别方法及装置。

技术介绍

[0002]灵芝为我国传统名贵中药，灵芝孢子粉是灵芝在生长成熟期从菌褶中弹射出来的极其微小的孢子，是灵芝的生殖细胞。现代研究表明，灵芝孢子粉含有多糖、三萜、甾醇、脂肪酸、维生素、氨基酸等成分，具有调节免疫、抗肿瘤、抗炎、抗癫痫、神经调节等活性，应用前景广阔。灵芝孢子为淡褐色至黄褐色，呈卵形，大小约3～12μm，内含一油滴。外层是主要由几丁质构成的双层孢壁，质地坚韧，耐酸碱，极难氧化分解，阻碍了多糖、三萜等活性成分在体内的释放和吸收。因此，目前主要通过破壁处理粉碎孢壁，提高活性成分的释放和吸收。未破壁的灵芝孢子粉原料含有瘪壳孢子、破损孢子以及完整孢子：瘪壳孢子在破壁(特别是超音速气流破壁)时由于饱满度低导致破壁率极低；破损孢子是指未破壁加工前就因自身及外界等因素致使孢壁破碎的灵芝孢子，这些孢子因孢壁破碎导致孢内的脂肪酸等成分暴露在空气中，非常容易氧化，导致过氧化值偏高，造成安全隐患。品种、生长环境、采集方式等因素均会对灵芝孢子粉的质量造成影响。因此，识别灵芝孢子粉原料中瘪壳、破损、完整灵芝孢子粉对于保障灵芝孢子粉的质量具有重要意义。
[0003]由于灵芝孢子大小仅有微米级别，现有的检测方法主要是通过扫描电镜采集放大倍数下的灵芝孢子粉电子显微图像，再通过人工判别的方式统计瘪壳孢子、破损孢子以及完整孢子(或孢子总数)，计算瘪壳率、破损率以及合格率等参数，来评价灵芝孢子粉原料的质量。这种检测方法耗时耗力，且检测结果具有主观性，亟需开发一种可客观、高效检测灵芝孢子瘪壳、破损以及总数的技术方法。
[0004]随着计算机视觉技术的发展，目标检测算法不断创新，在识别的准确度和效率上都远超人工检测，在现代生产中研究和应用广泛。目前，已有若干用于基于显微图像目标检测的孢子识别技术方法可见报导。
[0005]在中国专利申请文献CN104651462B中，公开了一种基于显微图像分析的稻瘟病菌孢子检测方法，获取孢子悬浮液中的孢子显微图像；然后利用图像光照校正、中值滤波、边缘检测、形态学运算对孢子显微图像进行处理，并结合形状特征参数，提取出只含孢子的显微图像；最后采用改进分水岭算法对粘连孢子进行分离，进而实现显微图像中孢子的检测和数量统计；利用图像光照校正、中值滤波、边缘检测、形态学运算对孢子显微图像进行处理，具体包括以下步骤：1)图像光照校正：1.1)图像分块：将图像I(i，j)进行M
×
N分块，其中M＝N＝4；
[0006]1.2)估算图像背景的灰度：计算每个图像块的像素灰度均值μ和标准差σ，然后以max(min，μ
‑
3σ)作为该区域的背景灰度；其中min为该区域像素的最小灰度值；1.3)图像光照不均匀校正：从原始图像中减去步骤1.2)计算出的背景灰度图像，以校正光照不均匀；2)中值滤波采用3
×
3型滤波模板对光照校正后图像进行中值滤波处理；3)边缘检测采用
Canny算子进行图像边缘检测，包括：3.1)用高斯滤波器平滑图像；3.2)利用一阶偏导的有限差分来计算梯度的幅值和方向，得到梯度图像；3.3)对梯度幅值进行非极大值抑制；3.4)用双阈值算法检测并且连接边缘；4)形态学运算：根据孢子形态特征，采用8
×
8的圆盘结构元素对边缘检测后的二值图像进行形态学闭运算，孢子内外环空洞均被填充，形成一个封闭的孢子区域；然后采用8
×
8的圆盘结构元素进行形态学开运算，去除图像中目标物上比结构元素小的突刺和无用边界，切断细长搭接而起到分离作用；采用改进分水岭算法对粘连孢子进行分离，具体如下：首先利用距离变换将只含孢子的二值图像转化为灰度图像，然后通过高斯滤波对孢子图像边缘进行平滑，使得每个孢子内部形成一个局部极小值，最后应用分水岭算法对粘连孢子进行分离。
[0007]在中国专利申请文献CN114299493A中，公开了一种孢子识别方法，包括以下步骤：S1、对孢子进行捕获；S2、将捕获到的孢子通过电子显微镜进行放大，获取孢子的显微图像，并将所述孢子的显微图像进行预处理；S3、对预处理后的孢子显微图像进行分割，以对粘连的孢子进行分离；S4、提取分离后孢子的特征，根据提取的特征与孢子库中标本进行对比，完成对孢子的识别。步骤S2包括以下步骤：S201、将捕获到的孢子通过电子显微镜进行放大，获取孢子的显微图像；S202、对所述孢子的显微图像进行灰度处理；S203、对经灰度处理后的孢子显微图像，利用中值滤波进行平滑处理；S204、利用直方图均衡化对经平滑处理后的孢子显微图像进行图像增强处理，完成对孢子显微图像的预处理。步骤S3包括以下步骤：S301、利用运用形态学算法对经预处理后孢子显微图像进行处理；S302、利用二维阈值化进对去除图像噪声后的孢子显微图像进行初始分割；S303、对经初始分割后的孢子显微图像作距离变换，并利用高斯滤波对孢子显微图像进行平滑处理；S304、利用分水岭算法对经高斯滤波平滑处理后的孢子显微图像进行再次分割，得到孢子的图像轮廓，完成对粘连的孢子分离。
[0008]通过不同的技术路径实现了显微图像中孢子的识别和数量的统计。但是上述方法无法满足智能检测待测灵芝孢子粉样品破损、瘪壳情况的需求。
[0009]现有技术至少存在以下不足：
[0010]1.只能检测孢子数量，但是瘪壳、破损孢子无法进行检测。

技术实现思路

[0011]为解决现有技术中存在的问题，本专利技术提供了一种基于计算机视觉的灵芝孢子粉显微图像识别方法及装置，步骤S1、采集灵芝孢子粉电子显微图像；步骤S2、对采集的灵芝孢子粉电子显微图像进行处理和计算，进行各孢子及孢子总数识别；步骤S3、采集不同角度不同环境下的多个灵芝孢子电子显微图像；步骤S4、对采集的所有灵芝孢子电子显微图像进行处理，制作数据集；步骤S5、基于YOLO网络模型，添加小目标检测层及注意力机制，建立孢子瘪壳和破损识别模型，采用EIoULoss函数为损失函数，输入处理后的灵芝孢子电子显微图像集进行孢子瘪壳和破损识别模型训练，得到训练好的孢子瘪壳和破损识别模型；步骤S6、将步骤S2识别出的各孢子图像输入训练好的孢子瘪壳和破损识别模型，进行孢子瘪壳和破损识别。本专利技术能够在识别孢子总数的前提下，进一步实现孢子瘪壳及破损的识别，减少人工检测的主观判断的影响，并进行批量处理。
[0012]本专利技术提供了一种基于计算机视觉的灵芝孢子粉显微图像识别方法，包括如下步
骤：
[0013]步骤S1、采集灵芝孢子粉电子显微图像；
[0014]步骤S2、对采集的灵芝孢子粉电子显微图像进行处理和计算，进行各孢子及孢子总数识别；
[0015]步骤S3、采集不同角度不同环境下的多个灵芝孢子电子显微图像；
[0016]步骤S4、对采集的所有灵芝孢子电子显微图像进行处理，制作数据集；
[0017本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于计算机视觉的灵芝孢子粉显微图像识别方法，其特征在于，包括如下步骤：步骤S1、采集灵芝孢子粉电子显微图像；步骤S2、对采集的灵芝孢子粉电子显微图像进行处理和计算，进行各孢子及孢子总数识别；步骤S3、采集不同角度不同环境下的多个灵芝孢子电子显微图像；步骤S4、对采集的所有灵芝孢子电子显微图像进行处理，制作数据集；步骤S5、基于YOLO网络模型，添加小目标检测层及注意力机制，建立孢子瘪壳和破损识别模型，采用EIoULoss函数为损失函数，输入处理后的灵芝孢子电子显微图像集进行孢子瘪壳和破损识别模型训练，得到训练好的孢子瘪壳和破损识别模型；步骤S6、将步骤S2识别出的各孢子图像输入训练好的孢子瘪壳和破损识别模型，进行孢子瘪壳和破损识别。2.根据权利要求1所述的基于计算机视觉的灵芝孢子粉显微图像识别方法，其特征在于，步骤S1具体为待真空准备好后，加高压，根据设定的样品台参数和观测参数，选择活动光栏和调节工作距离，采集灵芝孢子粉电子显微图像，步骤S1包括如下步骤：步骤S101、选择样品载台，固定好样品；步骤S102、设定样品台参数和观测参数；步骤S103、待真空准备好后，加高压；步骤S104、通过选择活动光栏和调节工作距离对显微图像进行调整；步骤S105、设置图像采集条件和保存地址，采集并保存灵芝孢子粉电子显微图像。3.根据权利要求1所述的基于计算机视觉的灵芝孢子粉显微图像识别方法，其特征在于，步骤S2包括如下步骤：S201、将灵芝孢子粉电子显微图像转换为单通道图片；S202、对单通道图片进行直方图均衡化；S203、对直方图均衡化后的灵芝孢子粉电子显微图像实施二值化处理，将其转换为黑白图片；S204、对二值化后的孢子图像进行开运算，将粘连的孢子图像分开来；S205、对开运算后的孢子图像进行闭运算，识别出各个孢子；S206、根据连通区域的大小识别出孢子总数。4.根据权利要求3所述的基于计算机视觉的灵芝孢子粉显微图像识别方法，其特征在于，对单通道图片进行直方图均衡化采用如下单通道值变换函数进行：其中，p
r
(r
i
)为输入图像第i个单通道值为r
i
的概率密度；k为图像归一化前的单通道值；s
k
为输出图像各像素的单通道值。5.根据权利要求3所述的基于计算机视觉的灵芝孢子粉显微图像识别方法，其特征在于，单通道图片为灰度图片。6.根据权利要求1所述的基于计算机视觉的灵芝孢子粉显微图像识别方法，其特征在
于，步骤S4中对灵芝孢子电子显微图像集中的图像进行处理具体为：将灵芝孢子电子显微图像集中的每个图像裁剪填充为预设长宽比；预设长宽比为0.5
‑
2；对裁剪填充后的图像进行放大、错切、透视变换、平移或旋转中的至少一个操作来模拟各种环境下的孢子图像。7.根据权利要求6所述的基于计算机视觉的灵芝孢子粉显微图像识别方法，其特征在于，步骤S4中制...

【专利技术属性】
技术研发人员：李振皓，仲怿，朱颖，熊晖，薛瑾，邵玉明，
申请(专利权)人：武义寿仙谷中药饮片有限公司，
类型：发明
国别省市：