基于荧光内窥镜的图像处理方法、装置、设备及存储介质制造方法及图纸

本发明专利技术涉及图像处理领域，公开了一种基于荧光内窥镜的图像处理方法、装置、设备及存储介质，用于提高荧光内窥镜的图像处理准确率。方法包括：对多个内窥镜区域图像进行图像位置关系分析，得到目标图像位置关系；根据目标图像位置关系确定多个内窥镜区域图像之间的多个特征分类边界和每个特征分类边界对应的图像边界特征；对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行图像特征融合，生成多个特征融合图像；分别将多个特征融合图像输入内窥镜图像分析模型进行内窥镜图像分析，得到每个特征融合图像对应的图像分析结果；根据特征融合图像位置关系和图像分析结果生成目标检测区域的异常检测结果。析结果生成目标检测区域的异常检测结果。析结果生成目标检测区域的异常检测结果。

【技术实现步骤摘要】
基于荧光内窥镜的图像处理方法、装置、设备及存储介质


[0001]本专利技术涉及图像处理领域，尤其涉及一种基于荧光内窥镜的图像处理方法、装置、设备及存储介质。

技术介绍

[0002]荧光内窥镜在消化系统及泌尿系统的早期筛查和诊断中得到了广泛应用，但其图像处理技术仍面临一些挑战，如图像质量较差、特征提取困难等。目前，常用的荧光内窥镜图像处理方法包括传统的手动分割和特征提取方法，传统方法需要专业人员耗费大量时间和精力进行手动分割和特征提取，存在主观性强、操作复杂、结果不稳定等缺点。
[0003]然而，现有方案中还存在着训练样本不足、特征选择不合理、分类器鲁棒性差等问题，导致其分类效果不佳、误诊率较高，影响了其在实际应用中的推广。

技术实现思路

[0004]本专利技术提供了一种基于荧光内窥镜的图像处理方法、装置、设备及存储介质，用于提高荧光内窥镜的图像处理准确率。
[0005]本专利技术第一方面提供了一种基于荧光内窥镜的图像处理方法，所述基于荧光内窥镜的图像处理方法包括：获取目标检测区域的至少一组荧光内窥镜图像，并将所述至少一组荧光内窥镜图像输入预置的图像分割模型进行图像区域分割，得到多个内窥镜区域图像；对所述多个内窥镜区域图像进行图像位置关系分析，得到目标图像位置关系；根据所述目标图像位置关系确定所述多个内窥镜区域图像之间的多个特征分类边界，并获取每个特征分类边界对应的图像边界特征；对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行图像特征融合，生成多个特征融合图像；分别将所述多个特征融合图像输入预置的内窥镜图像分析模型进行内窥镜图像分析，得到每个特征融合图像对应的图像分析结果；根据所述特征融合图像位置关系和所述图像分析结果，分别对每两个相邻的特征融合图像进行分析结果比对，得到多个比对结果，并根据所述多个比对结果生成所述目标检测区域的异常检测结果。
[0006]结合第一方面，在本专利技术第一方面的第一实施方式中，所述获取目标检测区域的至少一组荧光内窥镜图像，并将所述至少一组荧光内窥镜图像输入预置的图像分割模型进行图像区域分割，得到多个内窥镜区域图像，包括：通过预置的荧光内窥镜扫描目标检测区域，并采集所述目标检测区域的至少一组荧光内窥镜图像；对所述至少一组荧光内窥镜图像进行图像分割参数和图像结构分析，得到目标分割参数以及图像结构信息；
根据所述目标分割参数以及所述图像结构信息，调用预置的图像分割模型对所述荧光内窥镜图像进行图像区域分割，得到多个内窥镜区域图像。
[0007]结合第一方面，在本专利技术第一方面的第二实施方式中，所述对所述多个内窥镜区域图像进行图像位置关系分析，得到目标图像位置关系，包括：对所述多个内窥镜区域图像进行特征点提取，得到每个内窥镜区域图像对应的至少一个第一特征点，并将所述至少一个第一特征点存储至预设的特征库中；根据所述特征库中的第一特征点，对所述多个内窥镜区域图像进行相似区域提取，得到目标区域；根据所述目标区域，对所述多个内窥镜区域图像进行图像位置关系计算，得到目标图像位置关系。
[0008]结合第一方面，在本专利技术第一方面的第三实施方式中，所述根据所述目标图像位置关系确定所述多个内窥镜区域图像之间的多个特征分类边界，并获取每个特征分类边界对应的图像边界特征，包括：根据所述目标图像位置关系，对所述多个内窥镜区域图像进行三维空间映射，确定所述多个内窥镜区域图像之间的几何关系；根据预置的分类器，对所述多个内窥镜区域图像进行特征向量提取，得到每个内窥镜区域图像对应的特征向量；对每个内窥镜区域图像对应的特征向量进行矩阵组合，生成特征矩阵，并根据所述特征矩阵构建对应的多个特征分类边界；根据所述几何关系，提取每个特征分类边界对应的图像边界特征。
[0009]结合第一方面，在本专利技术第一方面的第四实施方式中，所述对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行图像特征融合，生成多个特征融合图像，包括：对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行关联标识匹配，得到每个内窥镜区域图像对应的关联标识；基于每个内窥镜区域图像对应的关联标识，对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行图像特征融合，生成多个特征融合图像。
[0010]结合第一方面，在本专利技术第一方面的第五实施方式中，所述分别将所述多个特征融合图像输入预置的内窥镜图像分析模型进行内窥镜图像分析，得到每个特征融合图像对应的图像分析结果，包括：分别将所述多个特征融合图像输入预置的内窥镜图像分析模型，其中，所述内窥镜图像分析模型包括：三层卷积层、两层残差网络以及逻辑回归层；通过所述内窥镜图像分析模型分别对所述多个特征融合图像进行内窥镜图像分析，得到每个特征融合图像对应的初始识别结果；根据每个特征融合图像对应的初始识别结果，对所述特征融合图像进行识别信息标注，得到每个特征融合图像对应的图像分析结果。
[0011]结合第一方面，在本专利技术第一方面的第六实施方式中，所述根据所述特征融合图像位置关系和所述图像分析结果，分别对每两个相邻的特征融合图像进行分析结果比对，得到多个比对结果，并根据所述多个比对结果生成所述目标检测区域的异常检测结果，包
括：根据所述特征融合图像位置关系和所述图像分析结果，分别对每两个相邻的特征融合图像进行分析结果比对，得到多个比对结果；根据预设的映射关系，对所述多个比对结果进行特征值映射，得到每个比对结果对应的目标值；对每个比对结果对应的目标值进行均值运算，得到目标均值；对所述目标均值和每个比对结果对应的目标值进行比较，生成所述目标检测区域的异常检测结果，其中，所述异常检测结果包括：异常区域以及异常特征信息。
[0012]本专利技术第二方面提供了一种基于荧光内窥镜的图像处理装置，所述基于荧光内窥镜的图像处理装置包括：获取模块，用于获取目标检测区域的至少一组荧光内窥镜图像，并将所述至少一组荧光内窥镜图像输入预置的图像分割模型进行图像区域分割，得到多个内窥镜区域图像；分析模块，用于对所述多个内窥镜区域图像进行图像位置关系分析，得到目标图像位置关系；确定模块，用于根据所述目标图像位置关系确定所述多个内窥镜区域图像之间的多个特征分类边界，并获取每个特征分类边界对应的图像边界特征；融合模块，用于对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行图像特征融合，生成多个特征融合图像；处理模块，用于分别将所述多个特征融合图像输入预置的内窥镜图像分析模型进行内窥镜图像分析，得到每个特征融合图像对应的图像分析结果；生成模块，用于根据所述特征融合图像位置关系和所述图像分析结果，分别对每两个相邻的特征融合图像进行分析结果比对，得到多个比对结果，并根据所述多个比对结果生成所述目标检测区域的异常检测结果。
[0013]本专利技术第三方面提供了一种基于荧光内窥镜的图像处理设备，包括：存储器和至少一组处理器，所述存储器中存储有指令；所述至少一组处理器调用所述存储器中的所述指令，以使得所述基于荧光内窥镜的图像处理设备执行上述的基于荧光内窥镜的图像处理方法。<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于荧光内窥镜的图像处理方法，其特征在于，所述基于荧光内窥镜的图像处理方法包括：获取目标检测区域的至少一组荧光内窥镜图像，并将所述至少一组荧光内窥镜图像输入预置的图像分割模型进行图像区域分割，得到多个内窥镜区域图像；对所述多个内窥镜区域图像进行图像位置关系分析，得到目标图像位置关系；根据所述目标图像位置关系确定所述多个内窥镜区域图像之间的多个特征分类边界，并获取每个特征分类边界对应的图像边界特征；对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行图像特征融合，生成多个特征融合图像；分别将所述多个特征融合图像输入预置的内窥镜图像分析模型进行内窥镜图像分析，得到每个特征融合图像对应的图像分析结果；根据所述特征融合图像位置关系和所述图像分析结果，分别对每两个相邻的特征融合图像进行分析结果比对，得到多个比对结果，并根据所述多个比对结果生成所述目标检测区域的异常检测结果。2.根据权利要求1所述的基于荧光内窥镜的图像处理方法，其特征在于，所述获取目标检测区域的至少一组荧光内窥镜图像，并将所述至少一组荧光内窥镜图像输入预置的图像分割模型进行图像区域分割，得到多个内窥镜区域图像，包括：通过预置的荧光内窥镜扫描目标检测区域，并采集所述目标检测区域的至少一组荧光内窥镜图像；对所述至少一组荧光内窥镜图像进行图像分割参数和图像结构分析，得到目标分割参数以及图像结构信息；根据所述目标分割参数以及所述图像结构信息，调用预置的图像分割模型对所述荧光内窥镜图像进行图像区域分割，得到多个内窥镜区域图像。3.根据权利要求1所述的基于荧光内窥镜的图像处理方法，其特征在于，所述对所述多个内窥镜区域图像进行图像位置关系分析，得到目标图像位置关系，包括：对所述多个内窥镜区域图像进行特征点提取，得到每个内窥镜区域图像对应的至少一个第一特征点，并将所述至少一个第一特征点存储至预设的特征库中；根据所述特征库中的第一特征点，对所述多个内窥镜区域图像进行相似区域提取，得到目标区域；根据所述目标区域，对所述多个内窥镜区域图像进行图像位置关系计算，得到目标图像位置关系。4.根据权利要求1所述的基于荧光内窥镜的图像处理方法，其特征在于，所述根据所述目标图像位置关系确定所述多个内窥镜区域图像之间的多个特征分类边界，并获取每个特征分类边界对应的图像边界特征，包括：根据所述目标图像位置关系，对所述多个内窥镜区域图像进行三维空间映射，确定所述多个内窥镜区域图像之间的几何关系；根据预置的分类器，对所述多个内窥镜区域图像进行特征向量提取，得到每个内窥镜区域图像对应的特征向量；对每个内窥镜区域图像对应的特征向量进行矩阵组合，生成特征矩阵，并根据所述特
征矩阵构建对应的多个特征分类边界；根据所述几何关系，提取每个特征分类边界对应的图像边界特征。5.根据权利要求1所述的基于荧光内窥镜的图像处理方法，其特征在于，所述对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行图像特征融合，生成多个特征融合图像，包括：对每个特征分类边界对应的图像边界特征和至少一个内窥镜区域图像进行关联标识匹配，得到每个内窥镜区域图像对应的关联标识；基于每个内窥镜区域图像对应的关联标识，对每个特征分...

【专利技术属性】
技术研发人员：陆汇海，
申请(专利权)人：深圳市博盛医疗科技有限公司，
类型：发明
国别省市：