一种图像处理方法、电子设备及存储介质技术

本申请实施例公开了一种图像处理方法、电子设备及存储介质，其中方法包括：获取N组实例分割输出数据，其中，所述N组实例分割输出数据分别为N个实例分割模型对图像进行处理获得的实例分割输出结果，且所述N组实例分割输出数据具有不同的数据结构，所述N为大于1的整数；基于所述N组实例分割输出数据，得到所述图像的集成语义数据和集成中心区域数据，其中，所述集成语义数据指示所述图像中位于实例区域的像素点，所述集成中心区域数据指示所述图像中位于实例中心区域的像素点；基于所述图像的集成语义数据和集成中心区域数据，获得所述图像的实例分割结果，可以实现各个实例分割模型的优势互补，在实例分割问题中取得更高的精度。

【技术实现步骤摘要】
一种图像处理方法、电子设备及存储介质
本申请涉及计算机视觉
，具体涉及一种图像处理方法、电子设备及存储介质。
技术介绍
影像处理又称为图像处理，是用计算机对图像进行分析，以达到所需结果的技术。图像处理一般指数字图像处理，数字图像是指用工业相机、摄像机、扫描仪等设备经过拍摄得到的一个大的二维数组，该数组的元素称为像素点，其值称为灰度值。图像处理在许多领域起着十分重要的作用。
技术实现思路
本申请实施例提供了一种图像处理方法、电子设备及存储介质。本申请实施例第一方面提供一种图像处理方法，包括：获取N组实例分割输出数据，其中，所述N组实例分割输出数据分别为N个实例分割模型对图像进行处理获得的实例分割输出结果，且所述N组实例分割输出数据具有不同的数据结构，所述N为大于1的整数；基于所述N组实例分割输出数据，得到所述图像的集成语义数据和集成中心区域数据，其中，所述集成语义数据指示所述图像中位于实例区域的像素点，所述集成中心区域数据指示所述图像中位于实例中心区域的像素点；基于所述图像的集成语义数据和集成中心区域数据，获得所述图像的实例分割结果。在一种可选的实施方式中，所述基于所述N组实例分割输出数据，得到所述图像的集成语义数据和集成中心区域数据，包括：基于所述N个实例分割模型中每个实例分割模型的实例分割输出数据，得到所述每个实例分割模型的语义数据和中心区域数据；基于所述N个实例分割模型中每个实例分割模型的语义数据和中心区域数据，得到所述图像的集成语义数据和集成中心区域数据。在一种可选的实施方式中，所述基于所述N个实例分割模型中每个实例分割模型的实例分割输出数据，得到所述每个实例分割模型的语义数据和中心区域数据，包括：基于所述实例分割模型的实例分割输出数据，确定在所述实例分割模型中所述图像的多个像素点中每个像素点对应的实例标识信息；基于所述实例分割模型中所述多个像素点中每个像素点对应的实例标识信息，得到所述每个像素点在所述实例分割模型中的语义预测值，其中，所述实例分割模型的语义数据包括所述图像的多个像素点中每个像素点的语义预测值。在一种可选的实施方式中，所述基于所述N个实例分割模型中每个实例分割模型的实例分割输出数据，得到所述每个实例分割模型的语义数据和中心区域数据，还包括：基于所述实例分割模型的实例分割输出数据，确定在所述实例分割模型中，所述图像中位于实例区域的至少两个像素点；基于所述实例分割模型中位于实例区域的至少两个像素点的位置信息，确定所述实例分割模型的实例中心位置；基于所述实例分割模型的实例中心位置和所述至少两个像素点的位置信息，确定所述实例分割模型的实例中心区域。在一种可选的实施方式中，在基于所述实例分割模型的实例分割输出数据，确定在所述实例分割模型中，所述图像中位于实例区域的至少两个像素点之前，还包括：对所述实例分割模型的实例分割输出数据进行腐蚀处理，得到实例分割模型的腐蚀数据；所述基于所述实例分割模型的实例分割输出数据，确定在所述实例分割模型中，所述图像中位于实例区域的至少两个像素点，包括：基于所述实例分割模型的腐蚀数据，确定在所述实例分割模型中，所述图像中位于实例区域的至少两个像素点。在一种可选的实施方式中，所述基于所述实例分割模型中位于实例区域的至少两个像素点的位置信息，确定所述实例分割模型的实例中心位置，包括：将所述位于实例区域的至少两个像素点的位置的平均值，作为所述实例分割模型的实例中心位置。在一种可选的实施方式中，所述基于所述实例分割模型的实例中心位置和所述至少两个像素点的位置信息，确定所述实例分割模型的实例中心区域，包括：基于所述实例分割模型的实例中心位置和所述至少两个像素点的位置信息，确定所述至少两个像素点与所述实例中心位置的最大距离；基于所述最大距离，确定第一阈值；将所述至少两个像素点中与所述实例中心位置之间的距离小于或等于所述第一阈值的像素点确定为实例中心区域的像素点。在一种可选的实施方式中，所述基于所述N个实例分割模型中每个实例分割模型的语义数据和中心区域数据，得到所述图像的集成语义数据和集成中心区域数据，包括：基于所述N个实例分割模型中每个实例分割模型的语义数据，确定所述图像的多个像素点中每个像素点的语义投票值；对所述多个像素点中每个像素点的语义投票值进行二值化处理，得到所述图像中每个像素点的集成语义值，其中，所述图像的集成语义数据包括所述多个像素点中每个像素点的集成语义值。在一种可选的实施方式中，所述对所述多个像素点中每个像素点的语义投票值进行二值化处理，得到所述图像中每个像素点的集成语义值，包括：基于所述多个实例分割模型的个数N，确定第二阈值；基于所述第二阈值，对所述多个像素点中每个像素点的语义投票值进行二值化处理，得到所述图像中每个像素点的集成语义值。在一种可选的实施方式中，所述第二阈值为N/2的向上取整结果。在一种可选的实施方式中，所述基于所述图像的集成语义数据和集成中心区域数据，获得所述图像的实例分割结果，包括：基于所述图像的集成中心区域数据，得到所述图像的至少一个实例中心区域；基于所述至少一个实例中心区域和所述图像的集成语义数据，确定所述图像的多个像素点中每个像素点所属的实例。在一种可选的实施方式中，所述基于所述至少一个实例中心区域和所述图像的集成语义数据，确定所述图像的多个像素点中每个像素点所属的实例，包括：基于所述图像的多个像素点中每个像素点的集成语义值和所述至少一个实例中心区域，进行随机游走，得到所述每个像素点所属的实例。本申请实施例第二方面提供一种电子设备，包括：获取模块、转换模块和分割模块，其中：所述获取模块，用于获取N组实例分割输出数据，其中，所述N组实例分割输出数据分别为N个实例分割模型对图像进行处理获得的实例分割输出结果，且所述N组实例分割输出数据具有不同的数据结构，所述N为大于1的整数；所述转换模块，用于基于所述N组实例分割输出数据，得到所述图像的集成语义数据和集成中心区域数据，其中，所述集成语义数据指示所述图像中位于实例区域的像素点，所述集成中心区域数据指示所述图像中位于实例中心区域的像素点；所述分割模块，用于基于所述图像的集成语义数据和集成中心区域数据，获得所述图像的实例分割结果。在一种可选的实施方式中，所述转换模块包括第一转换单元和第二转换单元，其中：所述第一转换单元，用于基于所述N个实例分割模型中每个实例分割模型的实例分割输出数据，得到所述每个实例分割模型的语义数据和中心区域数据；所述第二转换单元，用于基于所述N个实例分割模型中每个实例分割模型的语义数据和中心区域数据，得到所述图像的集成语义数据和集成中心区域数据。在一种可选的实施方式中，所述第一转换单元具体用于：基于所述实例分割模型的实例分割输出数据，确定在所述实例分割模型中所述图像的多个像素点中每个像素点对应的实例标识信息；基于所述实例分割模型中所述多个像素点中每个像素点对应的实例标识信息，得到所述每个像素点在所述实例分割模型中的语义预测值，其中，所述实例分割模型的语义数据包括所述图像的多个像素点中每个像素点的语义预测值。在一种可选的实施方式中，所述第一转换单元具体还用于：基于所述实例分割模型的实例分割输出数据，确定在所述实例分割模型中，所述图像中位于实例区域的至少两个像本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，所述方法包括：获取N组实例分割输出数据，其中，所述N组实例分割输出数据分别为N个实例分割模型对图像进行处理获得的实例分割输出结果，且所述N组实例分割输出数据具有不同的数据结构，所述N为大于1的整数；基于所述N组实例分割输出数据，得到所述图像的集成语义数据和集成中心区域数据，其中，所述集成语义数据指示所述图像中位于实例区域的像素点，所述集成中心区域数据指示所述图像中位于实例中心区域的像素点；基于所述图像的集成语义数据和集成中心区域数据，获得所述图像的实例分割结果。

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述方法包括：获取N组实例分割输出数据，其中，所述N组实例分割输出数据分别为N个实例分割模型对图像进行处理获得的实例分割输出结果，且所述N组实例分割输出数据具有不同的数据结构，所述N为大于1的整数；基于所述N组实例分割输出数据，得到所述图像的集成语义数据和集成中心区域数据，其中，所述集成语义数据指示所述图像中位于实例区域的像素点，所述集成中心区域数据指示所述图像中位于实例中心区域的像素点；基于所述图像的集成语义数据和集成中心区域数据，获得所述图像的实例分割结果。2.根据权利要求1所述的图像处理方法，其特征在于，所述基于所述N组实例分割输出数据，得到所述图像的集成语义数据和集成中心区域数据，包括：基于所述N个实例分割模型中每个实例分割模型的实例分割输出数据，得到所述每个实例分割模型的语义数据和中心区域数据；基于所述N个实例分割模型中每个实例分割模型的语义数据和中心区域数据，得到所述图像的集成语义数据和集成中心区域数据。3.根据权利要求2所述的图像处理方法，其特征在于，所述基于所述N个实例分割模型中每个实例分割模型的实例分割输出数据，得到所述每个实例分割模型的语义数据和中心区域数据，包括：基于所述实例分割模型的实例分割输出数据，确定在所述实例分割模型中所述图像的多个像素点中每个像素点对应的实例标识信息；基于所述实例分割模型中所述多个像素点中每个像素点对应的实例标识信息，得到所述每个像素点在所述实例分割模型中的语义预测值，其中，所述实例分割模型的语义数据包括所述图像的多个像素点中每个像素点的语义预测值。4.根据权利要求2或3所述的图像处理方法，其特征在于，所述基于所述N个实例分割模型中每个实例分割模型的实例分割输出数据，得到所述每个实例分割模型的语义数据和中心区域数据，还包括：基于所述实例分割模型的实例分割输出数据，确定在所述实例分割模型中，所述图像中位于实例区域的至少两个像素点；基于所述实例分割模型中位于实例区域的至少两个像素点的位置信息...

【专利技术属性】
技术研发人员：李嘉辉，胡志强，
申请(专利权)人：北京市商汤科技开发有限公司，
类型：发明
国别省市：北京,11