实例分割方法和装置、电子设备、程序和介质制造方法及图纸

本发明专利技术实施例公开了一种实例分割方法和装置、电子设备、程序和介质，其中，方法包括：通过神经网络对图像进行特征提取，输出至少两个不同层级的特征；从所述至少两个不同层级的特征中抽取所述图像中至少一实例候选区域对应的区域特征、并对同一实例候选区域对应的区域特征进行融合，得到各实例候选区域的第一融合特征；基于各第一融合特征进行实例分割，获得相应实例候选区域的实例分割结果和/或所述图像的实例分割结果。本发明专利技术实施例设计了基于深度学习的框架解决实例分割的问题，可以获得更准确的实例分割结果。

【技术实现步骤摘要】
实例分割方法和装置、电子设备、程序和介质
本专利技术涉及计算机视觉技术，尤其是一种实例分割方法和装置、电子设备、程序和介质。
技术介绍
实例分割是计算机视觉领域非常重要的方向，此任务结合了语义分割和物体检测的特点，对于输入图像中的每一个物体，都会为他们生成一个独立的像素级别的掩膜(mask)，并且预测其对应的类别。实例分割在无人驾驶、家居机器人等领域有着非常广阔的应用。
技术实现思路
本专利技术实施例提供一种实例分割方案。根据本专利技术实施例的一个方面，提供的一种实例分割方法，包括：通过神经网络对图像进行特征提取，输出至少两个不同层级的特征；从所述至少两个不同层级的特征中抽取所述图像中至少一实例候选区域对应的区域特征、并对同一实例候选区域对应的区域特征进行融合，得到各实例候选区域的第一融合特征；基于各第一融合特征进行实例分割，获得相应实例候选区域的实例分割结果和/或所述图像的实例分割结果。在基于本专利技术上述各方法实施例的另一个实施例中，所述通过神经网络对图像进行特征提取，输出至少两个不同层级的特征，包括：通过所述神经网络对所述图像进行特征提取，经所述神经网络中至少两个不同网络深度的网络本文档来自技高网...

【技术保护点】
1.一种实例分割方法，其特征在于，包括：通过神经网络对图像进行特征提取，输出至少两个不同层级的特征；从所述至少两个不同层级的特征中抽取所述图像中至少一实例候选区域对应的区域特征、并对同一实例候选区域对应的区域特征进行融合，得到各实例候选区域的第一融合特征；基于各第一融合特征进行实例分割，获得相应实例候选区域的实例分割结果和/或所述图像的实例分割结果。

【技术特征摘要】
1.一种实例分割方法，其特征在于，包括：通过神经网络对图像进行特征提取，输出至少两个不同层级的特征；从所述至少两个不同层级的特征中抽取所述图像中至少一实例候选区域对应的区域特征、并对同一实例候选区域对应的区域特征进行融合，得到各实例候选区域的第一融合特征；基于各第一融合特征进行实例分割，获得相应实例候选区域的实例分割结果和/或所述图像的实例分割结果。2.根据权利要求1所述的方法，其特征在于，所述通过神经网络对图像进行特征提取，输出至少两个不同层级的特征，包括：通过所述神经网络对所述图像进行特征提取，经所述神经网络中至少两个不同网络深度的网络层输出至少两个不同层级的特征。3.根据权利要求1或2所述的方法，其特征在于，所述输出至少两个不同层级的特征之后，还包括：将所述至少两个不同层级的特征进行至少一次折回融合，得到第二融合特征；其中，一次所述折回融合包括：基于所述神经网络的网络深度方向，对分别由不同网络深度的网络层输出的不同层级的特征，依次按照两个不同的层级方向进行融合；从所述至少两个不同层级的特征中抽取所述图像中至少一实例候选区域对应的区域特征，包括：从所述第二融合特征中抽取所述至少一实例候选区域对应的区域特征。4.根据权利要求3所述的方法，其特征在于，所述两个不同的层级方向，包括：从高层级特征到低层级特征的方向、和从低层级特征到高层级特征的方向。5.根据权利要求4所述的方法，其特征在于，所述依次按照两个不同的层级方向，包括：依次沿从高层级特征到低层级特征的方向和从低层级特征到高层级特征的方向；或者依次沿从低层级特征到高层级特征的...

【专利技术属性】
技术研发人员：刘枢，亓鲁，秦海芳，石建萍，贾佳亚，
申请(专利权)人：北京市商汤科技开发有限公司，
类型：发明
国别省市：北京,11