物体序列图像的处理方法及装置、设备、存储介质制造方法及图纸

提供了一种物体序列图像的处理方法、装置、设备及存储介质，所述方法包括：获取物体序列图像；其中所述物体序列图像中包括呈序列式排布的至少两个物体；利用已训练的边缘检测模型对所述物体序列图像进行边缘检测，得到所述物体序列图像对应的边缘分割图；其中，所述边缘分割图用于表征所述物体序列图像中的每个物体的边缘的位置信息；获取所述物体序列图像对应的类别标注信息，所述类别标注信息包括所述物体序列图像中的每个物体的类别信息；基于所述边缘分割图和所述类别标注信息，生成所述物体序列图像的标签信息，所述标签信息包括所述物体序列图像中的每个物体所在的位置区域内的像素的类别信息。内的像素的类别信息。内的像素的类别信息。

【技术实现步骤摘要】
【国外来华专利技术】物体序列图像的处理方法及装置、设备、存储介质
[0001]相关申请的交叉引用
[0002]本申请要求在2021年9月21日提交新加坡知识产权局、申请号为10202110414W的新加坡专利申请的优先权，其全部内容通过引用结合在本申请中。


[0003]本申请涉及计算机视觉
，涉及但不限定于物体序列图像的处理方法及装置、设备、存储介质。

技术介绍

[0004]图像中的序列识别是计算机视觉中的一个重要研究问题。序列识别算法在场景文字识别、车牌识别等场景中有广泛应用。对于物体序列识别问题，由于物体序列中物体的数量存在不确定性，物体的类型也具有多样化的特点，难以达到较高的准确度。
[0005]一种比较有效的物体序列识别方案是，采用标注的样本图像对物体序列识别模型进行训练。由于形成序列的物体之间存在较高的相似性，物体序列识别模型需要准确预测单个物体的边界以准确识别序列中的物体的数量和类型，因此对样本图像的标注提出了较高的要求。

技术实现思路

[0006]本申请实施例提供一种物体序列图像的处理方法及装置、设备、存本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种物体序列图像的处理方法，包括：获取物体序列图像；其中，所述物体序列图像中包括呈序列式排布的至少两个物体；利用已训练的边缘检测模型对所述物体序列图像进行边缘检测，得到所述物体序列图像对应的边缘分割图；其中，所述边缘分割图用于表征所述物体序列图像中的每个所述物体的边缘的位置信息；获取所述物体序列图像对应的类别标注信息，所述类别标注信息包括所述物体序列图像中的每个所述物体的类别信息；基于所述边缘分割图和所述类别标注信息，生成所述物体序列图像的标签信息，所述标签信息包括所述物体序列图像中的每个所述物体所在的位置区域内的像素的类别信息。2.如权利要求1所述的方法，其中，所述基于所述边缘分割图和所述类别标注信息，生成所述物体序列图像的标签信息，包括：基于所述边缘分割图中每个物体的边缘的位置信息，确定所述每个物体所在的位置区域；按照所述每个物体的类别信息，对所述边缘分割图中所述每个物体所在的位置区域内的非物体边缘像素的类别进行标注；根据所述非物体边缘像素的类别的标注结果，生成所述物体序列图像的标签信息。3.如权利要求2所述的方法，其中，所述基于所述边缘分割图和所述类别标注信息，生成所述物体序列图像的标签信息，还包括：基于所述边缘分割图中每个物体的边缘的位置信息，将所述边缘分割图中的物体边缘像素的类别标注为预设类别；其中所述预设类别与各所述非物体边缘像素的类别不相同；所述根据所述非物体边缘像素的类别的标注结果，生成所述物体序列图像的标签信息，包括：根据所述非物体边缘像素的类别的标注结果和所述物体边缘像素的类别的标注结果，生成所述物体序列图像的标签信息。4.根据权利要求3所述的方法，所述根据所述非物体边缘像素的类别的标注结果和所述物体边缘像素的类别的标注结果，生成所述物体序列图像的标签信息，包括：根据所述物体序列图像中每个非物体边缘的像素的类别的标注结果和每个物体边缘像素的类别的标注结果，生成与所述物体序列图像尺寸相同的语义分割图，所述语义分割图中的每个像素的像素值用于标识所述每个像素的类别。5.如权利要求1至4任一项所述的方法，其中，所述基于所述边缘分割图和所述类别标注信息，生成所述物体序列图像的标签信息，包括：对所述边缘分割图进行形态学变换和边缘分割线的厚度均一化处理，得到优化后的边缘分割图；根据所述类别标注信息和所述优化后的边缘分割图，生成所述物体序列图像的标签信息。6.如权利要求5所述的方法，其中，所述对所述边缘分割图进行形态学变换和边缘分割线的厚度均一化处理，得到优化后的边缘分割图，包括：利用第一形态学操作对所述边缘分割图进行去噪点处理，得到去噪点的边缘分割图；利用第二形态学操作对所述去噪点的边缘分割图进行膨胀处理，得到分割线连续的边
缘分割图；利用第三形态学操作对所述分割线连续的边缘分割图进行腐蚀处理，得到变换后的边缘分割图；对所述变换后的边缘分割图进行骨骼化处理以均一化所述分割线的厚度，得到所述优化后的边缘分割图。7.根据权利要求1至6任一项所述的方法，其中，所述边缘分割图包括表征每个物体的边缘信息的掩模图像，和/或所述边缘分割图与所述物体序列图像的尺寸相同。8.如权利要求1至7任一项所述的方法，还包括：基于第一物体序列样本图像对所述边缘检测模型进行训练；所述第一物体序列样本图像包括形成所述第一物体序列样本图像的各物体的边缘分割信息。9.根据权利要求1至8任一项所述的方法，还包括：将包含所述标签信息的所述物体序列图像作为第二物体序列样本图像，对物体序列识别模型进行训练；所述物体序列识别模型用于基于图像识别物体序列。10.一种电子设备，包括存储器和处理器，所述存储器存储有可在处理器上运行的计算机程序，所述处理器执行所述程序时配置为：获取物体序列图像；其中，所述物体序列图像中包括呈序列式排布的至少两个物体；利用已训练的边缘检测模型对所述物体序列图像进行边缘检测，得到所述物体序列图像对应的边缘分割图；其中，所述边缘分割图用于表征所述物体序列图像中的每个所述物体的边缘的位置信息；获取所述物体序列图像对应的类别标注信息，所述类别标注信息包括所述物体序列图像中的每个所述物体的类别信息；基于所述边缘分割图和所述类别标注信息，生成所述物体序列图像的标签信息，所述标签信息包括所述物体序列图像中的每个所述物体所在的位置区域内的像素的类别信息。11.如权利要求10所述的电子设备，其中，在基于所述边缘分割图和所述类别标注信息，生成所述物体序列图像的标签信息...

【专利技术属性】
技术研发人员：陈景焕，陈凯歌，
申请(专利权)人：商汤国际私人有限公司，
类型：发明
国别省市：