视频的目标分割方法、装置、设备及计算机可读存储介质制造方法及图纸

技术编号:33719187 阅读:15 留言:0更新日期:2022-06-08 21:10
本申请公开了一种视频的目标分割方法、装置、设备及计算机可读存储介质,属于图像处理领域。该方法包括:从视频帧序列中获取第一视频帧;通过曲线摆置分割网络模型对第一视频帧进行处理,生成第一视频帧中目标边缘的闭合曲线,将生成的闭合曲线作为第一目标边缘;对第一目标边缘的位置进行调整,确定第一视频帧之后的视频帧中的目标边缘,以对之后视频帧进行目标跟踪。本申请能够通过曲线摆置分割网络模型从视频帧中准确地提取出目标边缘,提高了分割目标的完整性和清晰度。另外,通过对已提取的目标边缘的位置进行调整,来确定之后视频帧的目标边缘,提高了分割目标的边缘稳定性,跟踪效果更加稳定。踪效果更加稳定。踪效果更加稳定。

【技术实现步骤摘要】
视频的目标分割方法、装置、设备及计算机可读存储介质


[0001]本申请涉及图像处理领域,特别涉及一种视频的目标分割方法、装置、设备及计算机可读存储介质。

技术介绍

[0002]视频的目标分割是指将视频帧分割成若干个特定的、具有独特性质的区域,并从中提取出感兴趣目标的技术和过程,它是目标检测中的重要步骤。
[0003]相关技术中,通常采用语义分割技术对视频进行目标分割,且对于视频帧序列中的每个视频帧,均采用语义分割技术单独进行分割处理。在采用语义分割技术对每个视频帧单独进行分割处理的过程中,先对视频帧中的每个像素进行分类,得到每个像素的类别,再根据每个像素的类别,从视频帧的所有像素中确定出属于目标的像素集合,将确定的像素集合作为待分割的目标。
[0004]但是语义分割技术只能确定出一个像素集合,像素集合中像素之间可能没有关联,导致像素集合的边界没有整体性,无法分割出完整清晰的目标。而且,采用语义分割技术对各个视频帧单独进行分割处理,可能会导致从各个视频帧中分割出的同一目标的变化较大,帧间信息的融合也比较困难,稳定性较低。
本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种视频的目标分割方法,其特征在于,包括:从视频帧序列中获取第一视频帧,所述第一视频帧为所述视频帧序列中除最后一个视频帧之外的任一视频帧;通过曲线摆置分割网络模型对所述第一视频帧进行处理,生成所述第一视频帧中目标边缘的闭合曲线,将生成的闭合曲线作为第一目标边缘;对所述第一目标边缘的位置进行调整,确定位于所述第一视频帧之后的视频帧中的目标边缘,以对位于所述第一视频帧之后的视频帧进行目标跟踪。2.如权利要求1所述的方法,其特征在于,所述通过曲线摆置分割网络模型对所述第一视频帧进行处理,生成所述第一视频帧中目标边缘的闭合曲线,包括:通过所述曲线摆置分割网络模型对所述第一视频帧进行处理,依次预测所述第一视频帧中目标边缘上的锚点和曲率;基于预测的锚点和曲率,生成所述第一视频帧中目标边缘的闭合曲线。3.如权利要求1所述的方法,其特征在于,所述对所述第一目标边缘的位置进行调整,确定位于所述第一视频帧之后的视频帧中的目标边缘,包括:对于第二视频帧,在所述第二视频帧中对所述第一目标边缘的位置进行调整,得到第二目标边缘,所述第二视频帧为所述第一视频帧的下一个视频帧;将所述第二目标边缘确定为所述第二视频帧的目标边缘。4.如权利要求1所述的方法,其特征在于,所述对所述第一目标边缘的位置进行调整,确定位于所述第一视频帧之后的视频帧中的目标边缘,包括:对于第三视频帧,在所述第三视频帧中对指定目标边缘的位置进行调整,得到第四目标边缘,所述第三视频帧为位于所述第二视频帧之后的任一视频帧,所述指定目标边缘为所述第三视频帧的上一个视频帧的目标边缘;将所述第四目标边缘确定为所述第三视频帧的目标边缘。5.如权利要求3所述的方法,其特征在于,所述在所述第二视频帧中对所述第一目标边缘的位置进行调整,得到第二目标边缘,包括:在所述第二视频帧中,按照预设规则对所述第一目标边缘的位置进行调整;将所述第二视频帧和调整后的第一目标边缘输入至目标边缘匹配模型中,通过所述边缘匹配模型,确定调整后的第一目标边缘与所述第二视频帧中的目标之间的匹配信息,根据所述匹配信息确定所述第二目标边缘。6.如权利要求5所述的方法,其特征在于,所述在所述第二视频帧中,按照预设规则对所述第一目标边缘的位置进行调整,包括:基于所述第一视频帧和所述第二视频帧中像素在时域上的变化,以及所述第一视频帧和所述第二视频帧之间的相关性,计算所述第一视频帧和所述第二视频帧之间光流的运动矢量;基于所述运动矢量对所述第一目标边缘的位置进行调整。7.如权利要求5所述的方法,其特征在于,所述在所述第二视频帧中,按照预设规则对所述第一目标边缘的位置进行调整,包括:在所述第二视频帧中,按照随机调整机制对所述第一目标边缘的位置进行调整。8.如权利要求5所述的方法,其特征在于,所述根据所述匹配信息确定所述第二目标边缘,包括:
若根据所述匹配信息确定调整后的第一目标边缘与所述第二视频帧中的目标匹配,则将调整后的第一目标边缘确定为所述第二目标边缘;若根据所述匹配信息确定调整后的第一目标边缘与所述第二视频帧中的目标不匹配,则按照所述预设规则对调整后的第一目标边缘的位置继续进行调整,直至确定调整后的第一目标边缘与所述第二视频帧中的目标匹配,将调整后...

【专利技术属性】
技术研发人员:邹梦超刘阳兴林染染党晚婷张传昊
申请(专利权)人:武汉TCL集团工业研究院有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1