一种视频目标分割方法、装置、计算机设备及存储介质制造方法及图纸

本发明专利技术公开了一种视频目标分割方法、装置、计算机设备及存储介质。该方法包括：S10、将参考帧I

【技术实现步骤摘要】
一种视频目标分割方法、装置、计算机设备及存储介质


[0001]本专利技术实施例涉及视频目标分割
，尤其涉及一种视频目标分割方法、装置、计算机设备及存储介质。

技术介绍

[0002]视频目标分割是指在视频的第一帧中给定要分割的对象，然后在整个视频序列中对这一目标对象进行持续地跟踪与分割。随着各种短视频APP的兴起，视频已经成为人类最普遍的交互方式。视频目标分割的应用场景较为广泛，常用于基于视频的人机交互、智慧工业、智能安保跟踪和智能监控，而且需要视频目标分割的应用场景正在持续增加。然而现阶段视频目标分割的精度和效率并不是很高，尚未达到人们的生产生活要求。

技术实现思路

[0003]本专利技术提供一种视频目标分割方法、装置、计算机设备及存储介质，以解决现有技术中存在的上述问题。
[0004]第一方面，本专利技术实施例提供了一种视频目标分割方法。该方法包括：
[0005]S10：获取待分割视频；将所述待分割视频的第一个视频帧作为参考帧I
t
‑1，其中，I
t
‑1的尺寸为C1*H本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频目标分割方法，其特征在于，包括：S10：获取待分割视频；将所述待分割视频的第一个视频帧作为参考帧I
t
‑1，其中，I
t
‑1的尺寸为C1*H*W，C1、H和W分别表示视频帧的通道数、长边像素点数和宽边像素点数；选取I
t
‑1的一个通道的图像作为I
t
‑1的分割图像V
t
‑1；S20：将I
t
‑1的下一个视频帧作为目标帧I
t
，将I
t
‑1和I
t
分别输入特征提取网络，得到I
t
‑1的特征嵌入f
t
‑1和I
t
的特征嵌入f
t
，其中，f
t
‑1和f
t
的尺寸为C2*H*W，C2表示f
t
‑1和f
t
的通道数，视频帧的每个像素点对应所述视频帧的特征嵌入中的一个特征向量，其中，视频帧的像素点为所述视频帧在H
‑
W平面内的像素点，所述特征向量的维度为C2；S30：基于f
t
‑1和f
t
中的特征向量，计算I
t
的每个像素点与所述每个像素点在I
t
‑1中的对应像素点的多个邻居像素点之间的相似度，从而生成I
t
‑1与I
t
之间的相似度矩阵A
t，t
‑1，其中，所述每个像素点在I
t
的H
‑
W平面内的位置与所述对应像素点在I
t
‑1的H
‑
W平面内的位置相同；S40：基于f
t
‑1，计算I
t
‑1的每个像素点的显著性，从而生成I
t
‑1的显著性矩阵O
t
‑1，其中，O
t
‑1与A
t，t
‑1的大小相同；S50：将A
t，t
‑1和O
t
‑1相加，得到I
t
‑1与I
t
之间的关系矩阵C
t，t
‑1；S60：以C
t，t
‑1中的元素为权重，将V
t
‑1的每个像素点的多个邻居像素点的像素值进行加权求和，将加权求和的结果作为所述每个像素点在I
t
的重构分割图像中的对应像素点的像素值，从而生成其中，V
t
‑1与的尺寸均为H*W，所述每个像素点在V
t
‑1中的位置与所述对应像素点在中的位置相同；S70：将I
t
作为新的I
t
‑1，将作为新的I
t
‑1的分割图像，返回S20，直到获得所有视频帧的重构分割图像。2.如权利要求1所述的视频目标分割方法，其特征在于，S30包括：S31：根据公式(1)计算I
t
的每个像素点与所述每个像素点在I
t
‑1中的对应像素点的多个邻居像素点之间的相似度：其中，表示I
t
的第i个像素点对应的特征向量，的维度为C2；表示在I
t
‑1中的对应像素点的第j个邻居像素点的特征向量，P1表示在I
t
‑1中的对应像素点的所有邻居像素点构成的集合；表示与所述第j个邻居像素点之间的相似度；<...>表示两个特征向量在每个位置上的元素相乘后求和的操作；S32：将作为A
t，t
‑1的第i行、第j列元素，从而生成A
t，t
‑1，其中，A
t，t
‑1包括(H*W)行、N列，A
t，t
‑1的每一行对应I
t
的一个像素点，A
t，t
‑1的每一列对应I
t
的每个像素点在I
t
‑1中的对应像素点的一个邻居像素点。3.如权利要求2所述的视频目标分割方法，其特征在于，S40包括：
S41：根据公式(2)计算I
t
‑1的每个像素点的显著性：O
′
t
‑1＝W*f
t
‑1ꢀꢀꢀ
(2)其中，W表示独立线性变换，O
′
t
‑1表示f
t
‑1经过W后得到的特征矩阵，O
′
t
‑1的尺寸为1*H*W，O
′
t
‑1的每个元素表示I
t
‑1的一个像素点对I
t
‑1的所有像素点的影响值；S42：从O
′
t
‑1中提取I
t
‑1的第i个像素点对的第j个邻居像素点的影响值，将所述影响值作为O
t
‑1的第i行、第j列元素，从而生成O
t
‑1。4.如权利要求3所...

【专利技术属性】
技术研发人员：丁冬睿，侯文杰，杨光远，逯天斌，魏红雷，房体品，
申请(专利权)人：山东力聚机器人科技股份有限公司，
类型：发明
国别省市：