【技术实现步骤摘要】
视频的特征提取及切片方法、装置、电子设备及存储介质
[0001]本公开实施例涉及计算机
,尤其涉及一种视频的特征提取及切片方法、装置、电子设备及存储介质。
技术介绍
[0002]视频数据可认为是依据现有的视频图像压缩标准将各视频帧压缩编码后得到的数据。现有的视频的特征提取方法通常为,先将视频数据解码为各视频帧后,再提取各视频帧的特征。现有的切片方法通常以上述特征提取方法为基础,可包括:将视频数据解码为各视频帧,对每一帧都预测其是否为边界;在预测每一帧时,为考虑时间域上的上下文信息,需要将当前帧的前、后帧输入网络,基于网络提取各输入帧的特征并预测;根据预测的边界进行切片。
[0003]现有的特征提取方法的不足之处至少包括:需要耗费大量的存储空间存储解码后的视频帧,以及需要耗费一定的解码时间。现有的切片方法除上述不足外,还至少包括如下缺陷:在预测每一帧时都需重新提取输入帧的特征,引入了大量冗余计算,大大降低了切片效率。
技术实现思路
[0004]本公开实施例提供了一种视频的特征提取及切片方法、装置、 ...
【技术保护点】
【技术特征摘要】
1.一种视频的特征提取方法,其特征在于,包括:确定视频数据的各图片组;每个图片组依时序包括一个帧内编码帧和至少一个前向预测编码帧;针对各图片组,提取所述帧内编码帧的第一帧特征,提取各所述前向预测编码帧相对于所述帧内编码帧的运动补偿信息的补偿特征;根据所述第一帧特征对各所述补偿特征进行更新,得到各所述前向预测编码帧的第二帧特征,以得到所述视频数据中各视频帧的帧特征。2.根据权利要求1所述的方法,其特征在于,所述根据所述第一帧特征对各所述补偿特征进行更新,包括:将所述第一帧特征、所述运动补偿信息和所述补偿特征进行拼接,得到拼接图像;分别确定所述拼接图像在通道维度的第一权值,以及在空间维度的第二权值;根据所述第一权值和所述第二权值对所述第一帧特征进行处理得到更新参数,并根据所述更新参数对所述补偿特征进行更新。3.根据权利要求2所述的方法,其特征在于,所述分别确定所述拼接图像在通道维度的第一权值,以及在空间维度的第二权值,包括:提取所述拼接图像的拼接特征;所述拼接特征与所述第一帧特征具有相同尺寸;将所述拼接特征在空间维度进行池化,并将池化结果进行全连接,得到所述拼接图像在通道维度的第一权值;将所述拼接特征中各通道的特征图进行卷积,并将卷积结果进行逻辑回归,得到所述拼接图像在空间维度的第二权值。4.根据权利要求2所述的方法,其特征在于,所述根据所述第一权值和所述第二权值对所述第一帧特征进行处理得到更新参数,包括:将所述第一帧特征与所述第一权值和所述第二权值相乘,得到更新参数。5.根据权利要求2所述的方法,其特征在于,所述根据所述更新参数对所述补偿特征进行更新,包括:将所述补偿特征在空间维度进行池化,并将池化结果与所述更新参数相加。6.根据权利要求1所述的方法,其特征在于,所述运动补偿信息包括运动向量和残差;相应的,所述根据所述第一帧特征对各所述补偿特征进行更新,得到各所述前向预测编码帧的第二帧特征,包括:根据所述第一帧特征,分别对各所述运动向量的初始向量特征,以及各所述残差的初始残差特征进行更新,得到目标向量特征和目标残差特征;根据各所述目标向量特征和目标残差特征,确定各所述前向预测编码帧的第二帧特征。7.根据权利要求1所述的方法,其特征在于,所述各所述前向预测编码帧相对于所述帧内编码帧的运动补偿信息,基于下述步骤确定:分别以各所述前向预测编码帧为起点,循环依时序向前确定当前帧的引用帧,并将所述引用帧作为新的当前帧,直至所述引用帧为所述帧内编码帧为止;在所述循环过程中,对所述当前帧与所述引用帧之间的运动补偿信息进行累积;在所述循环停止时,得到各所述前向预测编码帧相对于所述帧内编码帧的运动补偿信
息。8.一种视频的切片方法,其特征在于,包括:确定目标视频数据中各视频帧的帧特征;确定所述目标视频数据的候选边界帧,根据比所述候选边界帧时序靠前的视频帧的帧特征确定左特征,以及根据比所述候选边界帧时序靠后的视频帧的帧特征确定右特征;将所述左特征与所述右特征输入预先...
【专利技术属性】
技术研发人员:王欣尧,文珑银,李聪聪,洪德祥,
申请(专利权)人:脸萌有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。