视频处理方法及装置、电子设备和存储介质制造方法及图纸

技术编号:31021523 阅读:19 留言:0更新日期:2021-11-30 03:11
本公开涉及一种视频处理方法及装置、电子设备和存储介质,所述方法在获取待处理视频后,确定待处理视频中包括对象的目标帧对应的目标标识信息和目标位置信息,以根据各目标标识信息和目标位置信息确定待处理视频对应的补充增强信息。进一步地,根据补充增强信息和待处理视频进行视频编码,得到包括补充增强信息的已识别视频。本公开实施例通过在视频编码前对包括对象的各目标帧进行对象识别得到补充增强信息,得到具有补充增强信息的已识别视频。该方法实现了视频内容与对象识别结果的同步显示,即在播放视频的同时展示其中对象所在的位置以及标识信息,使得用户能够在浏览视频的同时快速准确定位需要关注的对象。的同时快速准确定位需要关注的对象。的同时快速准确定位需要关注的对象。

【技术实现步骤摘要】
视频处理方法及装置、电子设备和存储介质


[0001]本公开涉及计算机
,尤其涉及一种视频处理方法及装置、电子设备和存储介质。

技术介绍

[0002]目前对视频进行对象识别的方式通常为在视频中抽帧进行特征提取,再将提取得到的特征信息加入消息队列,通过依次读取消息队列中的特征信息进行搜索得到对象识别结果。相关技术对视频进行对象识别的方式难以将识别结果与视频内容对应,导致用户在浏览时难以准确定位需要关注的对象。

技术实现思路

[0003]本公开提出了一种视频处理方法及装置、电子设备和存储介质,旨在实现视频内容与对象识别结果的同步显示,在浏览视频的同时快速准确定位需要关注的对象。
[0004]根据本公开的第一方面,提供了一种视频处理方法,所述方法包括:
[0005]获取待处理视频;
[0006]确定所述待处理视频中包括对象的目标帧对应的目标标识信息和目标位置信息,所述目标位置信息用于表征所述目标位置信息对应目标帧中对象的位置,所述目标标识信息包括所述对象的身份信息;
[0007]根据各所述目标标识信息和目标位置信息确定补充增强信息;
[0008]根据所述补充增强信息和所述待处理视频进行视频编码,得到包括补充增强信息的已识别视频。
[0009]在一种可能的实现方式中,所述确定所述待处理视频中包括对象的目标帧对应的目标标识信息和目标位置信息包括:
[0010]对所述待处理视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息;
[0011]根据各所述对象特征信息确定目标帧;
[0012]根据各所述目标帧对应的对象特征信息和位置信息确定目标位置信息和目标标识信息。
[0013]在一种可能的实现方式中,所述根据各所述目标帧对应的对象特征信息和位置信息确定目标位置信息和目标标识信息包括:
[0014]确定各所述目标帧对应的位置信息为目标位置信息;
[0015]通过对各所述目标帧对应的对象特征信息进行对象识别,得到各所述目标帧对应的目标标识信息。
[0016]在一种可能的实现方式中,所述通过对各所述目标帧对应的对象特征信息进行对象识别,得到各所述目标帧对应的目标标识信息包括:
[0017]确定标识信息集合,所述标识信息集合中包括多个已认证的对象标识信息,以及
与各所述对象标识信息对应的标准对象特征;
[0018]根据各所述目标帧对应的对象特征信息在所述标识信息集合中确定匹配的标准对象特征;
[0019]确定与所述对象特征信息匹配的标准对象特征对应的对象标识信息为目标标识信息。
[0020]在一种可能的实现方式中,所述对所述待处理视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息包括:
[0021]对所述待处理视频进行解码得到第一视频;
[0022]对所述第一视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息。
[0023]在一种可能的实现方式中,所述对所述待处理视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息还包括:
[0024]将各所述对象特征信息和所述位置信息作为初步增强信息,与所述第一视频一同进行视频编码,得到包括初步增强信息的第二视频;
[0025]对所述第二视频进行解码得到第一视频和与所述第一视频对应的初步增强信息,所述初步增强信息中包括所述第一视频各帧的对象特征信息和位置信息。
[0026]在一种可能的实现方式中,所述对象特征信息中包括对象识别概率,所述对象识别概率用于表征在所述对象特征信息对应目标帧的位置信息表征的位置中存在对象的概率;
[0027]所述根据各所述对象特征信息确定目标帧包括:
[0028]确定对象识别概率大于概率阈值的帧为目标帧。
[0029]在一种可能的实现方式中,所述根据所述补充增强信息和所述待处理视频进行视频编码,得到包括补充增强信息的已识别视频包括:
[0030]根据所述补充增强信息和所述待处理视频解码得到的第一视频进行视频编码,得到包括补充增强信息的已识别视频。
[0031]在一种可能的实现方式中,所述方法还包括:
[0032]发送所述已识别视频。
[0033]在一种可能的实现方式中,所述方法还包括:
[0034]对所述已识别视频进行解码,得到第一视频和补充增强信息;
[0035]根据时间轴的顺序依次显示所述第一视频中的各帧,并在显示帧为目标帧的情况下,在所述目标帧上显示所述目标帧对应的目标标识信息和目标位置信息。
[0036]在一种可能的实现方式中,所述目标位置信息在所述目标位置信息对应的目标帧上以图像框的形式显示。
[0037]在一种可能的实现方式中,各所述目标帧对应的所述目标标识信息和所述目标位置信息通过调用绘图接口在目标帧上绘制的方式,叠加显示在所述目标帧上。
[0038]根据本公开的第二方面,提供了一种视频处理装置,所述装置包括:
[0039]视频获取模块,用于获取待处理视频;
[0040]对象识别模块,用于确定所述待处理视频中包括对象的目标帧对应的目标标识信息和目标位置信息,所述目标位置信息用于表征所述目标位置信息对应目标帧中对象的位
置,所述目标标识信息包括所述对象的身份信息;
[0041]信息确定模块,用于根据各所述目标标识信息和目标位置信息确定补充增强信息;
[0042]视频编码模块,用于根据所述补充增强信息和所述待处理视频进行视频编码,得到包括补充增强信息的已识别视频。
[0043]在一种可能的实现方式中,所述对象识别模块包括:
[0044]特征提取子模块,用于对所述待处理视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息;
[0045]目标帧确定子模块,用于根据各所述对象特征信息确定目标帧;
[0046]对象识别子模块,用于根据各所述目标帧对应的对象特征信息和位置信息确定目标位置信息和目标标识信息。
[0047]在一种可能的实现方式中,所述对象识别子模块包括:
[0048]目标位置确定单元,用于确定各所述目标帧对应的位置信息为目标位置信息;
[0049]目标标识确定单元,用于通过对各所述目标帧对应的对象特征信息进行对象识别,得到各所述目标帧对应的目标标识信息。
[0050]在一种可能的实现方式中,所述目标标识确定单元包括:
[0051]标识集合确定子单元,用于确定标识信息集合,所述标识信息集合中包括多个已认证的对象标识信息,以及与各所述对象标识信息对应的标准对象特征;
[0052]特征匹配子单元,用于根据各所述目标帧对应的对象特征信息在所述标识信息集合中确定匹配的标准对象特征;
[0053]标识匹配子单元,用于确定与所述对象特征信息匹配的标准对象特征对应的对象标识信息为目标标识信息。
[005本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种视频处理方法,其特征在于,所述方法包括:获取待处理视频;确定所述待处理视频中包括对象的目标帧对应的目标标识信息和目标位置信息,所述目标位置信息用于表征所述目标位置信息对应目标帧中对象的位置,所述目标标识信息包括所述对象的身份信息;根据各所述目标标识信息和目标位置信息确定补充增强信息;根据所述补充增强信息和所述待处理视频进行视频编码,得到包括补充增强信息的已识别视频。2.根据权利要求1所述的方法,其特征在于,所述确定所述待处理视频中包括对象的目标帧对应的目标标识信息和目标位置信息包括:对所述待处理视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息;根据各所述对象特征信息确定目标帧;根据各所述目标帧对应的对象特征信息和位置信息确定目标位置信息和目标标识信息。3.根据权利要求2所述的方法,其特征在于,所述根据各所述目标帧对应的对象特征信息和位置信息确定目标位置信息和目标标识信息包括:确定各所述目标帧对应的位置信息为目标位置信息;通过对各所述目标帧对应的对象特征信息进行对象识别,得到各所述目标帧对应的目标标识信息。4.根据权利要求3所述的方法,其特征在于,所述通过对各所述目标帧对应的对象特征信息进行对象识别,得到各所述目标帧对应的目标标识信息包括:确定标识信息集合,所述标识信息集合中包括多个已认证的对象标识信息,以及与各所述对象标识信息对应的标准对象特征;根据各所述目标帧对应的对象特征信息在所述标识信息集合中确定匹配的标准对象特征;确定与所述对象特征信息匹配的标准对象特征对应的对象标识信息为目标标识信息。5.根据权利要求2

4中任意一项所述的方法,其特征在于,所述对所述待处理视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息包括:对所述待处理视频进行解码得到第一视频;对所述第一视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息。6.根据权利要求5所述的方法,其特征在于,所述对所述待处理视频中的各帧进行对象特征提取,得到各帧对应的对象特征信息和位置信息还包括:将各所述对象特征信息和所述位置信息作为初步增强信息,与所述第一视频一同进行视频编码,得到包括初步增强信息的第二视频;对所述第二视频进行解码得到第一视频和与所述第一视频对应的初步增强信息,所述初步增强信息中包括所述第一视频各帧的对象特征信息和位置信息。7.根据权利要求2

【专利技术属性】
技术研发人员:潘志华阮佳彬刘晖
申请(专利权)人:深圳市商汤科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1