混合视频以及特征编码和解码制造技术

本公开公开涉及混合视频和特征编码和解码，图像特征的编码和解码被独立地或差分地执行。在单独的层(例如，基础层和增强层)中对视频和特征进行编码和解码。提取视频帧的特征，提供基于帧的特征视频关联。从在增强层中编码的未压缩视频中将特征提取为特征比特流。将视频编码为视频比特流，通过将两个流多路复用为输出比特流，特征比特流嵌入到视频比特流中。可以是差分图像特征的图像特征被包括在视频的帧头信息的序列增强信息SEI消息中。将输出比特流作为输入比特流提供给解码器，使用帧头的SEI消息将输入比特流解复用为视频比特流和特征比特流。将两个比特流在各自的层中进行解码，并且使用基于帧的特征视频关联将图像特征定位在视频中。定位在视频中。定位在视频中。

【技术实现步骤摘要】
【国外来华专利技术】混合视频以及特征编码和解码


[0001]本公开公开涉及视频图像和视频图像的图像特征的混合编码和解码。

技术介绍

[0002]视频编码(视频编码和解码)广泛用于各种数字视频应用，例如，广播数字电视、互联网和移动网络上的视频传输，实时对话应用例如视频聊天，视频会议，DVD和蓝光光盘，视频内容获取和编辑系统，以及安全应用的摄录机。
[0003]自1990年在H.261标准中开发基于块的混合视频编码方法以来，新的视频编码技术和工具得到了发展，并且形成了新视频编码标准的基础。大多数视频编码标准的一个目标是将比特率降低到低于之前产品的水平，而不牺牲图片质量。进一步地，视频编码标准包括MPEG
‑
1视频、MPEG
‑
2视频、ITU
‑
T H.262/MPEG
‑
2、ITU
‑
T H.263、ITU
‑
T H.264/MPEG
‑
4、Part 10、高级视频编码(advanced video coding，AVC)、ITU...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于对视频进行编码的装置(500、600)，其特征在于，包括：处理电路被配置为：将所述视频编码(100)为视频比特流；从所述视频中提取(510)图像特征；将所述图像特征编码(520)为特征比特流；以及将所述特征比特流和所述视频比特流多路复用(530)为输出比特流。2.根据权利要求1所述的装置，其特征在于，其中，所述处理电路还被配置为提取所述视频的帧的所述图像特征。3.根据权利要求1和2所述的装置，其特征在于，其中，所述处理电路还被配置为将所述特征比特流和所述视频比特流多路复用为所述输出比特流，其中，所述多路复用定义与视频帧有关的所述视频比特流和与所述帧有关的所述特征比特流之间的关联。4.根据权利要求1至3所述的装置，其特征在于，其中，所述多路复用包括将所述视频的图像特征包括在序列增强信息SEI消息中，所述SEI消息属于所述视频的帧头信息。5.根据权利要求1至4所述的装置，其特征在于，其中，所述处理电路还被配置为通过差分编码对所述图像特征进行编码，包括：从所述视频比特流重建(200)所述视频；从所述重建视频提取(510)所述图像特征；通过从所述视频的提取图像特征中减去所述重建视频的提取图像特征来确定差分图像特征；以及将所述差分图像特征编码(520)为所述特征比特流。6.根据权利要求1至5所述的装置，其特征在于，其中，所述图像特征是尺度不变特征变换SIFT、加速鲁棒特征SURF、二进制鲁棒独立基本特征BRIEF或基于机器学习模型提取的特征中的任意一个。7.一种用于对视频进行重建的装置(700，800)，其特征在于，所述装置包括：处理电路被配置为将编码视频的输入比特流解复用(710)为视频比特流和特征比特流；从所述视频比特流解码(200)所述视频；从所述特征比特流解码(720)所述视频的图像特征；以及定位(734)所述视频中的所述图像特征。8.根据权利要求7所述的装置，其特征在于，其中，所述图...

【专利技术属性】
技术研发人员：安东，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：