使用图像分割进行视频编码的系统和方法技术方案

提供了一种视频编码器，包括图像检测和分割处理器，其接收视频帧并生成对象识别数据和至少一个图像分割掩码。掩码到编码块映射处理器将分割掩码映射到视频帧的CTU，并且基于CTU中的检测到的对象边界将至少一个CTU分割成多个编码单元(CU)。视频编码处理器接收视频帧、对象识别数据和分割的CU，并且用至少部分地基于CU是否包含对象而确定的分辨率或量化参数中的至少一者来编码CU。

【技术实现步骤摘要】
【国外来华专利技术】

本专利技术总体上涉及视频编码和解码领域。具体地，本专利技术涉及使用图像分割进行视频编码器加速的系统和方法。

技术介绍

1、视频编解码器可以包括压缩或解压缩数字视频的电子电路或软件。视频编解码器可以将未压缩的视频转换为压缩格式，反之亦然。在视频压缩的上下文中，压缩视频(和/或执行其某一功能)的设备通常可被称为编码器，而解压缩视频(和/或执行其某一功能)的设备可被称为解码器。

2、压缩数据的格式可以符合标准视频压缩规范。压缩可能是有损的，因为压缩视频缺少原始视频中存在的一些信息。这样的后果可能包括解压缩视频可能具有比原始未压缩视频低的质量，因为没有足够的信息来准确地重建原始视频。

3、在视频质量、用于表示视频的数据量(例如由位率确定)、编码和解码算法的复杂度、对数据丢失和错误的敏感性、编辑的容易性、随机访问、端到端延迟(例如时延)等之间可能存在复杂的关系。

4、运动补偿可以包括一种考虑到参考帧(例如先前和/或将来帧)通过考虑相机和/或视频中对象的运动来预测视频帧或其一部分的方法。运动补偿可以在用于视频压缩的视频数据的编码和解本文档来自技高网...

【技术保护点】

1.一种对视频信号编码的方法，包括：

2.根据权利要求1所述的方法，还包括：用至少部分地由CU是否包含感兴趣对象确定的分辨率或量化参数中的至少一者对所述CU编码。

3.根据权利要求1所述的方法，其中，所述分割选自包括水平分割、垂直分割和几何分割的组。

4.根据权利要求1所述的方法，其中，所述图像分割选自包括语义分割、实例分割和全景分割的组。

5.根据权利要求1所述的方法，其中，所述对象识别数据包括用于在所述视频帧中检测到的各个对象的实例标签。

6.根据权利要求1所述的方法，其中，所述对象识别数据包括所述视频帧中的各个所述像素的实...

【技术特征摘要】
【国外来华专利技术】

1.一种对视频信号编码的方法，包括：

2.根据权利要求1所述的方法，还包括：用至少部分地由cu是否包含感兴趣对象确定的分辨率或量化参数中的至少一者对所述cu编码。

3.根据权利要求1所述的方法，其中，所述分割选自包括水平分割、垂直分割和几何分割的组。

4.根据权利要求1所述的方法，其中，所述图像分割选自包括语义分割、实例分割和全景分割的组。

5.根据权利要求1所述的方法，其中，所述对象识别数据包括用于在所述视频帧中检测到的各个对象的实例标签。

6.根据权利要求1所述的方法，其中，所述对象识别数据包括所述视频帧中的各个所述像素的实例标签。

7.根据权利要求1所述的方法，其中，所述对象识别数据包括对象类、所述帧中的对象位置。

8.根据权利要求7所述的方法，其中，所述对象识别数据还包括对象的边界框。

9.根据权利要求2所述的方法，还包括运动估计的步骤，其中，至少部分地基于所述对象识别数据来执行所述运动估计。

10.一种视频编码器，所述视频编码器接收包括多个像素的视频帧数据，所述视频帧...

【专利技术属性】
技术研发人员：菲力博·阿兹克，博里约夫·福尔特，哈利·卡瓦，
申请(专利权)人：OP解决方案公司，
类型：发明
国别省市：