对仿射译码块进行光流预测修正的方法及装置制造方法及图纸

本发明专利技术涉及一种装置、一种编码器、一种解码器及多种对应方法，用于对仿射译码块进行光流预测修正(prediction refinement with optical flow，PROF)，其中，当所述仿射译码块满足多个光流决策条件时，对所述仿射译码块的当前子块执行PROF过程，得到所述仿射译码块的所述当前子块的经修正的预测样本值。在执行基于子块的仿射运动补偿之后，所述当前子块的当前样本的预测样本值通过增加增量(delta)预测值被修正。因此，本发明专利技术可以更好地平衡译码复杂度和预测精度。杂度和预测精度。杂度和预测精度。

【技术实现步骤摘要】
【国外来华专利技术】对仿射译码块进行光流预测修正的方法及装置
[0001]相关申请交叉引用
[0002]本专利申请要求于2019年3月20日提交的申请号为62/821,440的美国临时专利申请的优先权以及要求于2019年4月28日提交的申请号为62/839,765的美国临时专利申请的优先权。上述专利申请的全部公开内容通过引用结合在本文中。


[0003]本专利技术实施例大体上涉及图像处理领域，更具体地涉及一种在需要一个或多个约束条件时使用光流对基于子块的仿射运动补偿预测值进行修正的方法。

技术介绍

[0004]视频译码(视频编码和解码)广泛用于数字视频应用，例如广播数字电视、基于互联网和移动网络的视频传输、视频聊天、视频会议等实时会话应用、DVD和蓝光光盘、视频内容采集和编辑系统以及安全应用的可携式摄像机。
[0005]即使视频相对较短，也需要大量的视频数据来描述，当数据要在带宽容量有限的通信网络中流式传输或以其它方式传输时，这样可能会造成困难。因此，视频数据通常要先压缩，然后通过现代电信网络进行传输。由于内存资源可能有限，当在存储设备上存储本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种对仿射译码块进行光流预测修正(prediction refinement with optical flow，PROF)的方法，其特征在于，所述方法包括：对所述仿射译码块的当前子块执行PROF过程，得到所述仿射译码块的所述当前子块的经修正的预测样本值，其中，所述仿射译码块不满足多个PROF应用约束条件，所述对所述仿射译码块的当前子块执行PROF过程包括：对所述当前子块执行光流处理，得到所述当前子块的当前样本的增量预测值；根据所述当前样本的所述增量预测值和所述当前子块的所述当前样本的预测样本值，获取所述当前样本的经修正的预测样本值。2.根据权利要求1所述的方法，其特征在于，在所述对所述仿射译码块的当前子块执行PROF过程之前，所述方法还包括：确定所述仿射译码块不满足所述多个PROF应用约束条件。3.根据权利要求1或2所述的方法，其特征在于，所述多个PROF应用约束条件包括：第一指示信息表示针对包括所述仿射译码块的图像禁用PROF，或者第一指示信息表示针对与包括所述仿射译码块的图像相关的多个条带禁用PROF；第二指示信息表示所述仿射译码块没有进行分割。4.根据权利要求1或2所述的方法，其特征在于，所述多个PROF应用约束条件中的一个条件为：变量fallbackModeTriggered设置为1。5.根据权利要求1至4中任一项所述的方法，其特征在于，所述对所述当前子块执行光流处理，得到所述当前子块的当前样本的增量预测值包括：获取第二预测矩阵，其中，所述第二预测矩阵是根据所述当前子块的运动信息生成的；根据所述第二预测矩阵，生成水平预测梯度矩阵和垂直预测梯度矩阵，其中，所述水平预测梯度矩阵和所述垂直预测梯度矩阵的尺寸相同，所述第二预测矩阵的尺寸大于或等于所述水平预测梯度矩阵和所述垂直预测梯度矩阵的尺寸；根据所述当前样本在所述水平预测梯度矩阵中的水平预测梯度值、所述当前样本在所述垂直预测梯度矩阵中的垂直预测梯度值以及所述当前子块的所述当前样本的运动矢量与所述子块的中心样本的运动矢量之间的差值，计算所述当前子块的所述当前样本的增量预测值。6.根据权利要求5所述的方法，其特征在于，所述获取第二预测矩阵包括：根据所述当前子块的运动信息，生成第一预测矩阵，其中，所述第一预测矩阵的元素对应于所述当前子块的预测样本值，并根据所述第一预测矩阵，生成所述第二预测矩阵；或者根据所述当前子块的运动信息，生成所述第二预测矩阵。7.根据权利要求5或6所述的方法，其特征在于，所述第二预测矩阵的一个元素表示为I1(p,q)，其中，p的取值范围为[
–
1,sbW]，q的取值范围为[
–
1,sbH]；所述水平预测梯度矩阵的一个元素表示为X(i,j)并对应于所述仿射译码块中的所述当前子块的样本(i,j)，其中，i的取值范围为[0,sbW
–
1]，j的取值范围为[0,sbH
–
1]；所述垂直预测梯度矩阵的一个元素表示为Y(i,j)并对应于所述仿射译码块中的所述当前子块的样本(i,j)，其中，i的取值范围为[0,sbW
–
1]，j的取值范围为[0,sbH
–
1]，其中，sbW表示所述仿射译码块中的所述当前子块的宽度，sbH表示所述仿射译码块中的所述
当前子块的高度。8.根据权利要求1至7中任一项所述的方法，其特征在于，在所述对所述仿射译码块的当前子块执行PROF过程之前，所述方法还包括：对所述仿射译码块的所述当前子块执行基于子块的仿射运动补偿，得到所述当前子块的预测样本值。9.一种对仿射译码块进行光流预测修正(prediction refinement with optical flow，PROF)的方法，其特征在于，所述方法包括：对所述仿射译码块的当前子块执行PROF过程，得到所述仿射译码块的所述当前子块的经修正的预测样本值，其中，所述仿射译码块满足多个光流决策条件；所述对所述仿射译码块的当前子块执行PROF过程包括：对所述当前子块执行光流处理，得到所述当前子块的当前样本的增量预测值；根据所述当前样本的所述增量预测值和所述当前子块的所述当前样本的预测样本值，获取所述当前样本的经...

【专利技术属性】
技术研发人员：陈焕浜，杨海涛，陈建乐，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：