对视频信号解码的双向光流方法、计算设备和存储介质技术

本公开提供了一种用于对视频信号进行解码的双向光流BDOF方法、计算设备、非暂态计算机可读存储介质和计算机程序产品。该方法包括：获得与视频块相关联的第一参考图片和第二参考图片，其中，按照显示顺序，所述第一参考图片在当前图片之前并且所述第二参考图片在所述当前图片之后；从第一参考图片中的参考块获得视频块的第一预测样点；从第二参考图片中的参考块获得视频块的第二预测样点；获得填充的预测样点，并且基于填充的预测样点获得第一预测样点和第二预测样点的水平梯度值和垂直梯度值；基于水平梯度值和垂直梯度值，获得视频块中样点的运动细化；以及基于运动细化获得视频块的双向预测样点。频块的双向预测样点。频块的双向预测样点。

【技术实现步骤摘要】
对视频信号解码的双向光流方法、计算设备和存储介质
[0001]本申请是申请号为202080031089.1、专利技术名称为“用于利用光流的预测细化的方法和装置”的专利技术专利申请的分案申请，该专利技术专利申请为2020年4月27日提交的国际专利申请PCT/US2020/030155的中国国家阶段申请，该国际专利申请基于2019年4月25日提交的临时申请号62/838,939并要求其优先权，该临时申请的全部内容通过引用以其全文并入本文。


[0002]本公开涉及视频编解码和压缩。更具体地，本公开涉及关于在通用视频编解码(VVC)标准中研究的两种帧间预测工具，即，利用光流的预测细化(PROF)和双向光流(BDOF)，的方法和装置。

技术介绍

[0003]可以使用各种视频编解码技术来压缩视频数据。视频编解码是根据一个或多个视频编解码标准来执行的。例如，视频编解码标准包括通用视频编解码(VVC)、联合探索测试模型(JEM)、高效视频编解码(H.265/HEVC)、高级视频编解码(H.264/AVC)、运动图片专家组(MPEG)编解码等。视频编解码通常使用预测方法(例如，帧间预测、帧内预测等)进行，这些方法利用存在于视频图像或序列中的冗余。视频编解码技术的一个重要目标在于，将视频数据压缩成使用较低比特率的形式，同时避免或最小化视频质量降级。

技术实现思路

[0004]本公开的示例提供了用于利用光流的预测细化的比特深度表示的方法和装置。
[0005]根据本公开的第一方面，提供了一种用于对视频信号进行解码的利用光流的预测细化(PROF)的比特深度表示方法。该方法可以包括获得与视频信号内的视频块相关联的第一参考图片以及从当前图片中的视频块到第一参考图片中的参考块的第一运动矢量(MV)。第一参考图片可以包括多个非重叠的视频块，并且至少一个视频块可以与至少一个MV相关联。该方法还可以包括获得从第一参考图片中的参考块生成的视频块的第一预测样点I(i，j)。i和j可以表示视频块的一个样点的坐标。该方法可以包括控制内部PROF参数的内部比特深度。该内部PROF参数可以包括针对预测样点I(i，j)推导的水平梯度值、垂直梯度值、水平运动差和垂直运动差。该方法可以附加地包括基于水平梯度值、垂直梯度值、水平运动差和垂直运动差获得第一预测样点I(i，j)的预测细化值。该方法可以包括当视频块可以包含第二MV时，获得与第二MV相关联的第二预测样点I
′
(i，j)以及该第二预测样点I
′
(i，j)的对应的预测细化值。该方法可以包括基于第一预测样点I(i，j)、第二预测样点I
′
(i，j)和预测细化值的组合，获得视频块的最终的预测样点。
[0006]根据本公开的第二方面，提供了一种用于对视频信号进行解码的双向光流(BDOF)的比特深度表示方法。该方法可以包括获得与视频块相关联的第一参考图片I
(0)
和第二参考图片I
(1)
。按照显示顺序，第一参考图片I
(0)
可以在当前图片之前并且第二参考图片I
(1)
可
以在当前图片之后。该方法还可以包括从第一参考图片I
(0)
中的参考块获得视频块的第一预测样点I
(0)
(i，j)。i和j可以表示当前图片的一个样点的坐标。该方法可以包括从第二参考图片I
(1)
中的参考块获得视频块的第二预测样点I
(1)
(i，j)。该方法可以包括基于第一预测样点I
(0)
(i，j)和第二预测样点I
(1)
(i，j)将BDOF应用于视频块。该方法可以包括基于填充的预测样点获得第一预测样点I
(0)
(i，j)和第二预测样点I
(1)
(i，j)的水平梯度值和垂直梯度值。该方法可以附加地包括基于被应用于视频块的BDOF以及水平梯度值和垂直梯度值，获得视频块中样点的运动细化。该方法可以包括基于运动细化获得视频块的双向预测样点。
[0007]根据本公开的第三方面，提供了一种计算设备。该计算设备可以包括一个或多个处理器、存储能够由该一个或多个处理器执行的指令的非暂态计算机可读存储器。该一个或多个处理器可以被配置为获得与视频信号内的视频块相关联的第一参考图片以及从当前图片中的视频块到第一参考图片中的参考块的第一MV。第一参考图片可以包括多个非重叠的视频块，并且至少一个视频块可以与至少一个MV相关联。该一个或多个处理器还可以被配置为获得从第一参考图片中的参考块生成的视频块的第一预测样点I(i，j)。i和j表示视频块的一个样点的坐标。该一个或多个处理器可以被配置为控制内部PROF参数的内部比特深度。该内部PROF参数可以包括针对预测样点I(i，j)推导的水平梯度值、垂直梯度值、水平运动差和垂直运动差。该一个或多个处理器可以附加地被配置为基于水平梯度值、垂直梯度值、水平运动差和垂直运动差获得第一预测样点I(i，j)的预测细化值。该一个或多个处理器可以附加地被配置为当视频块可以包含第二MV时，获得与第二MV相关联的第二预测样点I
′
(i，j)以及第二预测样点I
′
(i，j)的对应的预测细化值。该一个或多个处理器可以被配置为基于第一预测样点I(i，j)、第二预测样点I
′
(i，j)和预测细化值的组合，获得视频块的最终的预测样点。
[0008]根据本公开的第四方面，提供了一种计算设备。该计算设备可以包括一个或多个处理器、存储能够由一个或多个处理器执行的指令的非暂态计算机可读存储器。该一个或多个处理器可以被配置为获得与视频块相关联的第一参考图片I
(0)
和第二参考图片I
(1)
。按照显示顺序，第一参考图片I
(0)
可以在当前图片之前并且第二参考图片I
(1)
可以在当前图片之后。该一个或多个处理器还可以被配置为从第一参考图片I
(0)
中的参考块获得视频块的第一预测样点I
(0)
(i，j)。i和j可以表示当前图片的一个样点的坐标。该一个或多个处理器可以被配置为从第二参考图片I
(1)
中的参考块获得视频块的第二预测样点I
(1)
(i，j)。该一个或多个处理器可以被配置为基于第一预测样点I
(0)
(i，j)和第二预测样点I
(1)
(i，j)将BDOF应用于视频块。该一个或多个处理器可以被配置为基于填充的预测样点获得第一预测样点I
(0)
(i，j)和第二预测样点I
(1)
(i，j)的水平梯度值和垂直梯度值。该一个或多个处理器可以附加地被配置为基于被应用于视频块的BDOF以及水平梯度值和垂直梯度值，获得视频块中样点的运动细化。该一个或多个处理器可以被配置为基于运动细化获得视频块的双向预测样点。
[0009]应当理解的是，前述概括本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于对视频信号进行解码的双向光流BDOF方法，包括：获得与视频块相关联的第一参考图片和第二参考图片，其中，按照显示顺序，所述第一参考图片在当前图片之前并且所述第二参考图片在所述当前图片之后；从所述第一参考图片中的参考块获得所述视频块的第一预测样点；从所述第二参考图片中的参考块获得所述视频块的第二预测样点；获得填充的预测样点，并且基于所述填充的预测样点获得所述第一预测样点和所述第二预测样点的水平梯度值和垂直梯度值，包括：针对所述第一预测样点，推导在所述视频块外部的附加的行和列的预测样点，所述附加的行和列的预测样点与所述视频块的顶部边界、左边界、底部边界和右边界中的相应边界相邻；针对所述第二预测样点，推导在所述视频块外部的附加的行和列的预测样点，所述附加的行和列的预测样点与所述视频块的顶部边界、左边界、底部边界和右边界中的相应边界相邻；以及基于所推导的所述附加的行和列的预测样点，获得所述第一预测样点和所述第二预测样点的水平梯度值和垂直梯度值；其中，推导所述附加的行和列的预测样点进一步包括：从所述参考图片中在分数样点位置左侧的整数参考样点推导在所述视频块外部与所述左边界和所述右边界相邻的预测样点，以及从所述参考图片中在分数样点位置上方的整数参考样点推导在所述视频块外部与所述顶部边界和所述底部边界相邻的预测样点；或者从所述参考图片中在水平方向上最接近分数样点位置的整数参考样点推导在所述视频块外部与所述左边界和所述右边界相邻的预测样点，以及从所述参考图片中在垂直方向上最接近分数样点位置的整数参考样点推导在所述视频块外部与所述顶部边界和所述底部边界相邻的预测样点；基于所述水平梯度值和所述垂直梯度值，获得所述视频块中样点的运动细化；以及基于所述运动细化获得所述视频块的双向预测样点。2.如权利要求1所述的方法，其中，所述附加的行和列的预测样点是从对应的整数参考样点复制得到的。3.一种计算设备，包括：一个或多个处理器；非暂态计算机可读存储介质，存储有能够由所述一个或多个处理器执行的指令，其中，所述一个或多个处理器被配置为：获得与视频块相关联的第一参考图片和第二参考图片，其中，按照显示顺序，所述第一参考图片在当前图片之前并且所述第二参考图片在所述当前图片之后；从所述第一参考...

【专利技术属性】
技术研发人员：修晓宇，陈漪纹，王祥林，叶水明，马宗全，朱弘正，
申请(专利权)人：北京达佳互联信息技术有限公司，
类型：发明
国别省市：