执行用于调色板模式的率失真分析的方法和装置制造方法及图纸

一种电子设备执行编码和解码视频数据的方法。该方法包括：识别用于调色板模式编码的编码块；针对该编码块确定调色板表；通过对该编码块进行率失真分析来更新该调色板表，其中该编码块的率计算和失真计算被设置为使用用于该编码块的参考样本的内部编码比特深度；以及将更新了的调色板表和所述编码块的对应调色板索引图编码成比特流。色板索引图编码成比特流。色板索引图编码成比特流。

【技术实现步骤摘要】
【国外来华专利技术】执行用于调色板模式的率失真分析的方法和装置
[0001]相关申请的交叉引用
[0002]本申请要求2019年9月24日提交的第62/905,346号美国临时专利申请的优先权，该申请的专利技术名称为“利用调色板模式的视频编解码”，其全部内容通过引用整体并入本文中。


[0003]本专利技术实施例总体上涉及视频数据编解码和压缩，尤其涉及使用内部比特深度的精度执行用于调色板模式的率失真分析的方法和系统。

技术介绍

[0004]各种电子设备支持数字视频，例如数字电视、膝上型或台式计算机、平板计算机、数码相机、数字记录设备、数字媒体播放器、视频游戏控制台、智能电话、视频电话会议设备、视频流媒体设备等。电子设备通过实施由MPEG
‑
4、ITU
‑
TH.263、ITU
‑
TH.264/MPEG
‑
4、第10部分、高级视频编码(AVC)、高效视频编码(HEVC)和通用视频编码(VVC)标准定义的视频压缩/解压缩标准来传输、接收、编码、解码和/或存储数字视频数据。视频压缩通常包括执行空间(帧内)预测和/或时间(帧间)预测以减少或去除视频数据中固有的冗余。对于基于块的视频编码，视频帧被划分为一个或多个切片(slice)，每个切片具有多个视频块，也可以称为编码树单元(CTU)。每个CTU可以包含一个编码单元(CU)或递归地拆分成更小的CU，直到达到预定义的最小CU大小。每个CU(也称为叶CU)包含一个或多个变换单元(TU)，每个CU还包含一个或多个预测单元(PU)。每个CU可以采用帧内、帧间或IBC模式进行编码。使用相对于同一视频帧内的相邻块中的参考样本的空间预测对视频帧的帧内编码(I)切片中的视频块进行编码。视频帧的帧间编码(P或B)切片中的视频块可使用相对于同一视频帧内相邻块中的参考样本的空间预测或相对于其它先前和/或未来参考视频中的参考样本的时间预测。
[0005]基于先前编码参考块(例如，相邻块)的空间或时间预测产生要编码的当前视频块的预测块。寻找参考块的过程可以通过块匹配算法来完成。表示要编码的当前块和预测块之间的像素差异的残差数据被称为残差块或预测误差。根据指向形成预测块的参考帧中的参考块的运动矢量和残差块对帧间编码块进行编码。确定运动矢量的过程通常称为运动估计。根据帧内预测模式和残差块对帧内编码块进行编码。为了进一步压缩，将残差块从像素域变换到变换域，例如频域，产生残差变换系数，然后可以对其进行量化。可以对最初以二维阵列排列的量化变换系数进行扫描以产生变换系数的一维向量，然后将其熵编码到视频比特流中以实现甚至更多的压缩。
[0006]编码的视频比特流然后被保存在计算机可读存储介质(例如，闪存)中，以被具有数字视频能力的另一电子设备访问或者直接以有线或无线的方式传输到电子设备。电子设备然后通过例如解析编码视频比特流以从比特流获得语法元素并且至少部分地基于从该比特流获得的语法元素从编码视频比特流将数字视频数据重构为其原始格式来执行视频
解压缩(这是与上述视频压缩相反的过程)，并且在电子设备的显示器上呈现重构的数字视频数据。
[0007]随着数字视频质量从高清到4K
×
2K甚至8K
×
4K，要编码/解码的视频数据量呈指数增长。如何在保持解码视频数据的图像质量的同时更有效地编码/解码视频数据是一个持续的挑战。

技术实现思路

[0008]本申请描述了与视频数据编码和解码相关的实施方式，更具体地来讲，涉及使用内部比特深度的精度执行用于调色板模式的率失真分析的系统和方法。
[0009]根据本申请的第一方面，一种编码视频数据的方法，该方法包括：识别用于调色板模式编码的编码块；针对该编码块确定调色板表；通过对该编码块进行率失真分析来更新该调色板表，其中该编码块的率计算和失真计算被设置为使用用于该编码块的参考样本的内部编码比特深度；以及将更新了的调色板表和该编码块的对应调色板索引图编码成比特流。
[0010]根据本专利技术的第二方面，一种电子设备包括一个或多个处理单元、存储器和存储在该存储器中的多个程序。当由一个或多个处理单元执行时，这些程序使得该电子设备执行如上所述的解码视频数据的方法。
[0011]根据本专利技术的第三方面，一种非暂时性计算机可读存储介质存储由具有一个或多个处理单元的电子设备执行的多个程序。当由该处理单元执行时，这些程序使得该电子设备执行如上所述的解码视频数据的方法。
附图说明
[0012]所包括的附图用以提供对实施方式的进一步理解并且结合在本文中并构成说明书的一部分，图示了所描述的实施方式并且与说明书一起用于解释基本原理。相同的附图标记指代相应的部分。
[0013]图1是示出了根据本专利技术的一些实施方式的示例性的视频编码和解码系统的框图。
[0014]图2是示出了根据本专利技术的一些实施方式的示例性的视频编码器的框图。
[0015]图3是示出了根据本专利技术的一些实施方式的示例性的视频解码器的框图。
[0016]图4A至4E是示出了根据本申请的一些实施方式的帧如何被递归地四叉树分割成不同大小的多个视频块的框图。
[0017]图5是示出了根据本专利技术的一些实施方式的确定和使用用于编解码视频数据的调色板表的示例的框图。
[0018]图6是示出了根据本专利技术的一些实施方式的视频编码器实现使用内部比特深度的精度执行用于调色板模式的率失真分析的技术的示例性过程的流程图。
具体实施方式
[0019]现在将详细参考具体实施方式，其示例在附图中示出。在下面的详细描述中，阐述了许多非限制性的具体细节以帮助理解在此呈现的主题。但是对于本领域的普通技术人员
来说显而易见的是，在不脱离权利要求的范围的情况下可以使用各种替代方案，并且可以在没有这些具体细节的情况下实践主题。例如，对于本领域的普通技术人员来说显而易见的是，这里呈现的主题可以在具有数字视频能力的多种类型的电子设备上实现。
[0020]图1是示出了根据本专利技术的一些实施方式的用于并行编码和解码视频块的示例性系统10的框图。如图1所示，系统10包括源设备12，其生成并编码随后由目标设备14解码的视频数据。源设备12和目标设备14可包括多种电子设备中的任一种，包括台式计算机或膝上型电脑、平板电脑、智能手机、机顶盒、数字电视、摄像机、显示设备、数字媒体播放器、视频游戏控制台、视频流设备，等等。在一些实施方式中，源设备12和目标设备14配备有无线通信能力。
[0021]在一些实施方式中，目标设备14可经由链路16接收要解码的编码视频数据。链路16可包括能够将编码视频数据从源设备12移动到目标设备14的任何类型的通信介质或设备。在一个示例中，链路16可包括通信介质以使得源设备12能够将编码视频数据实时地直接传输到目标设备14。可根据诸如无线通信协议之类的通信标准对编码视频数据进行调制，并将其传输到目标设备14。该通信介质可包括任何无线或有线通信介质，如射频(RF)频谱本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种解码视频数据的方法，所述方法包括：识别用于调色板模式编码的编码块；针对所述编码块确定调色板表；通过对所述编码块进行率失真分析来更新所述调色板表，其中所述编码块的率计算和失真计算被设置为使用用于所述编码块的参考样本的内部编码比特深度；以及将更新了的调色板表和所述编码块的对应调色板索引图编码成比特流。2.根据权利要求1所述的方法，其中，所述编码块包括亮度分量和色度分量，并且针对所述率计算和/或所述失真计算，向所述亮度分量和所述色度分量应用不同的权重。3.根据权利要求2所述的方法，其中，针对所述失真计算，应用于所述亮度分量的权重高于应用于所述色度分量的权重。4.根据权利要求1所述的方法，其中确定所述调色板表包括：基于所述编码块中的样本各自的像素值将所述样本分组为多个集群；对于所述多个集群中超过预定义阈值的每个集群，确定集群质心；以及将所述集群质心作为所述调色板表中的新条目插入所述调色板表中。5.根据权利要求4所述的方法，其中，所述新条目...

【专利技术属性】
技术研发人员：朱弘正，修晓宇，陈漪纹，马宗全，王祥林，于冰，
申请(专利权)人：北京达佳互联信息技术有限公司，
类型：发明
国别省市：