二次转换核心尺寸选择制造技术

一种关于二次转换操作的方法及装置。其中，像素块的转换系数的特定子集内的非零转换系数被计数并与一个特定阈值比较，以决定是否对该像素块执行二次转换。另外，最佳二次转换核心尺寸是基于块的尺寸隐性获取，或透过使用一个适应性码字基于一个旗标来明确获取。

Core size selection of secondary conversion

The invention relates to a method and a device for secondary conversion operation. Among them, non-zero conversion coefficients within a specific subset of conversion coefficients of a pixel block are counted and compared with a specific threshold value to determine whether a second conversion is performed on the pixel block. In addition, the optimal core size of the second conversion is based on the block size implicit acquisition, or through the use of an adaptive codeword based on a flag to explicitly obtain.

【技术实现步骤摘要】
【国外来华专利技术】二次转换核心尺寸选择交叉引用本申请是要求2017年04月14日提交的申请号为62/485,406的美国临时专利申请案的优先权的美国正式专利申请案的部分。上述列出的申请案内容以引用方式并入本文。
本申请大体关于视频处理。具体地，本申请是有关于对转换操作的选择进行发信。
技术介绍
除非此处另有说明外，本部分所描述的方法相对于下面列出的申请专利范围而言不是先前技术，并且本部分的引入并非承认其是先前技术。高效率视频编码(High-EfficiencyVideoCoding，HEVC)是由视频编码联合协作小组(JointCollaborativeTeamonVideoCoding，JCT-VC)开发的新型视频编解码标准。HEVC是基于混合的基于块的运动向量补偿的类DCT编解码架构。压缩的基本单元，称为编解码单元(CU)，是2Nx2N的方块，且每个CU可被递归地分割为四个更小CU直到达到预定的最小尺寸。每个CU包含一个或多个预测单元(predictionunits，PUs)。在预测之后，一个CU被进一步分割为用于转换及量化的转换单元(transformunits，TUs)。如许多其他先前标准，HEVC采用了离散余弦转换类型II(DCT-II)作为其核心转换，因为其具有较好＂功耗节约＂的属性。大多数信号信息倾向于聚焦在DCT-II的几个低频分量上，其基于马尔可夫过程的一些限制让信号逼近于K-L转换(Karhunen-LoèveTransform，KLT，其在去相关方面是最佳的)。对于TU，除了用DCT转换作为核心转换，还采用了二次转换来进一步降低系数的功耗并改善编解码效率。如JVET-D1001中，使用基于Hypercube-Givens转换(Hypercube-GivensTransform，HyGT)的不可分离转换作为二次转换，其被称为不可分离二次转换(non-separablesecondarytransform，NSST)。正交转换的基本元素为Givens旋转，其由正交矩阵G(m,n,θ)定义，其具有下面定义的元素：HyGT透过于一超立方体排列内合并Givens旋转组来实施。
技术实现思路
以下
技术实现思路
仅是说明性的，不打算以任何方式加以限制。也就是说，以下
技术实现思路
被提供以介绍此处所描述的新且非明显的技术的概念、重点、好处和优势。选择而不是所有的实施方式在下面的详细说明中进行进一步描述。因此，以下
技术实现思路
不用于决定所要求主题的本质特征，也不用于决定所要求主题的范围。本专利技术的一些实施例提供一种于编码或解码像素块时发信二次转换核心尺寸的方法。编码器或解码器决定该像素块的转换系数的特定子集中非零转换系数的计数。当该计数大于特定阈值时，编码器或解码器透过为该像素块执行不可分离二次转换来编解码该像素块。当该计数小于该特定阈值时，编码器或解码器编解码该像素块，而不为该像素块执行不可分离二次转换。该子集之外的转换系数并不包含于该计数内。一些实施例中，转换系数的该特定子集包含该像素块转换单元的左上4x4或8x8的转换系数。当该块的尺寸大于该阈值时，编码器明确发信用于对该像素块执行NSST的核心尺寸。该旗标是编码于该比特流的片头中，序列头中，或图片头中。一些实施例中，当该转换系数的子集内的非零系数的计数大于阈值时，编码器可透过编码旗标来发信该核心尺寸。编码器可隐性发信该核心尺寸而不于比特流内编码该核心尺寸。当该块尺寸大于第一阈值时，编码器或解码器可用固定值做为核心尺寸。一些实施例中，核心尺寸是基于该像素块的帧内预测模式决定的。一些实施例中，该核心尺寸基于用于编解码该像素块的该多个核心尺寸的每一相关的开销来从多个可能核心尺寸中选择。选择的核心尺寸是与最低开销相关的核心尺寸。与核心尺寸相关的开销是透过重建该块的子块的多个像素以及透过比较重建子块与该块的相邻像素来计算。一些实施例中，识别核心尺寸的码字被编解码。不同可能核心尺寸基于该可能核心尺寸的每一计算的开销被分配不同码字。最低开销的核心尺寸被分配最短码字。附图说明下列图式用以提供本专利技术的进一步理解，并被纳入且构成本专利技术的一部分。这些图式说明了本专利技术的实施方式，并与说明书一起用以解释本专利技术的原理。为了清楚地说明本专利技术的概念，与实际实施方式中的尺寸相比，一些组件可以不按照比例被示出，这些图式无需按照比例绘制。图1显示选择像素块的二次转换核心尺寸的架构。图2显示对像素块的非零转换系数计数以决定是否对该像素块执行NSST。图3显示基于候选NSST核心尺寸与相邻重建块的重建像素的开销的计算。图4显示基于当前块的重建像素与相邻块的重建像素之间的相关来计算TU的开销。图5显示基于测量重建残值的能量对TU500开销的计算。图6显示隐性及明确发信二次转换核心尺寸的示例视频编码器600。图7显示明确及隐性发信二次转换的核心尺寸的编码器600的部分。图8概念性地显示核心尺寸开销分析模块800执行的开销分析与码字分配操作。图9显示可明确或隐性接收二次转换核心尺寸的发信的示例视频解码器900。图10显示解码器900处理二次转换核心尺寸的明确及隐性发信的部分。图11概念性显示核心尺寸开销分析模块1100执行的开销分析及码字分配操作。图12概念性显示发信二次转换核心尺寸的流程1200。图13概念性示出在本申请一些实施例中实现的电子系统1300。具体实施方式在下面详细的说明书中，为了透彻理解相关教示内容，透过举例的方式进行大量具体的细节描述。基于本文所描述的教示内容的任何改变、推导和/或拓展均在本专利技术的保护范围内。在一些例子中，为了避免不必要地混淆本专利技术的教示内容的方面，在相对较高的级别而无细节上描述已知的方法、程序、组件和/或关于此处所公开的一个或者多个个示例性实施方式的电路。于JEM-4.0中，不可分离二次转换(NSST)尺寸的选择取决于转换尺寸。例如，若转换的宽度及高度都大于4，则采用8x8NSST；否则，采用4x4NSST。另外，当非零系数的数量大于一个阈值时，采用二次转换。当采用时，于转换系数块的左上8x8或更小区域，即min(8,W)×min(8,H)，上执行不可分离转换。同时对量度与色度分量两者采用上述转换选择规则且NSST核心尺寸取决于当前编解码块尺寸。根据JEM-4.0，NSST仅对TU的左上min(8,宽度)xmin(8,高度)区域执行NSST，即便非零系数处于该左上区域之外。这可能会导致于TU的左上min(8,宽度)xmin(8,高度)系数子集上执行多余的NSST操作，即使非零系数处于左上min(8,宽度)xmin(8,高度)区域之外。图1显示选择像素块的二次转换核心尺寸的架构。如图所示，只要整个像素块的非零系数的数量大于阈值且当NSST索引不为0时，执行NSST。若块尺寸小于8x8，则总是选择4x4的NSST核心尺寸。若块尺寸为8x8或更大，旗标(NSST_kernel_size_flag)明确本文档来自技高网...

【技术保护点】
1.一种方法，包含：/n接收像素块；/n决定该像素块的转换系数的特定子集中非零转换系数的计数；/n当该计数大于特定阈值时，透过为该像素块执行不可分离二次转换来编解码该像素块以输出；以及/n当该计数小于该特定阈值时，编解码该像素块以输出，而不为该像素块执行不可分离二次转换。/n

【技术特征摘要】
【国外来华专利技术】20170414 US 62/485,406;20180406 US 15/946,7651.一种方法，包含：
接收像素块；
决定该像素块的转换系数的特定子集中非零转换系数的计数；
当该计数大于特定阈值时，透过为该像素块执行不可分离二次转换来编解码该像素块以输出；以及
当该计数小于该特定阈值时，编解码该像素块以输出，而不为该像素块执行不可分离二次转换。


2.根据权利要求1所述的方法，其特征在于，该像素块由帧内预测所编码。


3.根据权利要求1所述的方法，其特征在于，该子集之外的转换系数并不包含于该计数内。


4.根据权利要求1所述的方法，其特征在于，转换系数的该特定子集包含于前向扫描中前16，48或64转换系数，或该像素块一个转换单元的左上4x4或8x8的转换系数。


5.根据权利要求1所述的方法，其特征在于，转换系数的该特定子集包含不可分离二次转换执行于其上的转换系数。


6.一种方法，包含：
接收一个像素块；
编解码该像素块以输出，其中采用不可分离二次转换来转换该像素块的系数；以及
从多个可能核心尺寸中为该像素块选择用于该不可分离二次转换的核心尺寸。


7.根据权利要求6所述的方法，其特征在于，选择该核心尺寸的步骤包含：当该块的尺寸大于阈值时，隐性获取该核心尺寸的固定值。


8.根据权利要求6所述的方法，其特征在于，该核心尺寸基于该像素块的帧内预测模式隐性获取。


9.根据权利要求6所述的方法，其特征在于，该核心尺寸基于用于编解码该像素块的该多个核心尺寸的每一相关的开销来隐性获取，其中该选择的核心尺寸是与最低开销相关的核心尺寸。


10.根据权利要求9所述的方法，其特征在于，计算与核心尺寸相关的开销包含：对转换系数的一个子集采用具有该核心尺寸的逆不可分离二次转换。


11.根据权利要求9所述的方法，其特征在于，与核心尺寸相关的开销是透过基于具有该核心尺寸的不可分离二次转换来重建该块的多个像素以及透过比较该块的该多个重建像素与相邻块的重建像素来计算。


12.根据权利要求9所述的方法，其特征在于，与核心尺寸相关的开销是透过基于具有该核心尺寸的不可分离二次转换来重建该块的多个残值以及透过测量该多个重建残值的能量来计算。


13.根据权利要求6所述的方法，其特征在于，选择该核心尺寸的步骤包含：包括指示比特流内的该选择核心尺寸的旗标，或当该块的尺寸大于阈值时从该比特流解析指示该选择核心尺寸的该旗标。


14.根据权利要求13所述的方法，其特...

【专利技术属性】
技术研发人员：江嫚书，徐志玮，庄子德，陈庆晔，
申请(专利权)人：联发科技股份有限公司，
类型：发明
国别省市：中国台湾;TW