采用不同分割结构的调色板模式制造技术

描述了用于将调色板模式与不同分割结构结合使用的方法、系统和设备。一种用于视频处理的方法的示例包括：针对包括包含当前视频块的一个或多个视频区域的视频与该视频的比特流表示之间的转换，维护用于预测对当前视频块使用的调色板模式编解码工具中所用的调色板的调色板预测表格；做出对该转换应用局部双树编解码的决定；基于该决定修改该调色板预测表格；以及基于该修改之后的调色板预测表格执行该转换，其中，该调色板模式编解码工具表示当前视频块使用代表性颜色值的调色板，并且其中，局部双树编解码能够基于块尺寸独立于对应亮度块对色度块进行分割。亮度块对色度块进行分割。亮度块对色度块进行分割。

【技术实现步骤摘要】
【国外来华专利技术】采用不同分割结构的调色板模式
[0001]相关申请的交叉引用
[0002]根据适用的《专利法》和/或《巴黎公约》的规定，本申请及时要求2019年8月15日提交的编号为PCT/CN2019/100850以及2019年10月29日提交的编号为PCT/CN2019/113931的国际专利申请的优先权和权益。出于根据该法律的所有目的，将前述申请的全部公开内容以引用方式并入本文，以作为本申请公开内容的部分。


[0003]本文件涉及视频和图像编码及解码技术。

技术介绍

[0004]数字视频占据了因特网和其他数字通信网络上最大的带宽使用量。随着能够接收和显示视频的连接用户设备数量的增加，预计数字视频使用的带宽需求将持续增长。

技术实现思路

[0005]所公开的技术可以由视频或图像解码器或编码器实施例用于将调色板模式与不同分割结构结合使用。
[0006]在一个示例性方面当中，公开了一种视频处理方法。该方法包括：针对包括包含当前视频块的一个或多个视频区域的视频与该视频的比特流表示之间的转换，维护用于预测对当前视频块使用的调色板模式编解码工具中所用的调色板的调色板预测表格；做出对该转换应用局部双树编解码的决定；基于该决定修改该调色板预测表格；以及基于该修改之后的调色板预测表格执行该转换，其中，该调色板模式编解码工具表示当前视频块使用代表性颜色值的调色板，并且其中，局部双树编解码能够基于块尺寸独立于对应亮度块对色度块进行分割。
[0007]在另一个示例性方面中，公开了一种视频处理的方法。该方法包括：执行包括包含当前视频块的一个或多个视频区域的视频和该视频的比特流表示之间的转换，其中，该比特流表示符合对当前视频块禁止调色板模式编解码和局部双树编解码的同时使用的格式规则，其中，调色板模式编解码工具表示当前视频块使用代表性颜色值的调色板，并且其中，局部双树编解码能够基于块尺寸独立于对应亮度块对色度块进行分割。
[0008]在又一个示例性方面中，公开了一种视频处理的方法。该方法包括：执行包括包含当前视频块的一个或多个视频区域的视频和该视频的比特流表示之间的转换，其中，使用调色板编解码模式将视频块编解码到比特流表示中，在调色板编解码模式中，使用代表性颜色值的调色板表示该视频块，并且其中，基于条件将预测调色板的调色板预测表格选择性地用于该转换。
[0009]在又一示例性方面中，可以由包括处理器的视频编码器装置实施上述方法。
[0010]在又一示例性方面中，可以由包括处理器的视频解码器装置实施上述方法。
[0011]在又一示例性方面中，这些方法可以被体现为处理器可执行指令的形式并存储于
计算机可读程序介质上。
[0012]本文进一步描述了这些方面以及其他方面。
附图说明
[0013]图1示出了在调色板模式中编解码的块的示例。
[0014]图2示出了使用调色板预测器信令通知调色板条目的示例。
[0015]图3示出了水平和垂直遍历扫描的示例。
[0016]图4示出了调色板索引的示例性编解码。
[0017]图5A和图5B示出了最小色度帧内预测单元(SCIPU)的示例。
[0018]图6示出了视频处理中的环内滤波的示例的框图。
[0019]图7示出了局部双树情况下的重复调色板条目的示例。
[0020]图8示出了上下文推导过程中的左侧块和上方块的示例。
[0021]图9是用于实施本文件中描述的技术的硬件平台的示例的框图。
[0022]图10是可以实施所公开的技术的示例性视频处理系统的框图。
[0023]图11是示出了根据本公开的一些实施例的视频编码系统的框图。
[0024]图12是示出了根据本公开的一些实施例的编码器的框图。
[0025]图13是示出了根据本公开的一些实施例的解码器的框图。
[0026]图14
‑
16示出了视频处理的示例性方法的流程图。
具体实施方式
[0027]本文件提供了图像或视频比特流的解码器可以使用的各种技术，以提高解压缩或解码数字视频或图像的质量。为了简洁起见，“视频”一词在本文当中被用来既包含图片的序列(常规上被称为视频)，又包含单独图像。此外，视频编码器还可以在编码过程期间实施这些技术，以便重建用于进一步的编码的解码帧。
[0028]本文件中使用了章节标题，其目的是便于理解，而非使实施例和技术局限于对应的章节。照此，来自一个章节的实施例可以与来自其他章节的实施例相结合。
[0029]1.概述
[0030]本文件涉及视频编码技术。具体地，本文件涉及调色板编解码中的索引和逸出符号(escape symbol)编解码。其可以应用于现有的视频编解码标准，如HEVC，或待定案的标准(多功能视频编解码)。其还可以适用于未来的视频编解码标准或视频编解码器。
[0031]2.背景
[0032]视频编解码标准主要是通过开发公知的ITU
‑
T和ISO/IEC标准而演变的。ITU
‑
T开发了H.261和H.263，ISO/IEC开发了MPEG
‑
1和MPEG
‑
4视觉，并且两个组织联合开发了H.262/MPEG
‑
2视频、H.264/MPEG
‑
4高级视频编码(AVC)和H.265/HEVC标准。自H.262以来，视频编解码标准基于混合视频编解码结构，其中采用了时域预测加变换编解码。为探索HEVC之外的未来视频编解码技术，VCEG和MPEG于2015年共同成立了联合视频探索团队(JVET)。从那时起，JVET采用了许多新的方法，并将其应用到了名为联合探索模型(JEM)的参考软件中。2018年4月，在VCEG(Q6/16)和ISO/IEC JTC1 SC29/WG11(MPEG)之间创建了联合视频专家团队(JVET)，其致力于研究以相较于HEVC有50％的比特率下降为目标的VVC标准。
[0033]可以在下述网址找到VVC草案的最新版本，即多功能视频编解码(草案6)：
[0034]http://phenix.it
‑
sudparis.eu/jvet/doc_end_user/documents/15_Gothenburg/wg11/JVET
‑
O2001
‑
v14.zip
[0035]可以在下述网址找到VVC的名为VTM的最新参考软件：
[0036]https://vcgit.hhi.fraunhofer.de/jvet/VVCSoftware_VTM/tags/VTM
‑
5.0
[0037]2.1 HEVC屏幕内容编解码扩展(HEVC
‑
SCC)中的调色板模式
[0038]2.1.1调色板模式的概念
[0039]调色板模式背后的基本理念在于，通过代表性本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种视频处理方法，包括：针对包括包含当前视频块的一个或多个视频区域的视频与所述视频的比特流表示之间的转换，维护用于预测对所述当前视频块使用的调色板模式编解码工具中所用的调色板的调色板预测表格；做出对所述转换应用局部双树编解码的决定；基于所述决定修改所述调色板预测表格；以及基于所述修改之后的所述调色板预测表格执行所述转换，其中，所述调色板模式编解码工具表示所述当前视频块使用代表性颜色值的调色板，并且其中，所述局部双树编解码能够基于块尺寸独立于对应亮度块对色度块进行分割。2.根据权利要求1所述的方法，其中，所述修改包括由于所述局部双树编解码的应用而重新设置调色板预测表格。3.根据权利要求1所述的方法，其中，所述修改包括由于所述局部双树编解码的应用而从所述调色板预测表格中去除重复的调色板条目。4.根据权利要求1所述的方法，其中，所述修改包括添加约束，其在调色板预测表格中的两个条目的三个分量不同时确定所述两个条目是不同的。5.根据权利要求1所述的方法，其中，所述修改包括由于所述局部双树编解码的应用而检查所述调色板预测表格中的调色板条目并且从所述调色板预测表格中去除重复的调色板条目。6.根据权利要求1所述的方法，其中，所述修改包括在检查调色板条目时对所述调色板预测表格中的调色板条目应用完全修剪或部分修剪。7.根据权利要求1所述的方法，其中，所述修改包括在所述调色板预测表格中的两个条目的亮度分量值相等时确定所述两个条目是相等的。8.根据权利要求1所述的方法，其中，由于对所述视频的亮度分量应用局部双树编解码而仅对亮度块执行所述修改。9.根据权利要求1所述的方法，其中，由于对所述视频的色度分量应用局部双树编解码而仅对色度块执行所述修改。10.根据权利要求1所述的方法，其中，由于将单树编解码切换至局部双树编解码而重置所述调色板模式编解码工具的调色板预测器。11.根据权利要求1所述的方法，其中，由于将局部双树编解码切换至单树编解码而重置所述调色板模式编解码工具的调色板预测器。12.一种视频处理方法，包括：执行包括包含当前视频块的一个或多个视频区域的视频和所述视频的比特流表示之间的转换，其中，所述比特流表示符合对所述当前视频块禁止调色板模式编解码和局部双树编解码的同时使用的格式规则，其中，所述调色板模式编解码工具表示所述当前视频块使用代表性颜色值的调色板，并且其中，所述局部双树编解码能够基于块尺寸独立于对应亮度块对色度块进行分割。13.根据权利要求12所述的方法，其中，启用所述调色板模式编解码并且禁用所述局部
双树编解码。14.根据权利要求12所述的方法，其中，禁用所述调色板模式编解码并且启用所述...

【专利技术属性】
技术研发人员：朱维佳，许继征，张莉，庄孝强，
申请(专利权)人：字节跳动有限公司，
类型：发明
国别省市：