基于机器学习的图像译码中的色度子采样格式处理方法技术

本发明专利技术涉及图像或视频编码和解码。图像部分包括亮度分量和色度分量，所述色度分量的分辨率小于所述亮度分量的分辨率。为了获得所述亮度分量和所述色度分量的匹配分辨率，在所述亮度分量的下采样处理与所述色度分量的上采样处理之间执行选择；接着，将所选处理应用于所述图像部分；然后，根据所选处理生成码流，其中，所述生成包括对所述经处理的图像部分进行编码。在色度上采样与亮度下采样之间进行选择能够针对所需应用调整输入图像部分。例如，一些应用的目的可能是降低复杂度或码率，在这种情况下，亮度下采样可能更有利，而其它应用的目的可能是获得高质量，在这种情况下，色度上采样可能更有利。采样可能更有利。采样可能更有利。

【技术实现步骤摘要】
【国外来华专利技术】基于机器学习的图像译码中的色度子采样格式处理方法


[0001]本专利技术实施例大体上涉及图像或视频编码和解码领域，尤其涉及根据经训练的网络在视频译码中对具有子采样色度的颜色格式进行处理。

技术介绍

[0002]视频译码(视频编码和解码)广泛用于数字视频应用，例如广播数字电视、基于互联网和移动网络的视频传输、视频聊天和视频会议等实时会话应用、DVD和蓝光光盘、视频内容采集和编辑系统以及安全应用的可携式摄像机。
[0003]即使视频相对较短，也需要大量的视频数据来描述，当数据要在带宽容量有限的通信网络中流式传输或以其它方式传输时，这样可能会造成困难。因此，视频数据通常要先压缩，然后通过现代电信网络进行传输。由于内存资源可能有限，当在存储设备上存储视频时，该视频的大小也可能是一个问题。视频压缩设备通常在信源侧使用软件和/或硬件对视频数据进行编码，然后传输或存储视频数据，从而减少表示数字视频图像所需的数据量。然后，对视频数据进行解码的视频解压缩设备在目的地侧接收压缩数据。在网络资源有限以及对更高视频质量的需求不断增长的情况下，需要改进压缩和解压本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于对图像部分进行编码的方法，其特征在于，所述图像部分包括亮度分量和色度分量，所述色度分量的分辨率小于所述亮度分量的分辨率，所述方法包括：选择以下之一作为所述图像部分的图像处理：对所述亮度分量进行下采样，以获得分辨率与所述色度分量的分辨率匹配的下采样亮度分量；对所述色度分量进行上采样，以获得分辨率与所述亮度分量的分辨率匹配的上采样色度分量；根据所选图像处理对所述图像部分进行处理；根据所选图像处理生成码流，其中，所述生成包括对所述经处理的图像部分进行编码。2.根据权利要求1所述的方法，其特征在于，所述选择包括对速率和失真的成本函数进行估算。3.根据权利要求2所述的方法，其特征在于，所述选择包括：对所述亮度分量进行下采样，以获得中间下采样亮度分量；对所述色度分量进行上采样，以获得中间上采样色度分量。4.根据权利要求3所述的方法，其特征在于，所述选择包括：根据所述成本函数，分别确定所述中间下采样亮度分量和所述色度分量的成本以及所述亮度分量和所述中间上采样色度分量的成本，其中，在所述选择中，所述确定成本较低的图像部分的图像处理被选择。5.根据权利要求4所述的方法，其特征在于，所述确定包括：将所述中间下采样亮度分量和所述色度分量编码到第一码流中；将所述亮度分量和所述中间上采样色度分量编码到第二码流中；根据所述成本函数，确定所述第一码流和所述第二码流的成本。6.根据权利要求1至5所述的方法，其特征在于，所述生成码流包括将表示所选图像处理的选择指示符编码到所述码流中。7.根据权利要求1至5所述的方法，其特征在于，所述生成码流包括将所述亮度分量的宽度W和/或高度H的指示编码到所述码流中。8.根据权利要求1至7中任一项所述的方法，其特征在于，所述上采样和/或所述下采样由经训练的网络执行。9.根据权利要求1至8中任一项所述的方法，其特征在于，所述对所述经处理的图像部分进行编码由变分自动编码器(variational autoencoder，VAE)执行。10.一种用于从码流中重建图像部分的方法，其特征在于，所述图像部分包括亮度分量和色度分量，所述色度分量的分辨率小于所述亮度分量的分辨率，所述方法包括：从所述码流中解码具有相同分辨率的亮度分量和色度分量；根据所述码流确定以下之一作为图像处理：对所述经解码的亮度分量进行上采样，并获取包括所述经解码的色度分量和所述上采样亮度分量的重建图像部分；对所述经解码的色度分量进行下采样，并获取包括所述经解码的亮度分量和所述下采样色度分量的重建图像部分；根据所述确定的图像处理，获取所述图像部分。
11.根据权利要求10所述的方法，其特征在于，所述确定还包括：从所述码流中解码表示图像处理的选择指示符；将通过所述选择指示符表示的所述处理确定为所述图像处理。12.根据权利要求10或11所述的方法，其特征在于，所述确定还包括从所述码流中解码所述图像部分中的所述亮度分量的宽度W和/或高度H。13.根据权利要求12所述的方法，其特征在于，所述确定还包括：确定所述宽度W和所述高度H是否与所述经解码的亮度分量的对应宽度和高度...

【专利技术属性】
技术研发人员：高晗，伊蕾娜，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：