一种面向内容感知超高清视频的编解码方法及相关装置制造方法及图纸

本申请公开了一种面向内容感知超高清视频的编解码方法及相关装置，所述编码方法包括：确定当前图像帧的重构帧，并获取当前图像帧的划分图和预测帧，其中，所述划分图为基于编码块的边界划分信息确定的；基于所述重构帧、划分图以及预测帧，通过环内滤波器对所述重构帧进行环内滤波以得到当前图像帧的目标重构帧。本申请通过基于深度神经网络的非线性预测能力，通过编码过程中的预测信息与划分信息来对重构帧进行增强，然后解码过程中基于增强后的目标重构帧确定解码视频帧，提升了解码视频帧的图像质量。视频帧的图像质量。视频帧的图像质量。

【技术实现步骤摘要】
一种面向内容感知超高清视频的编解码方法及相关装置


[0001]本申请涉及视频编解码
，特别涉及一种面向内容感知超高清视频的编解码方法及相关装置。

技术介绍

[0002]近年来，超高清视频(如，4K/8K)的应用领域越来越广泛，除常见的电视、电影、直播等泛娱乐领域，还广泛应用于医疗健康、在线教育、工业制造、智能交通等领域。为满足8K及5G的产业需求，我国AVS工作组开展了第三代标准AVS3的制定，最新编码性能比HEVC提升超过30％。由于编码视频的最终接收方是人眼，AVS3的核心理论为编码率失真，因此不能有效反映人眼对失真的感知特性。另外，传统编码框架还存在忽视视频内容多样性、编码性能达到瓶颈等问题。因此，面向AVS3标准，结合视觉感知特性，以人眼视觉为中心的面向4K/8K超高清视频的内容感知编解码器(content aware codec，CAC)被提出，CAC框架以视频内容感知建模为基础，通过空域变分辨率编码、时域变帧率编码、动态位深编码、内容感知率失真优化、解码增强等技术进一步去除视觉信息冗余，突破超高清视频编码效率提升的瓶颈，实现在本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种面向内容感知超高清视频的编解码方法，其特征在于，所述编解码方法中的编码过程包括：确定当前图像帧的重构帧，并获取当前图像帧的划分图和预测帧，其中，所述划分图为基于编码块的边界划分信息确定的；基于所述重构帧、划分图以及预测帧，通过环内滤波器对所述重构帧进行环内滤波以得到当前图像帧的目标重构帧。2.根据权利要求1所述面向内容感知超高清视频的编解码方法，其特征在于，所述获取当前图像帧的划分图具体包括：获取当前图像帧的编码块的边界划分信息；根据所述边界划分信息对各编码块的像素取均值，以得到划分图。3.根据权利要求1所述面向内容感知超高清视频的编解码方法，其特征在于，所述环内滤波器包括特征融合子网、信息提取子网以及融合子网络；所述基于所述重构帧、划分图以及预测帧，通过环内滤波器对所述重构帧进行环内滤波以得到当前图像帧的目标重构帧具体包括：将所述重构帧、划分图以及预测帧输入特征融合子网络，通过所述特征融合子网络确定融合特征；将所述融合特征输入所述信息提取子网络，通过所述信息提取子网络输出特征图像帧；将所述特征图像帧和所述重构帧输入融合子网络，通过融合子网络输出目标重构帧。4.根据权利要求3所述面向内容感知超高清视频的编解码方法，其特征在于，所述信息提取子网络包括依次级联第一卷积层、第二卷积层、若干残差块、第三卷积层以及像素重组层。5.根据权利要求1所述面向内容感知超高清视频的编解码方法，其特征在于，所述编解码方法中的解码过程包括：获取解码图像帧，并将所述解码图像帧输入采样增强子网络，通过采样增强子网络确定当前图像帧对应的输出视频帧。6.根据权利要求5所述面向...

【专利技术属性】
技术研发人员：孟现东，王诗淇，王苫社，马思伟，
申请(专利权)人：鹏城实验室，
类型：发明
国别省市：