视频处理方法、装置、电子设备和介质制造方法及图纸

本公开提供了一种视频处理方法、装置、电子设备和介质，涉及人工智能技术领域，尤其涉及深度学习、计算机视觉技术领域。实现方案为：获取待着色视频的连续多个帧和彩色参考图像；以及针对多个帧中的每个帧：基于参考图像，对该帧进行预着色；对经预着色的帧进行特征提取，以获取第一特征；将该帧的第一特征与至少一个相邻帧的第一特征进行合并，以获取合并特征；以及基于合并特征，获取最终着色结果。获取最终着色结果。获取最终着色结果。

【技术实现步骤摘要】
视频处理方法、装置、电子设备和介质


[0001]本公开涉及人工智能
，尤其涉及深度学习、计算机视觉
，具体涉及一种视频处理方法、装置、电子设备、计算机可读存储介质和计算机程序产品。

技术介绍

[0002]人工智能是研究使计算机来模拟人的某些思维过程和智能行为(如学习、推理、思考、规划等)的学科，既有硬件层面的技术也有软件层面的技术。人工智能硬件技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理等技术；人工智能软件技术主要包括计算机视觉技术、语音识别技术、自然语言处理技术以及机器学习/深度学习、大数据处理技术、知识图谱技术等几大方向。
[0003]图像与视频处理任务是应用深度学习算法的一种实践应用。使用深度学习算法能够极大提升图像与视频处理的效率。
[0004]在此部分中描述的方法不一定是之前已经设想到或采用的方法。除非另有指明，否则不应假定此部分中描述的任何方法仅因其包括在此部分中就被认为是现有技术。类似地，除非另有指明，否则此部分中提及的问题不应认为在任何现有技术中已被公认。
专利技术内本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频处理方法，包括：获取待着色视频的连续多个帧和彩色参考图像；以及针对所述多个帧中的每个帧：基于所述参考图像，对该帧进行预着色；对经预着色的帧进行特征提取，以获取第一特征；将该帧的第一特征与至少一个相邻帧的第一特征进行合并，以获取合并特征；以及基于所述合并特征，获取最终着色结果。2.根据权利要求1所述的方法，其中，基于所述参考图像，对该帧进行预着色包括：对所述彩色参考图像进行特征提取，以获取参考图像特征；对该帧进行特征提取，以获取第二特征；确定所述参考图像特征与所述第二特征之间的映射；以及根据所述映射，将所述参考图像中的色彩信息映射至该帧中，以对该帧进行预着色。3.根据权利要求1所述的方法，其中，将该帧的第一特征与至少一个相邻帧的第一特征进行合并包括：确定该帧与所述至少一个相邻帧之间的光流信息；根据所述光流信息，将所述至少一个相邻帧的第一特征转换至该帧；以及将该帧的第一特征与经转换的至少一个相邻帧的第一特征在特征通道维度进行合并。4.根据权利要求1至3中任一项所述的方法，其中，将该帧的第一特征与至少一个相邻帧的第一特征进行合并包括：将该帧的第一特征与前后相邻各帧的第一特征进行合并。5.根据权利要求1至3中任一项所述的方法，还包括：对所述合并特征进行特征融合，并且其中，基于所述合并特征，获取最终着色结果包括：对融合后的特征进行解码，以获取所述最终着色结果。6.根据权利要求1至3中任一项所述的方法，其中，所述彩色参考图像是Lab色彩空间的彩色图像。7.一种视频处理装置，包括：获取单元、预着色单元、特征提取单元、特征合并单元以及最终着色单元，其中，所述获取单元被配置为获取待着色视频的连续多个帧和彩色参考图像；并且针对所述多个帧中的每个帧：所述预着色单元被配置为基于所述参考图像，对该帧进行预着色；所述特征提取单元被配置为对经预着色的帧进行特征提取，以获取第一特征；所述特征合并单元被配置为将该帧的第一特征与至少一个相邻帧的...

【专利技术属性】
技术研发人员：刘芳龙，李鑫，何栋梁，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：