视频防抖方法及装置、计算机可读介质和电子设备制造方法及图纸

本公开提供一种视频防抖方法及装置、计算机可读介质和电子设备，涉及图像处理技术领域。该方法包括：获取待处理的视频帧；提取视频帧的特征关键点；将连续多帧的特征关键点输入到视频防抖模型中，输出各特征关键点对应的防抖位移数据；根据防抖位移数据对视频帧进行重渲染处理，生成防抖后的视频帧。本公开能够在实现视频防抖效果的同时，避免人脸图像发生形变，提升人像视频的防抖效果；同时通过特征关键点以及视频防抖模型实现防抖，对环境因素不敏感，适用于不同运动场景下的人像视频防抖，适用范围较广。适用范围较广。适用范围较广。

【技术实现步骤摘要】
视频防抖方法及装置、计算机可读介质和电子设备


[0001]本公开涉及图像处理
，具体涉及一种视频防抖方法、视频防抖装置、计算机可读介质和电子设备。

技术介绍

[0002]随着科学技术的飞速发展，录像成为人们记录分享生活的方式之一，录制的视频画面的稳定与否，极大程度上影响视频观感。视频防抖技术可通过对画面进行一定的旋转变形和裁切，获得具有稳定效果的视频。
[0003]目前，相关的人像视频防抖方案中，一般只针对图像进行全局的旋转变形处理，无法兼顾人像区域和画面整体的防抖效果。

技术实现思路

[0004]本公开的目的在于提供一种视频防抖方法、视频防抖装置、计算机可读介质和电子设备，进而至少在一定程度上提高视频整体的防抖效果，避免部分图像的形变，同时保证防抖效果的鲁棒性。
[0005]根据本公开的第一方面，提供一种视频防抖方法，包括：
[0006]获取待处理的视频帧；
[0007]提取所述视频帧的特征关键点；
[0008]将连续多帧的所述特征关键点输入到视频防抖模型中，输出各所述特征关键点对本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频防抖方法，其特征在于，包括：获取待处理的视频帧；提取所述视频帧的特征关键点；将连续多帧的所述特征关键点输入到视频防抖模型中，输出各所述特征关键点对应的防抖位移数据；根据所述防抖位移数据对所述视频帧进行重渲染处理，生成防抖后的视频帧。2.根据权利要求1所述的方法，其特征在于，所述提取所述视频帧的特征关键点，包括：对所述视频帧进行图像分割，确定所述视频帧对应的前景图像区域以及背景图像区域；提取所述前景图像区域中的前景特征关键点，并提取所述背景图像区域中的背景特征关键点；将所述前景特征关键点和所述背景特征关键点作为所述视频帧的特征关键点。3.根据权利要求2所述的方法，其特征在于，所述前景图像区域包括人像区域，所述前景特征关键点包括人脸特征关键点；所述提取所述前景图像区域中的前景特征关键点，包括：构建虚拟三维人脸模型；通过预先训练的卷积神经网络对所述人像区域与所述虚拟三维人脸模型进行拟合，确定所述人像区域中的人脸特征关键点。4.根据权利要求2所述的方法，其特征在于，所述提取所述背景图像区域中的背景特征关键点，包括：遍历相邻视频帧的所述背景图像区域中的亮度值；根据所述亮度值确定运动向量，并将所述运动向量对应的起始点作为所述背景图像区域的背景特征关键点。5.根据权利要求2所述的方法，其特征在于，所述对所述视频帧进行图像分割，确定所述视频帧对应的前景图像区域以及背景图像区域，包括：通过预训练的全卷积神经网络对所述视频帧进行语义...

【专利技术属性】
技术研发人员：董晓龙，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：