【技术实现步骤摘要】
图像处理方法、装置、电子设备及存储介质
本公开涉及图像处理领域，尤其涉及一种图像处理方法、装置、电子设备及存储介质。
技术介绍
视频修复技术广泛应用于影视拍摄中，如哈利波特隐身衣、透明人等影视特效，也应用于短视频的制作，如擦除视频中多余人等应用。然而目前由于该技术实现的复杂度较高，仍需要经过专业培训才能够实现比较完美的视频修复效果。相关技术中，可以首先对整条视频图像帧间光流进行恢复，并对光流图像进行边缘提取。通过边缘补全算法，对光流的边缘进行补全，随后将补全的光流边缘和原始需要补全的光流图像输入网络，来恢复视频图像不同区域的运动状态。获得整条视频的帧间运动状态后，对于每张图像需要补全的区域的每一个像素，通过帧间光流信息都可以找到视频中每一帧与其对应的像素，这样通过在视频中的搜索就可以恢复当前帧需要补全像素的像素值。但由于上述修复方法以及其他目前存在的修复方法的计算量过大，导致目前的视频修复技术一般为离线视频修复，即先录制视频，再使用专业编辑工具对整个视频进行处理以达到视频修复的目的。这种离线的编辑方式不仅需要...
【技术保护点】
1.一种图像处理方法，其特征在于，包括：/n获取抠除第一图像的前景区域后得到的第一背景区域，并对所述第一背景区域中的缺失部分进行图像补全得到补全后的背景图像；/n将所述第一图像和第二图像划分为大小相同的网格，其中，所述第一图像和所述第二图像依次为待处理视频中前后连续的两帧图像；/n获取所述第一图像中的网格和所述第二图像中的预测网格的映射关系，其中，所述第二图像中的预测网格是通过光流估计算法根据划分得到的所述第一图像的网格，对划分得到的所述第二图像中的网格进行优化得到；/n抠除第二图像中的前景区域，得到第二背景区域；/n基于所述补全后的背景图像和所述映射关系，对所述第二背景区...
【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：
获取抠除第一图像的前景区域后得到的第一背景区域，并对所述第一背景区域中的缺失部分进行图像补全得到补全后的背景图像；
将所述第一图像和第二图像划分为大小相同的网格，其中，所述第一图像和所述第二图像依次为待处理视频中前后连续的两帧图像；
获取所述第一图像中的网格和所述第二图像中的预测网格的映射关系，其中，所述第二图像中的预测网格是通过光流估计算法根据划分得到的所述第一图像的网格，对划分得到的所述第二图像中的网格进行优化得到；
抠除第二图像中的前景区域，得到第二背景区域；
基于所述补全后的背景图像和所述映射关系，对所述第二背景区域中的缺失部分进行补全。
2.根据权利要求1所述的图像处理方法，其特征在于，所述第一图像为所述待处理视频的初始帧图像，所述对所述第一背景区域中的缺失部分进行图像补全得到补全后的背景图像的步骤包括：
通过图像补全算法对所述第一背景区域中的缺失部分进行补全，得到所述补全后的背景图像。
3.根据权利要求1所述的图像处理方法，其特征在于，所述基于所述补全后的背景图像和所述映射关系，对所述第二背景区域中的缺失部分进行补全的步骤包括：
基于所述补全后的背景图像和所述映射关系将所述补全后的背景图像的每个像素映射至第二图像，得到映射后的背景图像；
从所述映射后的背景图像中提取与所述第二背景区域中的缺失部分对应的区域图像；
将所述区域图像与所述第二背景区域进行融合，以对所述第二背景区域中的缺失部分进行补全。
4.根据权利要求1至3中任意一项所述的图像处理方法，其特征在于，所述获取所述第一图像中的网格和所述第二图像中的预测网格的映射关系的步骤包括：
获取所述第一图像和所述第二图像之间的光度损失函数，所述光度损失函数用于表示所述第一图像中的特征点与所述第二图像中的对应像素点的灰度损失，其中，所述第二图像中的对应像素点是根据目标位置信息确定的，所述目标位置信息是通过双线性插值算法使用所述特征点所在的网格的顶点坐标表示的所述特征点的位置信息；
获取所述第一图像和所述第二图像之间的网格形变损失函数，其中，所述网格形变损失函数用于表示第一图像中的网格与所述第二图像中对应的预测网格之间的形变损失，所述网格形变损失函数是与所述第二图像中每个预测网格顶点的顶点坐标相关的函数；
确定所述光度损失函数和所述网格形变损失函数之和为目标损失函数，并求解所述目标损失函数使所述损失函数最小，得到所述第二图像中每个预测网格的预测顶点坐标；
根据所述第二图像中预测网格的顶点坐标，和所述第一图像中每个网...
【专利技术属性】
技术研发人员：张维一，
申请(专利权)人：北京达佳互联信息技术有限公司，
类型：发明
国别省市：北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。