本申请公开了一种换脸视频的生成方法、装置、计算机设备及可读存储介质，涉及计算机视觉技术领域，将缩小处理、超分重建处理结合应用，提高图像的清晰度，解决了视频图像内清晰度不一致、面部模糊的问题，对换脸视频中产生的面部抖动起到缓解的作用，提升生成换脸视频的成功率。所述方法包括：获取待换脸视频，将待换脸视频拆分为多个待换脸图像帧；将多个待换脸图像帧输入至换脸模型，获取换脸模型输出的多个已换脸图像帧；对多个已换脸图像帧中每个已换脸图像帧进行缩小处理，以及对缩小后的每个已换脸图像帧进行超分重建，得到多个待输出图像帧；对多个待输出图像帧进行视频合成处理，得到换脸视频。得到换脸视频。得到换脸视频。
【技术实现步骤摘要】
换脸视频的生成方法、装置、计算机设备及可读存储介质
[0001]本申请涉及计算机视觉
，特别是涉及一种换脸视频的生成方法、装置、计算机设备及可读存储介质。
技术介绍
[0002]随着计算机视觉技术的不断发展，换脸技术逐渐兴起，通过换脸技术可以将视频或者图像中的人脸自动替换成另一个人的人脸。最初的换脸需求是因为电影的艺术需要，使用专业的视频剪辑技术和特效技术实现现实中不可能出现的人物场景镜头，近年来，很多不善于或者没有拍摄条件的用户也会借助换脸技术生成视频，从而提升视频的视觉效果。
[0003]相关技术中，很多开源视频换脸技术采用人脸生成网络为用户生成符合其需求的人脸素材，在待换脸视频的帧中确定需要被替换的区域，将人脸素材补充到该区域，生成换脸视频。而在实现本申请的过程中，申请人发现采用相关技术进行视频换脸时，换脸后的视频面部模糊、视频面部清晰度与其他位置不一致，使得生成的换脸视频中两帧图像间的过渡不平滑，导致换脸视频面部存在抖动，生成换脸视频的成功率不高。
技术实现思路
[0004]有鉴于此，本申请提供了一种换脸视频的生成方法、装置、计算机设备及可读存储介质，主要目的在于解决目前换脸后的视频面部模糊、视频面部清晰度与其他位置不一致，使得生成的换脸视频中两帧图像间的过渡不平滑，导致换脸视频面部存在抖动，生成换脸视频的成功率不高的问题。
[0005]依据本申请第一方面，提供了一种换脸视频的生成方法，该方法包括：
[0006]获取待换脸视频，将所述待换脸视频拆分为多个待换脸图像帧；
[0007]将所述多个待换脸图像帧输入至换脸模型，获取所述换脸模型输出的多个已换脸图像帧，所述换脸模型基于用户的人脸素材训练得到且用于将输入的待换脸图像帧中的人脸替换为所述人脸素材；
[0008]对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理，以及对缩小后的每个已换脸图像帧进行超分重建，得到多个待输出图像帧；
[0009]对所述多个待输出图像帧进行视频合成处理，得到换脸视频。
[0010]可选地，所述获取待换脸视频，将所述待换脸视频拆分为多个待换脸图像帧之后，所述方法还包括：
[0011]读取所述多个待换脸图像帧中每个待换脸图像帧对应的时间点；
[0012]按照时间点在时间轴上的先后顺序，对所述多个待换脸图像帧进行排序；
[0013]对排序后的所述多个待换脸图像帧进行编号处理，为所述多个待换脸图像帧添加图片编号，以及将编号后的所述多个待换脸图像帧进行存储。
[0014]可选地，所述对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理，包括：
[0015]获取预设下采样倍数，对所述多个已换脸图像帧中每个已换脸图像帧执行以下处理：按照所述预设下采样倍数对所述已换脸图像帧进行下采样处理，将所述已换脸图像帧的图片尺寸缩小至所述预设下采样倍数指示的目标尺寸，得到缩小后的所述已换脸图像帧；
[0016]将完成缩小处理后的所述多个已换脸图像帧进行缓存。
[0017]可选地，所述对缩小后的每个已换脸图像帧进行超分重建，得到多个待输出图像帧，包括：
[0018]获取预设上采样倍数，对所述缩小后的每个已换脸图像帧进行以下处理：获取超分重建模型，将缩小后的已换脸图像帧输入至所述超分重建模型，利用所述超分重建模型对所述缩小后的已换脸图像帧进行上采样处理，得到图片尺寸与所述预设上采样倍数匹配的图像帧作为待输出图像帧；
[0019]将得到的所述多个待输出图片进行存储。
[0020]可选地，所述对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理，以及对缩小后的每个已换脸图像帧进行超分重建，得到多个待输出图像帧之后，所述方法还包括：
[0021]对于所述多个待输出图像帧中每个待输出图像帧，读取所述待输出图像帧中的多个像素点，以及对所述多个像素点中每个像素点执行以下处理：按照预设权重，构建所述像素点的权重矩阵，采用所述权重矩阵对所述像素点的多个相邻像素点的像素值进行权重计算，得到多个处理后的像素值，以及计算所述多个处理后的像素值的和值作为所述像素点的高斯模糊值；
[0022]获取所述多个像素点对应的多个高斯模糊值，采用所述多个高斯模糊值进行图片重构，得到完成高斯模糊处理的所述待输出图像帧；
[0023]将高斯模糊处理后的所述多个待输出图像帧进行视频合成处理，以及将视频合成处理得到的视频作为所述换脸视频。
[0024]可选地，所述对所述多个待输出图像帧进行视频合成处理，得到换脸视频，包括：
[0025]对所述待换脸视频进行音频提取，得到待添加音频资源；
[0026]按照所述多个待输出图像帧中每个待输出图像帧对应的图片编号，将所述多个待输出图像帧合成为初始视频；
[0027]向所述初始视频添加所述待添加音频资源，得到所述换脸视频。
[0028]可选地，所述获取待换脸视频，将所述待换脸视频拆分为多个待换脸图像帧之前，所述方法还包括：
[0029]获取所述用户上传的人脸素材，采用神经网络算法生成所述人脸素材的像素点分布；
[0030]以所述像素点分布为基础进行模型训练，得到所述换脸模型。
[0031]依据本申请第二方面，提供了一种换脸视频的生成装置，该装置包括：
[0032]拆分模块，用于获取待换脸视频，将所述待换脸视频拆分为多个待换脸图像帧；
[0033]输入模块，用于将所述多个待换脸图像帧输入至换脸模型，获取所述换脸模型输出的多个已换脸图像帧，所述换脸模型基于用户的人脸素材训练得到且用于将输入的待换脸图像帧中的人脸替换为所述人脸素材；
[0034]处理模块，用于对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理，以及对缩小后的每个已换脸图像帧进行超分重建，得到多个待输出图像帧；
[0035]合成模块，用于对所述多个待输出图像帧进行视频合成处理，得到换脸视频。
[0036]可选地，所述装置还包括：
[0037]读取模块，用于读取所述多个待换脸图像帧中每个待换脸图像帧对应的时间点；
[0038]排序模块，用于按照时间点在时间轴上的先后顺序，对所述多个待换脸图像帧进行排序；
[0039]编号模块，用于对排序后的所述多个待换脸图像帧进行编号处理，为所述多个待换脸图像帧添加图片编号，以及将编号后的所述多个待换脸图像帧进行存储。
[0040]可选地，所述处理模块，用于获取预设下采样倍数，对所述多个已换脸图像帧中每个已换脸图像帧执行以下处理：按照所述预设下采样倍数对所述已换脸图像帧进行下采样处理，将所述已换脸图像帧的图片尺寸缩小至所述预设下采样倍数指示的目标尺寸，得到缩小后的所述已换脸图像帧；将完成缩小处理后的所述多个已换脸图像帧进行缓存。
[0041]可选地，所述处理模块，用于获取预设上采样倍数，对所述缩小后的每个已换脸图像帧进行以下处理：获取超分重建模型，将缩小后的已换脸图像帧输入至所述超分重本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种换脸视频的生成方法，其特征在于，包括：获取待换脸视频，将所述待换脸视频拆分为多个待换脸图像帧；将所述多个待换脸图像帧输入至换脸模型，获取所述换脸模型输出的多个已换脸图像帧，所述换脸模型基于用户的人脸素材训练得到且用于将输入的待换脸图像帧中的人脸替换为所述人脸素材；对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理，以及对缩小后的每个已换脸图像帧进行超分重建，得到多个待输出图像帧；对所述多个待输出图像帧进行视频合成处理，得到换脸视频。2.根据权利要求1所述的方法，其特征在于，所述获取待换脸视频，将所述待换脸视频拆分为多个待换脸图像帧之后，所述方法还包括：读取所述多个待换脸图像帧中每个待换脸图像帧对应的时间点；按照时间点在时间轴上的先后顺序，对所述多个待换脸图像帧进行排序；对排序后的所述多个待换脸图像帧进行编号处理，为所述多个待换脸图像帧添加图片编号，以及将编号后的所述多个待换脸图像帧进行存储。3.根据权利要求1所述的方法，其特征在于，所述对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理，包括：获取预设下采样倍数，对所述多个已换脸图像帧中每个已换脸图像帧执行以下处理：按照所述预设下采样倍数对所述已换脸图像帧进行下采样处理，将所述已换脸图像帧的图片尺寸缩小至所述预设下采样倍数指示的目标尺寸，得到缩小后的所述已换脸图像帧；将完成缩小处理后的所述多个已换脸图像帧进行缓存。4.根据权利要求1所述的方法，其特征在于，所述对缩小后的每个已换脸图像帧进行超分重建，得到多个待输出图像帧，包括：获取预设上采样倍数，对所述缩小后的每个已换脸图像帧进行以下处理：获取超分重建模型，将缩小后的已换脸图像帧输入至所述超分重建模型，利用所述超分重建模型对所述缩小后的已换脸图像帧进行上采样处理，得到图片尺寸与所述预设上采样倍数匹配的图像帧作为待输出图像帧；将得到的所述多个待输出图片进行存储。5.根据权利要求1所述的方法，其特征在于，所述对所述多个已换脸图像帧中每个已换脸图像帧进行缩小处理，以及对缩小后的每个已换脸图像帧进行超分重建，得到多个待输出图像帧之后，所述方法还包括：对于所述多个待输出图像帧中每个待输出图像帧，读取所述待输出图像...
【专利技术属性】
技术研发人员：王月宝，黄明星，李银锋，刘海伦，董婉，吴志超，黄平，沈鹏，
申请(专利权)人：北京健康之家科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。