图像的生成方法、装置、存储介质和电子设备制造方法及图纸

本公开涉及一种图像的生成方法、装置、存储介质和电子设备，涉及图像处理技术领域，该方法包括：提取源图像中包括的源人物的初始人脸特征向量和初始人体关键点，根据初始人脸特征向量和预设的人脸生成网络，获取目标人物的目标人脸特征点，根据训练视频，将初始人体关键点转换为目标人物的目标人体关键点，训练视频为包括目标人物的视频，根据目标人脸特征点、目标人体关键点和预设的人体生成网络，获取包括目标人物的目标图像，目标图像中目标人物的特征与源图像中源人物的特征相同。能够根据源人物的人脸特征和人体特征，生成目标图像，使得目标图像中的目标人物与源人物的表情、姿态和动作相同，从而实现人物的完整替换。

【技术实现步骤摘要】
图像的生成方法、装置、存储介质和电子设备
本公开涉及图像处理
，具体地，涉及一种图像的生成方法、装置、存储介质和电子设备。
技术介绍
随着计算机视觉和图像处理技术的不断发展，终端上能够实现多种图像处理的功能，以满足用户的各种社交和娱乐需求，尤其是人脸重演(英文：FaceReenactment)功能，越来越受到用户的关注。现有技术中，终端通常采用直接贴图的方式来实现人脸重演，无法准确替换人物的表情，容易导致交换的效果失真，并且只能交换人脸，无法实现整个人物的交换。
技术实现思路
本公开的目的是提供一种图像的生成方法、装置、存储介质和电子设备，用以解决现有技术中很难实现人物完整替换的问题。为了实现上述目的，根据本公开实施例的第一方面，提供一种图像的生成方法，该方法包括：提取源图像中包括的源人物的初始人脸特征向量和初始人体关键点，所述源图像为包括所述源人物的源视频中的任一帧图像；根据所述初始人脸特征向量和预设的人脸生成网络，获取目标人物的目标人脸特征点；根据训练视频，将所述初始人体关键点转换为所述目标人物的目标人体关键点，所述训练视频为包括所述目标人物的视频；根据所述目标人脸特征点、所述本文档来自技高网...

【技术保护点】
1.一种图像的生成方法，其特征在于，所述方法包括：提取源图像中包括的源人物的初始人脸特征向量和初始人体关键点，所述源图像为包括所述源人物的源视频中的任一帧图像；根据所述初始人脸特征向量和预设的人脸生成网络，获取目标人物的目标人脸特征点；根据训练视频，将所述初始人体关键点转换为所述目标人物的目标人体关键点，所述训练视频为包括所述目标人物的视频；根据所述目标人脸特征点、所述目标人体关键点和预设的人体生成网络，获取包括所述目标人物的目标图像，所述目标图像中所述目标人物的特征与所述源图像中所述源人物的特征相同。

【技术特征摘要】
1.一种图像的生成方法，其特征在于，所述方法包括：提取源图像中包括的源人物的初始人脸特征向量和初始人体关键点，所述源图像为包括所述源人物的源视频中的任一帧图像；根据所述初始人脸特征向量和预设的人脸生成网络，获取目标人物的目标人脸特征点；根据训练视频，将所述初始人体关键点转换为所述目标人物的目标人体关键点，所述训练视频为包括所述目标人物的视频；根据所述目标人脸特征点、所述目标人体关键点和预设的人体生成网络，获取包括所述目标人物的目标图像，所述目标图像中所述目标人物的特征与所述源图像中所述源人物的特征相同。2.根据权利要求1所述的方法，其特征在于，在所述根据所述初始人脸特征向量和预设的人脸生成网络，获取目标人物的目标人脸特征点之前，所述方法还包括：根据所述训练视频对第一生成式对抗网络GAN进行训练，以使所述第一GAN中的生成器能够生成包括所述目标人物的人脸特征点的图像，并将训练后的所述第一GAN中的生成器作为所述人脸生成网络；在所述根据所述目标人脸特征点、所述目标人体关键点和预设的人体生成网络，获取包括所述目标人物的目标图像之前，所述方法还包括：根据所述训练视频对第二GAN进行训练，以使所述第二GAN中的生成器能够生成包括所述目标人物的图像，并将训练后的所述第二GAN中的生成器作为所述人体生成网络。3.根据权利要求1或2所述的方法，其特征在于，所述根据训练视频，将所述初始人体关键点转换为所述目标人物的目标人体关键点，包括：根据所述初始人体关键点对应的坐标，确定第一关键点与第二关键点的初始距离，所述第一关键点为所述初始人体关键点中的任一关键点，所述第二关键点为所述初始人体关键点中除所述第一关键点之外的任一关键点；提取所述训练视频中每一帧训练图像包括的所述目标人物的训练人体关键点；根据每一帧所述训练图像包括的所述训练人体关键点对应的坐标，确定每一帧所述训练图像中第三关键点与第四关键点的训练距离，所述第三关键点为所述第一关键点对应在所述训练人体关键点中的关键点，所述第四关键点为所述第二关键点对应在所述训练人体关键点中的关键点；确定多帧所述训练图像的所述训练距离的最大距离和最小距离；根据所述初始距离、最大距离和最小距离，对所述初始人体关键点进行归一化，以得到所述目标人体关键点。4.根据权利要求1或2所述的方法，其特征在于，所述根据所述初始人脸特征向量和预设的人脸生成网络，获取目标人物的目标人脸特征点，包括：获取第一转换图像，所述第一转换图像与所述源图像的大小相同，且所述第一转换图像不包括任何图像信息；将所述初始人脸特征向量映射到所述第一转换图像中；将所述第一转换图像作为所述人脸生成网络的输入，以获取所述人脸生成网络输出的包括所述目标人脸特征点的第二转换图像。5.根据权利要求4所述的方法，其特征在于，所述根据所述目标人脸特征点、所述目标人体关键点和预设的人体生成网络，获取包括所述目标人物的目标图像，包括：根据所述目标人脸特征点和所述目标人体关键点的位置关系，将所述目标人体关键点映射到所述第二转换图像中；将所述第二转换图像作为所述人体生成网络的输入，以获取所述人体生成网络输出的所述目标图像。6.根据权利要求5所述的方法，其特征在于，所述将所述第二转换图像作为所述人体生成网络的输入，以获取所述人体生成网络输出的所述目标图像，包括：将所述第二转换图像与历史目标图像组合为第三转换图像，所述历史目标图像为，所述源视频中在所述源图像之前的至少一帧图像对应的目标图像；将所述第三转换图像作为所述人体生成网络的输入，以获取所述人体生成网络输出的第四转换图像；从所述第四转换图像中删除所述历史目标图像，以获取所述目标图像。7.一种图像的生成装置，其特征在于，所述装置包括：提取模块，用于提取源图像中包括的源人物的初始人脸特征向量和初始人体关键点，所述源图像为包括所述源...

【专利技术属性】
技术研发人员：胡欢，刘兆祥，廉士国，
申请(专利权)人：达闼科技北京有限公司，
类型：发明
国别省市：北京,11