虚拟人像生成模型训练方法、装置、设备及存储介质制造方法及图纸

技术编号:41417730 阅读:19 留言:0更新日期:2024-05-21 20:50
本申请涉及人工智能技术领域,提供一种虚拟人像生成模型训练方法、装置、设备及存储介质,方法包括:获取视频人像;提取视频人像中的人头姿态和表情基系数;基于人头姿态和表情基系数,通过可微分渲染方法生成3D人脸图像;获取模板视频中头部以下的图像;将3D人脸图像以及头部以下的图像输入虚拟人像生成模型,得到虚拟人像;计算所述虚拟人像和所述视频人像之间像素级别的差异、边缘细节级别的差异以及特征距离;根据虚拟人像和视频人像之间像素级别的差异、边缘细节级别的差异以及所述虚拟人像和特征距离调整虚拟人像生成模型的参数并继续训练,直至满足训练停止条件时结束训练。本发明专利技术生成的虚拟人像更加稳定、更加逼真。

【技术实现步骤摘要】

本申请涉人工智能,尤其涉及一种虚拟人像生成模型训练方法、装置、设备及存储介质


技术介绍

1、在远程视频会议中,临场感非常重要,但由于摄像头位置一般都在屏幕上的上方(或其他位置),而还不是在屏幕中央,这就导致了当参与人员盯着屏幕画面时,摄像头拍到的图像偏俯视姿态,这种俯视姿态会给对方带来很不好的体验,无法进行良好的面对面的眼神互动交流。为改善交互体验,本申请专利技术人曾提出基于人头姿态和表情基系数的生成方案,但是由于人头姿态和表情基系数不包含人头和人脸的三维网络信息,导致生成的虚拟人像的效果不够稳定,生成的虚拟人像逼真度有所欠缺。


技术实现思路

1、针对上述技术问题,本申请的目的在于提供一种虚拟人像生成模型训练方法、装置、设备及存储介质,旨在解决现有虚拟人像生成的效果不够稳定,生成的虚拟人像逼真度有所欠缺的的技术问题。

2、第一方面,本专利技术实施例提供一种虚拟人像生成模型训练方法,包括:

3、获取视频人像;

4、提取所述视频人像中的人头姿态和表情基系数

5、本文档来自技高网...

【技术保护点】

1.一种虚拟人像生成模型训练方法,其特征在于,包括:

2.根据权利要求1所述的虚拟人像生成模型训练方法,其特征在于,所述计算所述虚拟人像和所述视频人像之间像素级别的差异,包括:

3.根据权利要求1所述的虚拟人像生成模型训练方法,其特征在于,所述计算所述虚拟人像和所述视频人像之间边缘细节级别的差异,包括:

4.根据权利要求1所述的虚拟人像生成模型训练方法,其特征在于,所述计算所述虚拟人像和所述视频人像的特征距离,包括:

5.根据权利要求1所述的虚拟人像生成模型训练方法,其特征在于,所述根据所述虚拟人像和所述视频人像之间像素级别的差异、所述虚拟...

【技术特征摘要】

1.一种虚拟人像生成模型训练方法,其特征在于,包括:

2.根据权利要求1所述的虚拟人像生成模型训练方法,其特征在于,所述计算所述虚拟人像和所述视频人像之间像素级别的差异,包括:

3.根据权利要求1所述的虚拟人像生成模型训练方法,其特征在于,所述计算所述虚拟人像和所述视频人像之间边缘细节级别的差异,包括:

4.根据权利要求1所述的虚拟人像生成模型训练方法,其特征在于,所述计算所述虚拟人像和所述视频人像的特征距离,包括:

5.根据权利要求1所述的虚拟人像生成模型训练方法,其特征在于,所述根据所述虚拟人像和所述视频人像之间像素级别的差异、所述虚拟人像和所述视频人像之间边缘细节...

【专利技术属性】
技术研发人员:张玉兵马雪浩王凯
申请(专利权)人:广州视源电子科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1