一种三维虚拟人物形象生成方法、系统、设备及存储介质技术方案

技术编号:40068002 阅读:32 留言:0更新日期:2024-01-16 23:43
本发明专利技术实施例公开了一种三维虚拟人物形象生成方法、系统、设备及存储介质,本发明专利技术实施例可以将用户的自拍图像进行风格转换,生成风格转换后的二维图像,将风格转换后的二维图像输入深度学习预训练模型生成三维虚拟人物形象的参数矢量,最后在人脸三维资源库软匹配,获得相匹配的人脸特征代码,对人脸特征代码的运行结果进行渲染操作,生成与用户的长相相似的三维虚拟人物形象。本发明专利技术实施例克服了自拍图像和风格化头像之间的风格域差距过大的问题,使用户高效地创建接近用户身份的三维虚拟人物形象。

【技术实现步骤摘要】

本专利技术实施例涉及数字图像,具体涉及一种三维虚拟人物形象生成方法、系统、设备及存储介质


技术介绍

1、随着计算机视觉技术的不断发展,数字孪生开始应用于各种领域。元宇宙作为一个大的依托,数字世界也应运而生。在社交、购物和游戏等现代生活中,一个吸引人的、可动画化的三维立体角色是数字世界的重要入口。一个好的角色头像应该既富有个性化(反映人物的独特外表)的同时又具有一定的观赏性。许多流行的角色系统采用了卡通化和风格化的设计,对用户具有一定吸引力的同时也兼具趣味性,例如zepeto和readyplayer,都是市面上所流行的捏脸软件。

2、目前主要生成三维虚拟人物形象的方法是先对一组自拍图像进行注释,然后通过监督学习训练一个模型来预测头像向量。为了减少标注操作的成本,有人提出了通过自监督方法来训练一个可微的模仿器,用于模仿图形引擎的渲染,利用各种身份损失和语义分割来自动匹配渲染的头像图像和自拍图像。

3、但是,监督学习训练需要大规模的注释来处理大量的资源,通常是数百个,并且由于自拍图像和风格化头像之间的风格域差距太大,因此它们在应用于风格本文档来自技高网...

【技术保护点】

1.一种三维虚拟人物形象生成方法,其特征在于,所述方法包括:

2.如权利要求1所述的一种三维虚拟人物形象生成方法,其特征在于,对各个人脸图像进行标注,生成对应的人脸图像标注集对各个人脸图像进行标注,生成对应的人脸图像标注集,其中标注规则为预设人脸特征规则,标注内容为多位特征代码。

3.如权利要求2所述的一种三维虚拟人物形象生成方法,其特征在于,根据所述人脸图像标注集构建风格转换模型,利用所述风格转换模型与目标样式风格图像生成风格转换二维图像,包括:

4.如权利要求3所述的一种三维虚拟人物形象生成方法,其特征在于,利用所述配对训练集与感知损失对所述风格转...

【技术特征摘要】

1.一种三维虚拟人物形象生成方法,其特征在于,所述方法包括:

2.如权利要求1所述的一种三维虚拟人物形象生成方法,其特征在于,对各个人脸图像进行标注,生成对应的人脸图像标注集对各个人脸图像进行标注,生成对应的人脸图像标注集,其中标注规则为预设人脸特征规则,标注内容为多位特征代码。

3.如权利要求2所述的一种三维虚拟人物形象生成方法,其特征在于,根据所述人脸图像标注集构建风格转换模型,利用所述风格转换模型与目标样式风格图像生成风格转换二维图像,包括:

4.如权利要求3所述的一种三维虚拟人物形象生成方法,其特征在于,利用所述配对训练集与感知损失对所述风格转换模型中的第一样式映射器进行微调训练,生成第二样式映射器,包括:

5.如权利要求4所述的一种三维虚拟人物形象生成方法,其特征在于,利用所述第二特征参数化模型将二维图像的特征参数化,...

【专利技术属性】
技术研发人员:袁海杰
申请(专利权)人:小哆智能科技北京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1