一种三维卡通人脸重建方法、装置、设备及存储介质制造方法及图纸

技术编号:40876200 阅读:14 留言:0更新日期:2024-04-08 16:45
本发明专利技术提供了一种三维卡通人脸重建方法、装置、设备及存储介质,利用单目摄像头设备获取用户的正面头像图像信息,使用预训练的风格迁移网络将正面头像图像风格化得到人脸卡通图像,通过拟合优化三维可形变人脸统计模型,得到粗糙的三维卡通人脸几何形状;引入深度特征锚点差异化形变的方法,通过深度特征关键点提取,锚点差异化选择以及三维空间拉普拉斯形变对粗糙几何形状进行非刚性形变细化,有效消除夸张表情、极端光照等因素影响,提供更多细粒度细节的卡通人脸重建结果。该方法可广泛应用于三维卡通人脸重建,具备创新和应用潜力,为细化人脸几何形状提供了新的途径,为创作者和开发者提供了丰富的可能性。

【技术实现步骤摘要】

本专利技术涉及计算机图形学、计算机视觉和人工智能技术邻域,具体涉及一种三维卡通人脸重建方法、装置、设备及存储介质


技术介绍

1、当前,随着三维数字化产业的兴起,虚拟现实和增强现实(vr/ar)近年来发展迅速,为用户创建虚拟的3d面孔成为了一个重要和具有挑战性的任务;这些3d面孔应该与被建模的人具有较高的相似性可识别性。传统的三维人脸重建方法通常采用手动建模或统计的方式对人脸进行建模;然而,这些传统方法存在一些问题,如耗时较长、容易陷入局部最优等。与传统方法不同,基于模板变形的三维人脸重建方法旨在通过调整人脸模板,使生成的人脸图像与输入人脸图像尽可能接近;然而,这类方法对于一个高精度的三维人脸模板要求较高,如果模板精度不足,那么所重建的三维人脸可能难以达到预期的效果。

2、现如今随着深度学习技术的发展,已经有一些基于数据驱动的智能生成方法出现,其中基于深度神经网络的自监督三维人脸重建方法,实现了从二维图像中精确重建出高质量三维人脸模型的目标。然而,由于人脸细节众多,真实的三维人脸重建很难与参考人脸具有高相似度。相比之下,卡通面孔更容易达到很好的本文档来自技高网...

【技术保护点】

1.一种三维卡通人脸重建方法, 其特征在于,包括:

2.根据权利要求1所述的一种三维卡通人脸重建方法,其特征在于,获取轻量化单目摄像头拍摄的用户正面肖像图像,并调用预训练好的风格迁移网络StyleGAN将所述用户正面肖像图像转换为风格化的卡通人脸图像,生成卡通人脸图像数据,具体为:

3.根据权利要求2所述的一种三维卡通人脸重建方法,其特征在于,调用预设的三维可形变人脸统计模型对所述卡通人脸图像数据进行拟合处理,生成粗糙卡通三维人脸几何形状,具体为:

4.根据权利要求3所述的一种三维卡通人脸重建方法,其特征在于,对所述粗糙卡通三维人脸几何形状进行细节的拟...

【技术特征摘要】

1.一种三维卡通人脸重建方法, 其特征在于,包括:

2.根据权利要求1所述的一种三维卡通人脸重建方法,其特征在于,获取轻量化单目摄像头拍摄的用户正面肖像图像,并调用预训练好的风格迁移网络stylegan将所述用户正面肖像图像转换为风格化的卡通人脸图像,生成卡通人脸图像数据,具体为:

3.根据权利要求2所述的一种三维卡通人脸重建方法,其特征在于,调用预设的三维可形变人脸统计模型对所述卡通人脸图像数据进行拟合处理,生成粗糙卡通三维人脸几何形状,具体为:

4.根据权利要求3所述的一种三维卡通人脸重建方法,其特征在于,对所述粗糙卡通三维人脸几何形状进行细节的拟合优化处理,采用深度特征锚点差异化形变技术,在不破坏原有拓扑结构顺序的前提下,调整所述粗糙卡通三维人脸几何形状的细节区域的几何结构,重建生成更具有细粒度的三维卡通人脸模型,具体为:

5.根据权利要求4所述的一种三维卡通人脸重建方法,其特征在于,对所述粗糙卡通三维人...

【专利技术属性】
技术研发人员:丁强柳欣黎啟源徐素文腾先超黄忠湖
申请(专利权)人:天度厦门科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1