三维图像生成方法、三维人物图像生成方法及计算设备技术

技术编号:41525141 阅读:14 留言:0更新日期:2024-06-03 22:59
本说明书实施例提供三维图像生成方法、三维人物图像生成方法及计算设备,其中所述三维图像生成方法包括:获取多个预设视角下的二维姿态图像,其中,二维姿态图像基于预设视角的视角参数将参考对象的关键点信息投影至二维平面得到;利用第一生成网络,基于多个预设视角下的二维姿态图像,生成多个目标视角下的二维对象图像,其中,多个目标视角覆盖目标对象;将多个目标视角下的二维对象图像映射至三维空间,生成目标对象的目标三维图像。摆脱了预先使用样本数据进行三维图像生成网络训练的依赖,解决了数据稀缺性造成的三维图像生成网络的泛化能力不足和过拟合等问题,提升了三维图像生成的灵活性和泛化性。

【技术实现步骤摘要】

本说明书实施例涉及视觉处理,特别涉及一种三维图像生成方法、三维人物图像生成方法及计算设备


技术介绍

1、随着视觉处理技术的发展,三维图像在许多领域都得到了应用,包括但不限于:增强现实技术(augmented reality,简称ar),虚拟现实技术(virtual reality,简称vr),视频游戏,远程呈现和虚拟试穿。

2、目前,三维图像的生成已经从传统的人工绘制,逐渐转向以深度学习技术为基础的三维图像生成网络,极大地提升了三维图像的生成效率。

3、然而,三维图像生成网络的图像生成效果依赖于预先训练过程中所使用的样本数据,由于样本数据的构建成本高等原因,现有的样本数据的数据规模不足,这样的数据稀缺性问题极大地影响了对三维图像生成网络的训练效果,造成三维图像生成网络的泛化能力不足和过拟合等问题,大大限制了三维图像生成在应用中的灵活性和泛化性。因此,亟需一种高灵活性和高泛化性的三维图像生成方法。


技术实现思路

1、有鉴于此,本说明书实施例提供了一种三维图像生成方法。本说明书一个或者多本文档来自技高网...

【技术保护点】

1.一种三维图像生成方法,包括:

2.根据权利要求1所述的方法,所述将所述多个目标视角下的二维对象图像映射至三维空间,生成所述目标对象的目标三维图像,包括:

3.根据权利要求2所述的方法,所述基于所述多个目标视角下的二维对象图像,对三维空间特征进行渲染,生成所述目标对象的初始三维图像和各目标视角下的渲染图像,包括:

4.根据权利要求2所述的方法,所述基于各渲染图像的图像信息,对所述初始三维图像进行图像优化,获得所述目标对象的目标三维图像,包括:

5.根据权利要求4所述的方法,所述基于各渲染图像的几何信息,调整所述初始三维图像的空间特征,获得...

【技术特征摘要】

1.一种三维图像生成方法,包括:

2.根据权利要求1所述的方法,所述将所述多个目标视角下的二维对象图像映射至三维空间,生成所述目标对象的目标三维图像,包括:

3.根据权利要求2所述的方法,所述基于所述多个目标视角下的二维对象图像,对三维空间特征进行渲染,生成所述目标对象的初始三维图像和各目标视角下的渲染图像,包括:

4.根据权利要求2所述的方法,所述基于各渲染图像的图像信息,对所述初始三维图像进行图像优化,获得所述目标对象的目标三维图像,包括:

5.根据权利要求4所述的方法,所述基于各渲染图像的几何信息,调整所述初始三维图像的空间特征,获得所述目标对象的目标三维图像,包括:

6.根据权利要求4所述的方法,所述基于各渲染图像的像素信息,调整所述初始三维图像的纹理特征,获得所述目标对象的目标三维图像,包括:

7.根据权利要求2-5任一项所述的方法,所述基于所述多个目标视角下的二维对象图像,对三维空间特征进行渲染,生成所述目标对象的初始三维图像和各目标视角下的渲染图像,包括:

8.根据权利要求7所述的方法,在所述利用第二生成网络的渲染单元,基于所述多个目标视角下的二维对象图像,对三维空间特征进行渲染,生成所述目标对象的初始三维图像和各目标视角下的渲染图像之前,还包括:

9.根据权利要求8所述的方法,所述基于所述第二预测三维图像、所述预测渲染图像和所述二维样本对...

【专利技术属性】
技术研发人员:门怡芳崔苗苗谢宣松
申请(专利权)人:浙江阿里巴巴机器人有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1