【技术实现步骤摘要】
基于单图像的三维形状和纹理重建方法、系统及存储介质
本专利技术涉及三维重建的
,尤其是涉及一种基于单图像的三维形状和纹理重建方法、系统及存储介质。
技术介绍
基于二维图片的三维人脸重建是一种拥有广泛应用场景的技术,它可用于人脸动画生成,人机交互,医疗美容行业。一般的实现方法包括以下二种技术方案:1)、基于三维形变模型的方法:基于三维形变模型的方法,利用统计学的方法从实验室场景下的实际三维人脸中,提取平均人脸(分别为形状平均人脸和纹理平均人脸)和人脸系数(形状系数和纹理系数)。然后利用人脸关键点等约束条件对二维人脸进行迭代优化获取需要的形状系数和纹理系数,最终获得完成重建的人脸。其中,迭代是重复反馈的过程,其目的通常是为了逼近所需目标或结果。每一次对过程的重复称为一次“迭代”,而每一次迭代得到的结果会作为下一次迭代的初始值。重复执行一系列运算步骤,从前面的量依次求出后面的量的过程。此过程的每一次结果,都是由对前一次所得结果实行相同的运算步骤所得到。基于三维形变模型的方法:由于采用迭代优化的方式,使 ...
【技术保护点】
1.一种基于单图像的三维形状和纹理重建方法,其特征是,包括:/n获取人脸图像信息;/n将人脸图像信息通过所预设的归一化坐标编码预测网络的分析并将分析得到的数据信息映射至UV空间以形成UV空间纹理映射信息;/n将UV空间纹理映射信息通过所预设的填充网络的分析以获取完整纹理图谱信息;/n将完整纹理图谱信息通过所预设的形状网络的分析以获得UV位置图谱信息;所述UV位置图谱信息包括人脸三维形状坐标信息;/n根据人脸三维形状坐标信息以形成三维纹理人脸信息。/n
【技术特征摘要】
1.一种基于单图像的三维形状和纹理重建方法,其特征是,包括:
获取人脸图像信息;
将人脸图像信息通过所预设的归一化坐标编码预测网络的分析并将分析得到的数据信息映射至UV空间以形成UV空间纹理映射信息;
将UV空间纹理映射信息通过所预设的填充网络的分析以获取完整纹理图谱信息;
将完整纹理图谱信息通过所预设的形状网络的分析以获得UV位置图谱信息;所述UV位置图谱信息包括人脸三维形状坐标信息;
根据人脸三维形状坐标信息以形成三维纹理人脸信息。
2.根据权利要求1所述的基于单图像的三维形状和纹理重建方法,其特征是,关于获取人脸图像信息的方法如下:
获取二维图像信息;
根据二维图像信息以对该二维图像信息中的人脸数据信息进行检测;若二维图像中检测到人脸数据信息,则将当前二维图像信息进行归一化预处理以形成预处理图像信息;
将预处理图像信息通过所预设的人脸分割网络的分析以提取人脸图像信息。
3.根据权利要求2所述的基于单图像的三维形状和纹理重建方法,其特征是:
根据人脸关键点检测方法以对二维图像信息中的人脸数据信息进行检测;
将二维图像信息中的人脸数据信息所对应的区域进行选取,并将该选取的区域进行归一化预处理以形成预处理图像信息。
4.根据权利要求1或2或3所述的基于单图像的三维形状和纹理重建方法,其特征是,在将人脸图像信息通过所预设的归一化坐标编码预测网络进行分析之前,将当前人脸图像信息中的人脸数据进行同比例放大处理和/或将当前人脸图像信息进行缩小分辨率。
5.根据权利要求4所述的基于单图像的三维形状和纹理重建方法,其特征是,关于同比例放大处理的方法如下:
根据当前人脸图像信息中的人脸轮廓所对应的长度与宽度以形成矩形框信息;
根据所预设的放大系数逐渐放大当前矩形框信息;其中,放大系数为正比例系数;
当至少存在两条矩形框信息所对应的边界与人脸图像信息中背景数据的边界相互重合时,则停止同比例放大处理;
更新当前人脸图像信息以供后续处理。
6.根据权利要求1所述的基于单图像的三维形状和纹理重建方法,其特征是,关于获取UV空间纹理映...
【专利技术属性】
技术研发人员:乔宇,彭小江,曾小星,
申请(专利权)人:深圳先进技术研究院,
类型:发明
国别省市:广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。