【技术实现步骤摘要】
人脸几何模型提取、3D人脸重建方法、设备及存储介质
本专利技术属于3D人脸建模
,具体涉及一种人脸几何模型提取、3D人脸重建方法、设备及存储介质。
技术介绍
基于图像的3D人脸重建是根据单张或有限数量的图像重建人脸,这些图像是在任意场景下,可以是任意设备拍摄的。基于图像的3D人脸重建现有常用的是基于可形变3D人脸模型(3DMorphableModel,3DMM)的方案,通过从图像中求取合适的可形变3D人脸模型参数,获得3D人脸模型。3D人脸模型通常表示为网格mesh格式,由顶点vertex和三角面片face构成。每个顶点有3D坐标[x,y,z],三角面片则定义了顶点之间的连接关系。通常三角面片的连接关系是不变的,调整顶点的坐标可以得到不同形态的人脸模型。3DMM作为一种参数化统计模型,模型的顶点3D坐标可以由公式表达:其中,S是最终的人脸3D模型的顶点(vertex)的3D坐标,是统计意义下的平均人脸3D模型(平均几何),Bid是根据统计模型得到的相互正交的一组线性基底,影响中性表情下的人脸几何 ...
【技术保护点】
1.一种人脸几何模型提取方法,其特征在于,包括以下步骤:/n获取至少一个人脸图像的初始人脸几何模型并将所述至少一个人脸图像转换为第一剪影图像;/n获取所述人脸几何模型的投影图像,并将所述投影图像转化为第二剪影图像;/n调整人脸几何模型的相关参数及人脸几何模型相应优化区域的顶点坐标,使第二剪影图像和第一剪影图像的差异小于一阈值,获取此时第二剪影图像对应的人脸几何模型作为最终的人脸几何模型,所述人脸几何模型的相关参数包括与人脸形状相关的参数α、与人脸表情相关的参数β、尺度参数s、旋转参数R、平移参数t。/n
【技术特征摘要】
1.一种人脸几何模型提取方法,其特征在于,包括以下步骤:
获取至少一个人脸图像的初始人脸几何模型并将所述至少一个人脸图像转换为第一剪影图像;
获取所述人脸几何模型的投影图像,并将所述投影图像转化为第二剪影图像;
调整人脸几何模型的相关参数及人脸几何模型相应优化区域的顶点坐标,使第二剪影图像和第一剪影图像的差异小于一阈值,获取此时第二剪影图像对应的人脸几何模型作为最终的人脸几何模型,所述人脸几何模型的相关参数包括与人脸形状相关的参数α、与人脸表情相关的参数β、尺度参数s、旋转参数R、平移参数t。
2.根据权利要求1所述的一种人脸几何模型提取方法,其特征在于,所述方法还包括:
对人脸图像进行语义分割得到至少一个语义分割区域,所述语义分割区域包括眼睛区域、眉毛区域、鼻子区域、嘴巴区域;
在人脸几何模型中确定分别与所述至少一个语义分割区域中每个语义分割区域相对应的顶点坐标;
所述调整人脸几何模型的相关参数及人脸几何模型相应区域的顶点坐标包括:
在保持其它语义分割区域相对应的顶点坐标不变的情况下,调整人脸几何模型的相关参数及一语义分割区域相对应的顶点坐标,使第一剪影图像和第二剪影图像的差异小于一阈值。
3.根据权利要求2所述的一种人脸几何模型提取方法,其特征在于:所述调整人脸几何模型的相关参数及人脸几何模型相应区域的顶点坐标包括:
对分割出的每个语义分割区域依次进行以下迭代操作:在保持其它语义分割区域相对应的顶点坐标不变的情况下,调整人脸几何模型的相关参数及一语义分割区域相对应的顶点坐标,使第一剪影图像和第二剪影图像的差异小于一阈值。
4.根据权利要求2或3所述的一种人脸几何模型提取方法,其特征在于:所述调整人脸几何模型的相关参数及人脸几何模型相应区域的顶点坐标还包括:
调整人脸几何模型的相关参数及与所有语义分割区域对应的人脸几何模型顶点坐标,使第二剪影图像和第一剪影图像的差异小于一阈值。
5.根据权利要求2所述的一种人脸几何模型提取方法,其特征在于:所述调整人脸几何模型的相关参...
【专利技术属性】
技术研发人员:陈达勤,王淳,浣军,宋博宁,娄明,李曈,
申请(专利权)人:北京深尚科技有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。