System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种人脸几何模型的纹理重建方法及电子设备技术_技高网

一种人脸几何模型的纹理重建方法及电子设备技术

技术编号:40813575 阅读:7 留言:0更新日期:2024-03-28 19:34
本申请提供一种人脸几何模型的纹理重建方法及电子设备,提高纹理质量。包括:针对任一人脸图像,利用预设人脸类别与标准纹理图像的对应关系,确定人脸图像的人脸类别对应的标准人脸纹理图像;利用人脸图像的人脸几何模型重建真实人脸纹理图像,将真实人脸纹理图像中的皮肤区域与标准人脸纹理图像中的皮肤区域融合得到第一中间人脸真实纹理图像,利用标准人脸纹理图像中的五官区域调整第一中间真实人脸图像中的五官区域,得到第二中间真实人脸纹理图像;根据通过标准人脸纹理图像对第二中间真实人脸纹理图像五官补全得到的第三中间真实人脸纹理图像和通过人脸几何模型对标准人脸纹理图像调整得到的标准人脸纹理图像融合,得到目标人脸纹理图像。

【技术实现步骤摘要】

所属的技术人员能够理解,本专利技术的各个方面可以实现为系统、方法或程序产品。因此,本专利技术的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为″电路″、″模块″或″系统″。在一些可能的实施方式中,根据本专利技术的电子设备可以至少包括至少一个处理器、以及至少一个计算机存储介质。其中,计算机存储介质存储有程序代码,当程序代码被处理器执行时,使得处理器执行本说明书上述描述的根据本专利技术各种示例性实施方式的人脸几何模型的纹理重建方法中的步骤。例如,处理器可以执行如图3中所示的步骤301-305。下面参照图11来描述根据本专利技术的这种实施方式的电子设备1100。图11显示的电子设备1100仅仅是一个示例,不应对本专利技术实施例的功能和使用范围带来任何限制。如图11所示,电子设备1100以通用电子设备的形式表现。电子设备1100的组件可以包括但不限于:上述至少一个处理器1101、上述至少一个计算机存储介质1102、连接不同系统组件(包括计算机存储介质1102和处理器1101)的总线1103。总线1103表示几类总线结构中的一种或多种,包括计算机存储介质总线或者计算机存储介质控制器、外围总线、处理器或者使用多种总线结构中的任意总线结构的局域总线。计算机存储介质1102可以包括易失性计算机存储介质形式的可读介质,例如随机存取计算机存储介质(ram)1121和/或高速缓存存储介质1122,还可以进一步包括只读计算机存储介质(rom)1123。计算机存储介质1102还可以包括具有一组(至少一个)程序模块1124的程序/实用工具1125,这样的程序模块1124包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。电子设备1100也可以与一个或多个外部设备1104(例如键盘、指向设备等)通信,还可与一个或者多个使得用户能与电子设备1100交互的设备通信,和/或与使得该电子设备1100能与一个或多个其它电子设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口1105进行。并且,电子设备1100还可以通过网络适配器1106与一个或者多个网络(例如局域网(lan),广域网(wan)和/或公共网络,例如因特网)通信。如图所示,网络适配器1106通过总线1103与用于电子设备1100的其它模块通信。应当理解,尽管图中未示出,可以结合电子设备1100使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、rai d系统、磁带驱动器以及数据备份存储系统等。在一些可能的实施方式中,本专利技术提供的一种人脸几何模型的纹理重建方法的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当程序产品在计算机设备上运行时,程序代码用于使计算机设备执行本说明书上述描述的根据本专利技术各种示例性实施方式的人脸几何模型的纹理重建方法中的步骤。显然,本领域的技术人员可以对本专利技术进行各种改动和变型而不脱离本专利技术的精神和范围。这样,倘若本专利技术的这些修改和变型属于本专利技术权利要求及其等同技术的范围之内,则本专利技术也意图包含这些改动和变型在内。


技术介绍

1、人脸几何模型的纹理重建,是对人脸几何模型中的每一个顶点和面片进行上色。也就是获得人脸几何模型中每一个顶点的像素值,再根据各顶点组成的人脸面片上的像素值进行纹理计算得到人脸面片的像素值,完成整个人脸几何模型的纹理重建。

2、目前,针对单图片的人脸几何模型的纹理重建方法,一种就是将模型中的顶点与人脸图像中各像素点的uv坐标进行一一对应,然后对三角面片进行纹理计算。但是该方式往往需要动画师手工修正人脸几何模型与人脸图像之间映射关系。如果采用图形学算法自动映射,则会存在纹理间隙,纹理错位等问题。并且如果存在眼镜、头发、帽子等遮挡人脸部分区域,或者图片中人脸是侧面等人脸区域的残缺的情况,会出现重建后的纹理图像没有对应的区域。即该方式不能得到完整的人脸纹理图像。所以,导致纹理重建的质量较低。

3、另一种方式是采用机器学习方法基于单张人像图像对整个几何模型进行纹理重建,该方式虽然不会存在纹理间隙,纹理错位等问题。但是机器学习是通过大量的训练数据得到的一个通用网络模型,然后基于该网络模型进行纹理重建,所以会出现重建出的纹理与输入的人脸图像中的人脸的相似度比较低,也会导致纹理重建的质量较低。


技术实现思路

1、本申请提供了一种人脸几何模型的纹理重建方法及电子设备,用于提高纹理重建的质量。

2、第一方面,本申请实施例提供一种人脸几何模型的纹理重建方法,所述方法包括:

3、针对任意一张人脸图像,利用预先设置好的人脸类别与标准人脸纹理图像的对应关系,确定与所述人脸图像的人脸类别相对应的标准人脸纹理图像;

4、利用所述人脸图像的人脸几何模型以及所述人脸图像进行真实人脸纹理重建,得到真实人脸纹理图像,其中,所述人脸几何模型是基于所述人脸图像得到的;

5、将所述真实人脸纹理图像中的皮肤区域和所述标准人脸纹理图像中的皮肤区域进行图像融合,得到第一中间真实人脸纹理图像,并利用所述标准人脸纹理图像中的五官区域的对所述第一中间真实人脸图像中的五官区域进行调整,得到第二中间真实人脸纹理图像,其中,所述皮肤区域和所述五官区域组成所述人脸图像中的人脸区域;

6、通过所述标准人脸纹理图像对所述第二中间真实人脸纹理图像进行五官补全,得到第三中间真实人脸纹理图像;

7、根据所述第三中间真实人脸纹理图像和所述标准人脸纹理图像进行融合,得到与所述人脸图像相对应的目标人脸纹理图像。

8、本申请第二方面提供一种电子设备,包括处理器和存储器,所述处理器和所述存储器通过总线连接;

9、所述存储器中存储有计算机程序,所述处理器被配置为基于所述计算机程序执行以下操作:

10、针对任意一张人脸图像,利用预先设置好的人脸类别与标准人脸纹理图像的对应关系,确定与所述人脸图像的人脸类别相对应的标准人脸纹理图像;

11、利用所述人脸图像的人脸几何模型以及所述人脸图像进行真实人脸纹理重建,得到真实人脸纹理图像,其中,所述人脸几何模型是基于所述人脸图像得到的;

12、将所述真实人脸纹理图像中的皮肤区域和所述标准人脸纹理图像中的皮肤区域进行图像融合,得到第一中间真实人脸纹理图像,并利用所述标准人脸纹理图像中的五官区域的对所述第一中间真实人脸图像中的五官区域进行调整,得到第二中间真实人脸纹理图像,其中,所述皮肤区域和所述五官区域组成所述人脸图像中的人脸区域;

13、通过所述标准人脸纹理图像对所述第二中间真实人脸纹理图像进行五官补全,得到第三中间真实人脸纹理图像;

14、根据所述第三中间真实人脸纹理图像和所述标准人脸纹理图像进行融合,得到与所述人脸图像相对应的目标人脸纹理图像。

15、根据本专利技术实施本文档来自技高网...

【技术保护点】

1.一种人脸几何模型的纹理重建方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,通过以下方式确定所述人脸图像的人脸几何模型,包括:

3.根据权利要求1所述的方法,其特征在于,所述利用所述人脸图像的人脸几何模型以及所述人脸图像进行真实人脸纹理重建,得到真实人脸纹理图像,包括:

4.根据权利要求1所述的方法,其特征在于,所述利用所述标准人脸纹理图像中的五官区域的对所述第一中间真实人脸图像中的五官区域进行调整,得到第二中间真实人脸纹理图像之前,所述方法还包括:

5.根据权利要求4所述的方法,其特征在于,所述通过所述人脸几何模型对所述标准人脸纹理图像进行调整,得到调整后的标准人脸纹理图像,包括:

6.根据权利要求1所述的方法,其特征在于,所述将所述真实人脸纹理图像中的皮肤区域和所述标准人脸纹理图像中的皮肤区域进行图像融合,得到第一中间真实人脸纹理图像,包括:

7.根据权利要求6所述的方法,其特征在于,所述基于所述像素点的像素值、所述真实人脸纹理图像的皮肤区域中各像素点的平均像素值以及所述标准人脸纹理图像的皮肤区域中各像素点的平均像素值,得到与所述像素点对应的融合像素值,包括:

8.根据权利要求1所述的方法,其特征在于,所述利用所述标准人脸纹理图像中的五官区域的对所述第一中间真实人脸图像中的五官区域进行调整,得到第二中间真实人脸纹理图像,包括:

9.根据权利要求1所述的方法,其特征在于,所述通过所述标准人脸纹理图像对所述第二中间真实人脸纹理图像进行五官补全,得到第三中间真实人脸纹理图像之前,所述方法还包括:

10.一种电子设备,其特征在于,包括处理器和存储器,所述处理器和所述存储器通过总线连接;

...

【技术特征摘要】

1.一种人脸几何模型的纹理重建方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,通过以下方式确定所述人脸图像的人脸几何模型,包括:

3.根据权利要求1所述的方法,其特征在于,所述利用所述人脸图像的人脸几何模型以及所述人脸图像进行真实人脸纹理重建,得到真实人脸纹理图像,包括:

4.根据权利要求1所述的方法,其特征在于,所述利用所述标准人脸纹理图像中的五官区域的对所述第一中间真实人脸图像中的五官区域进行调整,得到第二中间真实人脸纹理图像之前,所述方法还包括:

5.根据权利要求4所述的方法,其特征在于,所述通过所述人脸几何模型对所述标准人脸纹理图像进行调整,得到调整后的标准人脸纹理图像,包括:

6.根据权利要求1所述的方法,其特征在于,所述将所述真实人脸纹理图像中的皮肤区域和所述标准...

【专利技术属性】
技术研发人员:许瀚誉杨智远吴连朋
申请(专利权)人:聚好看科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1