一种虚拟数字人面部轮廓3D重建装置制造方法及图纸

技术编号:36887667 阅读:16 留言:0更新日期:2023-03-15 21:41
本发明专利技术提供一种虚拟数字人面部轮廓3D重建装置,包括:面部轮廓图像获取模块,用于利用3D显示设备显示虚拟数字人的第一面部轮廓图像,并采集第一面部轮廓图像数据;面部轮廓模板及数据获取模块,用于基于大数据平台获取面部基底轮廓模板和面部姿态数据;面部轮廓3D重建模块,用于根据第一面部轮廓图像数据和面部轮廓模板,基于3D重建模型,获得虚拟数字人3D面部轮廓。本发明专利技术通过利用面部轮廓模板对3D显示设备显示的面部轮廓图像重建,可提高虚拟数字人面部轮廓3D重建的准确性和真实度。字人面部轮廓3D重建的准确性和真实度。字人面部轮廓3D重建的准确性和真实度。

【技术实现步骤摘要】
一种虚拟数字人面部轮廓3D重建装置


[0001]本专利技术涉及计算机
,尤其涉及一种虚拟数字人面部轮廓3D重建装置。

技术介绍

[0002]虚拟数字人是通过电脑制作的虚拟形象,具有人类的形状和外表、性别和性格等人类特征;虚拟数字人必须要依靠显示设备才能被看到,虚拟数字人面部轮廓的3D重建还存在方法复杂、消耗人力大、虚拟数字人面部轮廓数据采集困难等问题;因此,需要一种虚拟数字人面部轮廓3D重建装置。

技术实现思路

[0003]本专利技术提供了一种虚拟数字人面部轮廓3D重建装置,通过利用面部轮廓模板对3D显示设备显示的面部轮廓图像重建,可提高虚拟数字人面部轮廓3D重建的准确性和真实度。
[0004]本专利技术提供了一种虚拟数字人面部轮廓3D重建装置,包括:
[0005]面部轮廓图像获取模块,用于利用3D显示设备显示虚拟数字人的第一面部轮廓图像,并采集第一面部轮廓图像数据;
[0006]面部轮廓模板及数据获取模块,用于基于大数据平台获取面部基底轮廓模板和面部姿态数据;
[0007]面部轮廓3D重建模块,用于根据第一面部轮廓图像数据和面部轮廓模板,基于3D重建模型,获得虚拟数字人3D面部轮廓。
[0008]进一步地,面部轮廓图像获取模块包括显示单元和修正单元;
[0009]显示单元,用于基于预设的虚拟数字人3D显示模板和3D显示设备,将虚拟数字人面部轮廓图像显示为虚拟数字人3D面部轮廓图像;
[0010]修正单元,用于对虚拟数字人3D面部轮廓图像的显示准确性进行分析,若显示准确则直接生成第一面部轮廓图像;若显示不正确,则提示获得待修正区域,对待修正区域的图像修正后获得第一面部轮廓图像。
[0011]进一步地,修正单元,包括图像分割子单元、区域对比子单元和修正提示子单元;
[0012]图像分割子单元,用于采用预设的分割模板,对虚拟数字人3D面部轮廓图像进行区域分割,获得以特征凸显点为中心的若干个尺寸不相同的特征凸显点图像区域;
[0013]区域对比子单元,用于按照预设的对比参数和对比规则,将特征凸显点图像区域与虚拟数字人面部轮廓图像相对应的区域进行对比准确性分析;
[0014]修正提示子单元,用于根据对比准确性分析结果,提示对比准确性值小于预设准确性阈值的特征凸显点图像区域,获得待修正区域。
[0015]进一步地,特征凸显点的位置获取包括:
[0016]利用预设的训练网络,在虚拟数字人3D面部轮廓图像上,对面部特征凸显点坐标进行初始回归,获得特征凸显点的近似位置;
[0017]获取特征凸显点的近似位置的周围局部区域图像的局部区域灰度图;
[0018]将局部区域灰度图输入预设的回归网络进行训练,获得特征凸显点的若干个候选目标位置;
[0019]选取若干个候选目标位置的平均位置作为特征凸显点的目标位置,将目标位置作为特征凸显点的位置。
[0020]进一步地,面部轮廓模板及数据获取模块,包括调用单元和评估单元;
[0021]调用单元,用于依据大数据平台,从现有的人面部模板数据库中获取面部基底轮廓模板,从现有的人面部姿态数据库中获取发型肤色纹理数据和骨骼动画数据;
[0022]评估单元,用于基于预设的模板评估指标对面部基底轮廓模板的应用频率值和应用反馈值进行评估,筛选获得应用频率值大于预设应用频率值阈值、并且应用反馈值大于预设应用反馈值阈值的面部基底轮廓模板;基于预设的数据评估指标对面部姿态数据的姿态真实度值进行评估,筛选获得姿态真实度值大于预设姿态真实度值阈值的面部姿态数据。
[0023]进一步地,面部轮廓3D重建模块包括面部轮廓重建单元和面部纹理补充单元;
[0024]面部轮廓重建单元,用于根据第一面部轮廓图像数据和面部基底轮廓模板,基于3D重建模型构建虚拟数字人面部基底轮廓;
[0025]面部纹理补充单元,用于根据发型肤色纹理数据、骨骼动画数据,在虚拟数字人面部基底轮廓上填充面部纹理,获得虚拟数字人3D面部轮廓。
[0026]进一步地,面部轮廓3D重建模块还包括3D面部轮廓显示单元,3D面部轮廓显示单元用于通过BFM人脸3D模型获得虚拟数字人面部轮廓特征凸显点的图像坐标,根据图像坐标获取对应的三个第一类坐标向量值;获取除特征凸显点的图像坐标外的其它点的第二类坐标向量值;将第一类坐标向量值和第二类坐标向量值进行三角插值,并生成UV位置图,基于UV位置图显示3D面部轮廓。
[0027]进一步地,还包括第一面部轮廓图像数据匹配修改模块,第一面部轮廓图像数据匹配修改模块包括真人面部轮廓数据获取单元和检验单元;
[0028]真人面部轮廓数据获取单元,用于基于虚拟数字人面部轮廓图像,追溯获取相对应的现实人面部轮廓数据、或虚拟数字人的面部轮廓构造数据;
[0029]检验单元,用于将第一面部轮廓图像数据与现实人面部轮廓数据、或虚拟数字人的面部轮廓构造数据进行匹配,获得匹配误差;若匹配误差大于预设的匹配误差阈值,则将现实人面部轮廓数据、或虚拟数字人的面部轮廓构造数据作为第一面部轮廓图像修改数据进行相应修改。
[0030]进一步地,还包括面部轮廓3D重建效果测试模块,用于测试分析虚拟数字人面部轮廓3D重建效果;包括:
[0031]基于预设的静态检视方案,采用3D图像扫描设备,对虚拟数字人3D面部轮廓按照固定的运行轨迹进行静态检视,静态检视包括特征凸显点区域完整性检视、特征凸显点区域与非特征凸显点区域连接严密性检视,获取区域的重合度值,若重合度值位于预设的重合度值范围内,则判定检视合格;
[0032]基于预设的动态检视方案,按照预设的检视流程对虚拟数字人3D面部轮廓的面部表情动作完成情况进行检视,面部表情动作完成情况包括面部表情动作完成精准度,获取
检视面部表情动作完成幅度与预设标准幅度的偏差值,若偏差值小于预设的偏差值阈值,则判定检视合格。
[0033]进一步地,图像分割子单元还包括分割管理分子单元,用于分割管理虚拟数字人3D面部轮廓图像,包括:
[0034]基于预设的评估标准,评估虚拟数字人面部五官及其它部位的关注度,获得虚拟数字人面部轮廓图像各个区域位置的关注度值;区域位置基于虚拟数字人的面部五官比例划分设置;根据关注度值的大小,设置相应的权重;并生成两个或多个合并区域位置的联合关注度值;
[0035]根据联合关注度值设定相应的分割疏密度值,将联合关注度值大的设定相应的分割疏密度大,将联合关注度值小的设定相应的分割疏密度小,根据设定的分割疏密度值分割管理虚拟数字人3D面部轮廓图像。
[0036]本专利技术的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
[0037]下面通过附图和实施例,对本专利技术的技术方案做进一步的详细描述。
附图说明
[0038本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种虚拟数字人面部轮廓3D重建装置,其特征在于,包括:面部轮廓图像获取模块,用于利用3D显示设备显示虚拟数字人的第一面部轮廓图像,并采集第一面部轮廓图像数据;面部轮廓模板及数据获取模块,用于基于大数据平台获取面部基底轮廓模板和面部姿态数据;面部轮廓3D重建模块,用于根据第一面部轮廓图像数据和面部轮廓模板,基于3D重建模型,获得虚拟数字人3D面部轮廓。2.根据权利要求1所述的一种虚拟数字人面部轮廓3D重建装置,其特征在于,面部轮廓图像获取模块包括显示单元和修正单元;显示单元,用于基于预设的虚拟数字人3D显示模板和3D显示设备,将虚拟数字人面部轮廓图像显示为虚拟数字人3D面部轮廓图像;修正单元,用于对虚拟数字人3D面部轮廓图像的显示准确性进行分析,若显示准确则直接生成第一面部轮廓图像;若显示不正确,则提示获得待修正区域,对待修正区域的图像修正后获得第一面部轮廓图像。3.根据权利要求2所述的一种虚拟数字人面部轮廓3D重建装置,其特征在于,修正单元,包括图像分割子单元、区域对比子单元和修正提示子单元;图像分割子单元,用于采用预设的分割模板,对虚拟数字人3D面部轮廓图像进行区域分割,获得以特征凸显点为中心的若干个尺寸不相同的特征凸显点图像区域;区域对比子单元,用于按照预设的对比参数和对比规则,将特征凸显点图像区域与虚拟数字人面部轮廓图像相对应的区域进行对比准确性分析;修正提示子单元,用于根据对比准确性分析结果,提示对比准确性值小于预设准确性阈值的特征凸显点图像区域,获得待修正区域。4.根据权利要求3所述的一种虚拟数字人面部轮廓3D重建装置,其特征在于,特征凸显点的位置获取包括:利用预设的训练网络,在虚拟数字人3D面部轮廓图像上,对面部特征凸显点坐标进行初始回归,获得特征凸显点的近似位置;获取特征凸显点的近似位置的周围局部区域图像的局部区域灰度图;将局部区域灰度图输入预设的回归网络进行训练,获得特征凸显点的若干个候选目标位置;选取若干个候选目标位置的平均位置作为特征凸显点的目标位置,将目标位置作为特征凸显点的位置。5.根据权利要求1所述的一种虚拟数字人面部轮廓3D重建装置,其特征在于,面部轮廓模板及数据获取模块,包括调用单元和评估单元;调用单元,用于依据大数据平台,从现有的人面部模板数据库中获取面部基底轮廓模板,从现有的人面部姿态数据库中获取发型肤色纹理数据和骨骼动画数据;评估单元,用于基于预设的模板评估指标对面部基底轮廓模板的应用频率值和应用反馈值进行评估,筛选获得应用频率值大于预设应用频率值阈值、并且应用反馈值大于预设应用反馈值阈值的面部基底轮廓模板;基于预设的数据评估指标对面部姿态数据的姿态真实度值进行评估,筛选获得姿态真实度值大于预设姿态真实度值阈值的面部姿态数据。
6.根据权利要求5所述的一种虚拟数字人面部轮廓3D重建装置,其特征在于,面部轮廓3D重建模块包括面部轮廓重建单元和面部纹理补充单元;...

【专利技术属性】
技术研发人员:王立军
申请(专利权)人:灵瞳智能科技北京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1