一种生成3D人脸建模的方法技术

本说明书披露的多个实施例提供了一种生成3D人脸建模的方法。给定用于生成3D人脸建模的目标脸型参数，给定口头表达内容，可以利用表情匹配模型得到口头表达内容所匹配的常规表情参数、微表情参数，进而，可以将目标脸型参数、匹配于口头表达内容的常规表情参数、匹配于口头表达内容的微表情参数，输入预训练号的3D人脸建模生成模型，生成匹配于口头表达内容的3D人脸建模，该3D人脸建模的表情效果，是对真人在口头表达时的表情效果的高拟真。真人在口头表达时的表情效果的高拟真。真人在口头表达时的表情效果的高拟真。

【技术实现步骤摘要】
一种生成3D人脸建模的方法


[0001]本说明书多个实施例涉及信息
，尤其涉及一种生成3D人脸建模的方法。

技术介绍

[0002]目前在一些应用场景下，存在生成具有表情效果的3D人脸建模的需求。
[0003]这样的应用场景例如可以是利用虚拟讲解员向用户进行讲解时，虚拟讲解员在说话时如果有相应的表情效果，可以增强虚拟讲解员的拟真感。这样的应用场景又如可以是电商直播间中的虚拟主播向用户推销商品时，虚拟主播在说话时如果有相应的表情效果，也可以增强虚拟讲解员的拟真感。
[0004]基于此，需要一种能够生成高拟真表情效果的3D人脸建模的技术方案。

技术实现思路

[0005]本说明书的多个实施例提供一种生成3D人脸建模的方法，以便能够生成高拟真表情效果的3D人脸建模。
[0006]本说明书多个实施例提供技术方案如下：根据本说明书多个实施例的第一方面，提出了一种生成3D人脸建模的方法，包括：获取用于生成3D人脸建模的目标脸型参数，以及，获取一段或多段口头表达内容；针对每段口头表达内容，将该段口头表达内容输入预训练本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种生成3D人脸建模的方法，包括：获取用于生成3D人脸建模的目标脸型参数，以及，获取一段或多段口头表达内容；针对每段口头表达内容，将该段口头表达内容输入预训练的表情匹配模型，输出匹配于该段口头表达内容的常规表情参数与微表情参数；将所述目标脸型参数、匹配于该段口头表达内容的常规表情参数、匹配于该段口头表达内容的微表情参数，输入预训练的3D人脸建模生成模型，输出匹配于该段口头表达内容的3D人脸建模。2.如权利要求1所述方法，预训练所述表情匹配模型的步骤包括：获取多个文本样本，以及，获取训练方指定的、每个文本样本所匹配的常规表情参数真实值与微表情参数真实值；将每个文本样本定义为模型输入，将该文本样本所匹配的常规表情参数预测值与微表情参数预测值定义为模型输出，将该文本样本所匹配的常规表情参数真实值与微表情参数真实值定义为训练监督信号，以降低所述训练监督信号与所述模型输出之间的差距为训练目标，迭代训练所述表情匹配模型。3.如权利要求2所述方法，其中，所述多个文本样本对应的语种，与所述多段口头表达内容所对应的语种，为同一语种。4.如权利要求1所述方法，获取用于生成3D人脸建模的目标脸型参数，包括：获取真人的多个人脸图片，其中，不同人脸图片所反映的表情效果不同；针对每个人脸图片，将该人脸图片输入预训练的人脸参数映射模型，输出该人脸图片对应的脸型参数、常规表情参数、微表情参数；对各个人脸图片分别对应的脸型参数进行平均化操作，得到用于生成3D人脸建模的目标脸型参数。5.如权利要求4所述方法，预训练所述人脸参数映射模型的步骤包括：获取多...

【专利技术属性】
技术研发人员：李津，刘嘉，蒋婉棋，
申请(专利权)人：杭州华鲤智能科技有限公司，
类型：发明
国别省市：