一种基于数字人的异常表情识别方法和装置制造方法及图纸

技术编号:37643710 阅读:25 留言:0更新日期:2023-05-25 10:10
本公开提供一种基于数字人的异常表情识别方法和装置,其中所述方法包括:根据输入的面部驱动信息,生成表情信息中每一帧表情对应的第一面部表情参数;基于每一帧表情对应的第一面部表情参数进行处理,生成对应的第一表情图像;将第一表情图像输入至预训练的评估模型,得到第二面部表情参数;基于第二面部表情参数进行处理,生成对应的第二表情图像;计算所述每一帧表情对应的第一表情图像和第二表情图像的相似度,在确定所述相似度小于阈值的情况下,标记该帧表情为异常表情,从而可以自动辨别出异常表情,缓解测试人员的负担,提升处理效率。处理效率。处理效率。

【技术实现步骤摘要】
一种基于数字人的异常表情识别方法和装置


[0001]本公开涉及人工智能
,尤其涉及一种基于数字人的异常表情识别方法和装置。

技术介绍

[0002]数字人,指具有数字化外形的虚拟人物,其依赖显示设备存在,并拥有人的相貌和举止。
[0003]以数字人输出表情为例,需要通过数字人驱动算法根据输入的测试数据生成数字人表情动画,从而赋予数字人各种表情。现有技术中,在评估数字人驱动算法的效果时,依赖于测试人员的主观评价。测试人员需要认真观看数字人表情动画的每一帧细节,排查是否有异常的奇怪表情。该过程非常耗时耗力,效率低下。

技术实现思路

[0004]本公开提供一种基于数字人的异常表情识别方法和装置,以解决现有技术中存在的异常图像排查耗时耗力、效率低下的技术缺陷。
[0005]第一方面,本公开实施例提供一种基于数字人的异常表情识别方法,包括:
[0006]根据输入的面部驱动信息,生成表情信息中每一帧表情对应的第一面部表情参数;
[0007]基于每一帧表情对应的第一面部表情参数进行处理,生成对应的第一表情图本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于数字人的异常表情识别方法,其特征在于,包括:根据输入的面部驱动信息,生成表情信息中每一帧表情对应的第一面部表情参数;基于每一帧表情对应的第一面部表情参数进行处理,生成对应的第一表情图像;将第一表情图像输入至预训练的评估模型,得到第二面部表情参数;其中,所述评估模型为通过面部表情样本参数和表情样本图像组成的训练集进行有监督训练得到;基于第二面部表情参数进行处理,生成对应的第二表情图像;计算所述每一帧表情对应的第一表情图像和第二表情图像的相似度,在确定所述相似度小于阈值的情况下,标记该帧表情为异常表情。2.根据权利要求1所述的基于数字人的异常表情识别方法,其特征在于,根据输入的面部驱动信息,生成表情信息中每一帧表情对应的第一面部表情参数,包括:将所述面部驱动信息输入至预训练的面部驱动模型,生成表情信息中每一帧表情对应的第一面部表情参数;其中,所述面部驱动信息包括图像、视频、文字、语音中的至少一种;其中,所述面部驱动模型由样本驱动信息和样本表情参数进行训练得到。3.根据权利要求1所述的基于数字人的异常表情识别方法,其特征在于,基于每一帧表情对应的第一面部表情参数进行处理,生成对应的第一表情图像,包括:将每一帧表情对应的第一面部表情参数输入至渲染模型,生成第一三维数字人形象;将所述第一三维数字人形象投影到二维平面,生成所述第一表情图像。4.根据权利要求1所述的基于数字人的异常表情识别方法,其特征在于,基于第二面部表情参数进行处理,生成对应的第二表情图像,包括:将每一帧表情对应的所述第二面部表情参数输入至渲染模型,生成第二三维数字人形象;将所述第二三维数字人形象投影到二维平面,生成所述第二表情图像。5.根据权利要求1所述的基于数字人的异常表情识别方法,其特征在于,在确定该帧表情为异常表情后,所述方法还包括:修正该帧表情,得到修正后的表情信息,并基于修正后的表情信息生成数字人的表情动画。6....

【专利技术属性】
技术研发人员:李显涛郭聪王林芳陈峰
申请(专利权)人:京东科技控股股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1