一种服务器、人物模型表情基的驱动方法及存储介质技术

技术编号:38009598 阅读:8 留言:0更新日期:2023-06-30 10:29
本公开涉及一种服务器、人物模型表情基的驱动方法及存储介质,涉及机器视觉技术领域。其中,该服务器包括:控制器,被配置为:获取第一人物模型的第一表情基,以及第二人物模型的第二表情基,第一人物模型和第二人物模型的点面拓扑结构不同,第一表情基包括M个第一混合形状,第二表情基包括N个第二混合形状;根据M个第一混合形状和N个第二混合形状进行拟合,确定第二表情基对应的拟合系数矩阵和残差系数矩阵;根据第二表情基对应的拟合系数矩阵和残差系数矩阵,计算驱动系数;根据驱动系数驱动第二人物模型。本公开实施例提升了人物模型表情基的驱动效率。表情基的驱动效率。表情基的驱动效率。

【技术实现步骤摘要】
一种服务器、人物模型表情基的驱动方法及存储介质


[0001]本公开涉及显示设备
,尤其涉及一种服务器、人物模型表情基的驱动方法及存储介质。

技术介绍

[0002]数字人(Digital Human/Meta Human),是运用数字技术创造出来的、与人类形象接近的数字化人物形象。相关技术生成数字人时,首先由美工建模师设计建立出不同的人物模型,然后在应用环境下利用人工智能算法驱动人物模型展示各种各样的表情,例如语音驱动、面部捕捉驱动等,而针对在标准、规格等方面存在不同的人物模型,需要采集不同的数据进行多次训练,数据采集过程和模型训练过程操作繁琐、耗时长,导致不同人物模型展示相同表情时效率不高。

技术实现思路

[0003]为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种服务器、人物模型表情基的驱动方法及存储介质,可以提升人物模型表情基的驱动效率。
[0004]为了实现上述目的,本公开实施例提供的技术方案如下:
[0005]第一方面,本公开提供一种服务器,该服务器包括:
[0006]控制器,被配置为:获取第一人物模型的第一表情基,以及第二人物模型的第二表情基,第一人物模型和第二人物模型的点面拓扑结构不同,第一表情基包括M个第一混合形状,第二表情基包括N个第二混合形状;
[0007]根据M个第一混合形状和N个第二混合形状进行拟合,确定第二表情基对应的拟合系数矩阵和残差系数矩阵;
[0008]根据第二表情基对应的拟合系数矩阵和残差系数矩阵,计算驱动系数;
[0009]根据驱动系数驱动第二人物模型。
[0010]第二方面,本公开提供一种人物模型表情基的驱动方法,该方法包括:
[0011]获取第一人物模型的第一表情基,以及第二人物模型的第二表情基,第一人物模型和第二人物模型的点面拓扑结构不同,第一表情基包括M个第一混合形状,第二表情基包括N个第二混合形状;
[0012]根据M个第一混合形状和N个第二混合形状进行拟合,确定第二表情基对应的拟合系数矩阵和残差系数矩阵;
[0013]根据第二表情基对应的拟合系数矩阵和残差系数矩阵,计算驱动系数;
[0014]根据驱动系数驱动第二人物模型。
[0015]第三方面,本公开提供了一种计算机可读存储介质,包括:计算机可读存储介质上存储计算机程序,计算机程序被处理器执行时实现如第二方面所示的人物模型表情基的驱动方法。
[0016]第四方面,本公开提供了一种计算机程序产品,该计算机程序产品包括计算机程
序,当该计算机程序在计算机上运行时,使得计算机实现如第二方面所示的人物模型表情基的驱动方法。
[0017]本公开实施例提供一种服务器、人物模型表情基的驱动方法及存储介质,其中该服务器包括:控制器,被配置为首先获取点面拓扑结构不同的第一人物模型和第二人物模型,其中第一人物模型包括M个第一表情基,第二人物模型包括N个第二表情基,然后根据M个第一表情基和N个第二表情基进行拟合,确定每个第二表情基对应的拟合系数矩阵和残差系数矩阵,进而根据这每个第二表情基对应的拟合系数矩阵和残差系数矩阵,计算驱动系数,从而根据驱动系数驱动第二人物模型,使得第二人物模型能够展示出与其点面结构不相同的第一人物模型的表情,无需采集大量数据进行训练,提升了人物模型表情基的驱动效率。
附图说明
[0018]此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
[0019]为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
[0020]图1A为本公开实施例提供的一些实施例中的场景示意图;
[0021]图1B为本公开实施例提供的数字人a的示意图;
[0022]图1C为本公开实施例提供的数字人b的示意图;
[0023]图2为本公开实施例提供的控制装置100的配置框图;
[0024]图3为本公开实施例提供的显示设备200的硬件配置框图;
[0025]图4为本公开实施例提供的显示设备200中软件配置示意图;
[0026]图5为本公开实施例提供的一种服务器的结构框图;
[0027]图6为本公开实施例提供的一种服务器的架构框图;
[0028]图7为本公开实施例提供的人物模型表情基的驱动方法的流程示意图;
[0029]图8为本公开实施例提供的分级分阶段拟合的流程示意图;
[0030]图9为本公开实施例提供的计算按驱动系数的示意图。
具体实施方式
[0031]为了能够更清楚地理解本公开的上述目的、特征和优点,下面将对本公开的方案进行进一步描述。需要说明的是,在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合。
[0032]在下面的描述中阐述了很多具体细节以便于充分理解本公开,但本公开还可以采用其他不同于在此描述的方式来实施;显然,说明书中的实施例只是本公开的一部分实施例,而不是全部的实施例。
[0033]目前,主要依靠采集数据及学习训练来驱动人物模型展示不同表情,人物模型不同则需要重新采集数据进行学习训练,例如,在已经训练得到人物模型1的情况下,期望新的人物模型2也能够展示出与人物模型1相同的表情,则需要针对人物模型2重新采集数据
进行学训练。重新采集数据并学习训练消耗大量时间,如何快速实现不同人物模型之间的表情基迁移转换是数字人技术的亟需解决的问题。
[0034]为解决上述技术问题,本公开实施例提供一种服务器、人物模型表情基的驱动方法及存储介质,其中该服务器包括:控制器,被配置为首先获取点面拓扑结构不同的第一人物模型和第二人物模型,其中第一人物模型包括M个第一表情基,第二人物模型包括N个第二表情基,然后根据M个第一表情基和N个第二表情基进行拟合,确定每个第二表情基对应的拟合系数矩阵和残差系数矩阵,进而根据这每个第二表情基对应的拟合系数矩阵和残差系数矩阵,计算驱动系数,从而根据驱动系数驱动第二人物模型,使得第二人物模型能够展示出与其点面拓扑结构不相同的第一人物模型的表情,实现不同人物模型之间表情基的转换迁移而无需采集大量数据进行训练,提升了人物模型表情基的驱动效率。
[0035]图1A为本公开实施例提供的一些实施例中的场景示意图。如图1A 所示,图中包括控制装置100、显示设备200、智能设备300和服务器400。用户可通过智能设备300或控制装置100操作显示设备200,在显示设备200上唤出数字人。
[0036]在如图1A所示的场景中,以用户通过控制装置100操作显示设备200唤出数字人为例:显示设备200接收到控制装置100发送的数字人唤出指令,显示设备200响应于该数字人唤出指令,显示数字人a,如图1B所示,图1B为本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种服务器,其特征在于,包括:控制器,被配置为:获取第一人物模型的第一表情基,以及第二人物模型的第二表情基,所述第一人物模型和所述第二人物模型的点面拓扑结构不同,所述第一表情基包括M个第一混合形状,所述第二表情基包括N个第二混合形状;根据所述M个第一混合形状和所述N个第二混合形状进行拟合,确定所述第二表情基对应的拟合系数矩阵和残差系数矩阵;根据所述第二表情基对应的拟合系数矩阵和残差系数矩阵,计算驱动系数;根据所述驱动系数驱动所述第二人物模型。2.根据权利要求1所述的服务器,其特征在于,所述控制器,根据所述M个第一混合形状和所述N个第二混合形状进行拟合,确定所述第二表情基对应的拟合系数矩阵和残差系数矩阵,被配置为:将所述第二表情基划分为第一等级表情基和第二等级表情基;针对所述第一等级表情基对应的第二混合形状,以及所述M个第一混合形状进行拟合,得到第一待拟合系数;针对所述第二等级表情基对应的第二混合形状,以及所述M个第一混合形状进行拟合,得到第二待拟合系数;根据所述第一待拟合系数和所述第二待拟合系数,得到所述拟合系数矩阵和所述残差系数矩阵。3.根据权利要求2所述的服务器,其特征在于,所述控制器,针对所述第二等级表情基对应的第二混合形状,以及所述M个第一混合形状进行拟合,得到第二待拟合系数之后,还被配置为:根据所述第一待拟合系数和所述第二待拟合系数,计算所述拟合系数矩阵;根据所述第一待拟合系数和所述第一等级表情基对应的第二混合形状,以及所述第二待拟合系数和所述第二等级表情基对应的第二混合形状,得到所述第一表情基的拟合值;所述控制器,根据所述第一待拟合系数和所述第二待拟合系数,得到所述拟合系数矩阵和所述残差系数矩阵,被配置为:根据所述第一表情基的实际观察值和所述拟合值,计算残差系数矩阵。4.根据权利要求3所述的服务器,其特征在于,所述控制器,根据所述M个第一表情基的实际观察值和所述拟合值,计算残差系数矩阵,被配置为:根据所述第一表情基中每个第一混合形状的实际观察值和拟合值,计算残差;利用所述残差进行迭代拟合,得到所述残差系数矩阵。5.根据权利要求1所述的服务器,其特征在于,所述控制器,根据所述M个第一表情基和所述N个第二表情基进行拟合,确定每个第二表情基对应的拟合系数矩阵和残差系数矩阵,被配置为:将M个第一混合形状变形迁移至第二人物模型,得到...

【专利技术属性】
技术研发人员:刘韶
申请(专利权)人:海信视像科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1