基于时序差异的三维动画生成方法、装置、设备和介质制造方法及图纸

本申请涉及动画生成技术领域，公开了一种基于时序差异的三维动画生成方法、装置、设备和介质，其中方法包括：对原始音频进行音频特征提取；构建第一掩码向量，计算前一帧身份特征和前一帧表情特征；构建第二掩码向量，计算后一帧身份特征和后一帧表情特征；对当前音频特征、前一帧身份特征、后一帧身份特征和前一帧拼接身份特征进行特征维度拼接；对当前音频特征、前一帧表情特征、后一帧表情特征和前一帧拼接表情特征进行特征维度拼接；根据当前拼接身份特征和当前拼接表情特征进行偏移预测；对偏移量进行偏移优化，得到已优化当前偏移量；根据已优化当前偏移量对待驱动对象生成人脸动画。本申请提高了生成动画的嘴型匹配度，具有更高的效率。

【技术实现步骤摘要】

本申请涉及动画生成，例如涉及一种基于时序差异的三维动画生成方法、装置、设备和介质。

技术介绍

1、现有三维人脸动画生成技术分为两类，第一类是通过人工移动三维人脸顶点改变三维人脸的形状和表情，人工移动的方式效率较低。第二类是基于深度学习的三维人脸动画生成方法，现有的基于深度学习的三维人脸动画生成方法忽略了人脸在运动时不同顶点的偏移幅度不同的现象，没有对不同三维人脸区域的顶点进行区分，导致人脸动画的身份信息和表情信息解耦不足，嘴型匹配度不够。

2、综上所述，现有技术存在人工移动三维人脸顶点的效率较低或嘴型匹配度不够的问题。

技术实现思路

1、本申请目的在于：提供一种基于时序差异的三维动画生成方法、装置、设备和介质，其能够解决人工移动三维人脸顶点的效率较低和嘴型匹配度不够的问题。

2、为达到上述目的，本申请提供了一种基于时序差异的三维动画生成方法，包括：

3、获取原始音频，对所述原始音频进行音频特征提取，得到当前音频特征、前一帧音频特征和后一帧音频特征；>

4、根据所述本文档来自技高网...

【技术保护点】

1.一种基于时序差异的三维动画生成方法，其特征在于，包括：

2.根据权利要求1所述的基于时序差异的三维动画生成方法，其特征在于，所述根据所述当前拼接身份特征和所述当前拼接表情特征进行偏移预测，得到当前第一偏移量、当前第二偏移量和当前第三偏移量，包括：

3.根据权利要求1所述的基于时序差异的三维动画生成方法，其特征在于，所述根据所述当前第一偏移量、前一帧第一偏移量、前一帧第三偏移量、后一帧第一偏移量和后一帧第二偏移量进行偏移优化，得到已优化当前偏移量，包括：

4.根据权利要求2所述的基于时序差异的三维动画生成方法，其特征在于，所述根据所述已优化当前偏移量...

【技术特征摘要】

1.一种基于时序差异的三维动画生成方法，其特征在于，包括：

2.根据权利要求1所述的基于时序差异的三维动画生成方法，其特征在于，所述根据所述当前拼接身份特征和所述当前拼接表情特征进行偏移预测，得到当前第一偏移量、当前第二偏移量和当前第三偏移量，包括：

3.根据权利要求1所述的基于时序差异的三维动画生成方法，其特征在于，所述根据所述当前第一偏移量、前一帧第一偏移量、前一帧第三偏移量、后一帧第一偏移量和后一帧第二偏移量进行偏移优化，得到已优化当前偏移量，包括：

4.根据权利要求2所述的基于时序差异的三维动画生成方法，其特征在于，所述根据所述已优化当前偏移量对所述待驱动对象进行人脸动画生成，得到三维人脸动画，包括：

5.根据权利要求1所述的基于时序差异的三维动画生成方法，其特征在于，所述根据所述当前音频特征和所述前一帧音频特征构...

【专利技术属性】
技术研发人员：王乃洲，张玉兵，鲍文杰，孙婧，
申请(专利权)人：广州视源电子科技股份有限公司，
类型：发明
国别省市：