【技术实现步骤摘要】
本申请属于动画，尤其涉及一种动画数据的生成方法、装置、终端设备和存储介质。
技术介绍
1、在三维动画或游戏等应用中，三维虚拟形象都是通过动画数据来进行驱动。动画人物的情感表现主要通过声优配音音频和表情&口型动画数据来呈现。在相关技术中，通常需要人工制作表情&口型动画数据，例如通过手k、面捕技术等来制作动画数据。但人工制作动画数据存在制作效率低、效果差、成本高等问题。
技术实现思路
1、本申请实施例提供一种动画数据的生成方法、装置、终端设备和存储介质，可以解决相关技术中制作动画数据时效率低、效果差、成本高的问题。
2、第一方面，本申请实施例提供了一种动画数据的生成方法，包括：
3、获取待转换音频；
4、将所述待转换音频输入训练好的序列生成模型，得到对应的第一口型序列以及第一表情强度序列；
5、对所述待转换音频进行语音识别，得到对应的文本；
6、将所述文本输入训练好的情绪分类模型，得到对应的第一情绪类型；
7、结合所述第一情绪类型以及所述第一表情强度序列，得到情绪变化序列；
8、基于所述情绪变化序列以及所述第一口型序列生成动画数据。
9、第二方面，本申请实施例提供了一种动画数据的生成装置，包括：
10、获取模块，用于获取待转换音频；
11、第一输入模块，用于将所述待转换音频输入训练好的序列生成模型，得到对应的第一口型序列以及第一表情强度序列；
<...【技术保护点】
1.一种动画数据的生成方法，其特征在于，包括：
2.如权利要求1所述的动画数据的生成方法，其特征在于，所述序列生成模型包括Transformer编码器、Transformer口型解码器以及Transformer表情解码器，所述将所述待转换音频输入训练好的序列生成模型，得到对应的第一口型序列以及第一表情强度序列，包括：
3.如权利要求1所述的动画数据的生成方法，其特征在于，在所述将所述待转换音频输入训练好的序列生成模型，得到对应的第一口型序列以及第一表情强度序列之前，所述方法还包括：
4.如权利要求1所述的动画数据的生成方法，其特征在于，所述情绪分类模型包括LLaMA-13B模型以及LoRA编码-解码网络，所述将所述文本输入训练好的情绪分类模型，得到对应的第一情绪类型，包括：
5.如权利要求1所述的动画数据的生成方法，其特征在于，在所述将所述文本输入训练好的情绪分类模型，得到对应的第一情绪类型之前，所述方法还包括：
6.如权利要求1所述的动画数据的生成方法，其特征在于，所述结合所述第一情绪类型以及所述第一表情强度序列，得到
7.如权利要求1所述的动画数据的生成方法，其特征在于，所述基于所述情绪变化序列以及所述第一口型序列生成动画数据，包括：
8.一种动画数据的生成装置，其特征在于，包括：
9.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述动画数据的生成方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述动画数据的生成方法的步骤。
...【技术特征摘要】
1.一种动画数据的生成方法，其特征在于，包括：
2.如权利要求1所述的动画数据的生成方法，其特征在于，所述序列生成模型包括transformer编码器、transformer口型解码器以及transformer表情解码器，所述将所述待转换音频输入训练好的序列生成模型，得到对应的第一口型序列以及第一表情强度序列，包括：
3.如权利要求1所述的动画数据的生成方法，其特征在于，在所述将所述待转换音频输入训练好的序列生成模型，得到对应的第一口型序列以及第一表情强度序列之前，所述方法还包括：
4.如权利要求1所述的动画数据的生成方法，其特征在于，所述情绪分类模型包括llama-13b模型以及lora编码-解码网络，所述将所述文本输入训练好的情绪分类模型，得到对应的第一情绪类型，包括：
5.如权利要求1所述的动画数据的生成方法，其特征在于，在所...
【专利技术属性】
技术研发人员：张贤华，唐浩，
申请(专利权)人：长沙神漫文化科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。