定格动画的生成方法、装置、设备及存储介质制造方法及图纸

本发明专利技术涉及图像处理领域，公开了一种定格动画的生成方法、装置、设备及存储介质。该方法包括：检测到生成指令时，解析生成指令，得到语音信息；生成语音信息对应的时间轴、拼音韵母；根据拼音韵母在预设嘴型图数据库中确定对应的嘴型图；根据时间轴将嘴型图合成为视频；将语音信息与视频合成，得到定格动画。本发明专利技术实现了基于语音信息生成定格动画。相对于根据拍摄设备进行创作、手动调整、人工校对的定格动画生成方式，本实施例降低了定格动画的生成成本。本。本。

【技术实现步骤摘要】
定格动画的生成方法、装置、设备及存储介质


[0001]本专利技术涉及图像处理领域，尤其涉及一种定格动画的生成方法、装置、设备及存储介质。

技术介绍

[0002]现在的定格动画的创作方法，基本都是逐帧进行创作，每切换一帧画面，就需要手动调整拍摄内容。创作出来的定格动画，还需要人工校对，定格动画的画面才能和音频匹配上。这样的传统方法耗时耗力，生成定格动画的成本非常高。

技术实现思路

[0003]本专利技术的主要目的在于解决生成定格动画的成本高的技术问题。
[0004]本专利技术第一方面提供了一种定格动画的生成方法，所述定格动画的生成方法包括：
[0005]检测到生成指令时，解析所述生成指令，得到语音信息；
[0006]生成所述语音信息对应的时间轴、拼音韵母；
[0007]根据所述拼音韵母在预设嘴型图数据库中确定对应的嘴型图；
[0008]根据所述时间轴将所述嘴型图合成为视频；
[0009]将所述语音信息与所述视频合成，得到定格动画。
[0010]可选的，在本专利技术第一方面的第本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种定格动画的生成方法，其特征在于，所述定格动画的生成方法包括：检测到生成指令时，解析所述生成指令，得到语音信息；生成所述语音信息对应的时间轴、拼音韵母；根据所述拼音韵母在预设嘴型图数据库中确定对应的嘴型图；根据所述时间轴将所述嘴型图合成为视频；将所述语音信息与所述视频合成，得到定格动画。2.根据权利要求1所述的定格动画的生成方法，其特征在于，所述检测到生成指令时，解析所述生成指令，得到语音信息的步骤之前，所述方法还包括：获取视频样本；根据所述样本视频的音频信息生成时间轴样本以及拼音韵母样本；根据所述时间轴样本将所述视频样本的视频帧与所述拼音韵母样本关联，得到所述预设嘴型图数据库。3.根据权利要求2所述的定格动画的生成方法，其特征在于，所述根据所述时间轴样本将所述视频样本的视频帧与所述拼音韵母样本关联，得到所述预设嘴型图数据库的步骤包括：获取所述视频样本的所述视频帧；对所述视频帧进行脸部提取，得到嘴型图样本；根据所述时间轴样本将所述嘴型图样本与所述拼音韵母样本关联，得到关联结果；根据预设静默嘴型图与所述嘴型图样本生成所述预设嘴型图数据库。4.根据权利要求3所述的定格动画的生成方法，其特征在于，所述根据预设静默嘴型图与所述嘴型图样本生成所述预设嘴型图数据库的步骤包括：获取所述静默嘴型图；将所述静默嘴型图、所述嘴型图样本输入预选训练的Stylegan对抗神经网络模型，得到所述Stylegan对抗神经网络模型输出的风格化的目标静默嘴型图、目标嘴型图样本；将所述目标静默嘴型图与所述目标嘴型图样本作为所述预设嘴型图数据库。5.根据权利要求1
‑
4任一项所述的定格动画的生成方法，其特征在于，所述将所述语音信息与所述视频合成，得到定格动画的步骤包括：确定所述...

【专利技术属性】
技术研发人员：苏朋杨，蔡卓君，石敏煊，
申请(专利权)人：上海积图科技有限公司，
类型：发明
国别省市：