【技术实现步骤摘要】
本申请涉及人工智能，尤其涉及一种角色视频生成方法、装置、电子设备及存储介质。
技术介绍
1、在数字内容创建领域，角色动画的生成是一项基本而重要的任务，旨在将源角色图像按照一定的姿势序列转化为逼真的视频。此技术在在线零售、娱乐视频、艺术创作和虚拟角色开发等多个领域中均有广泛应用。然而，尽管需求日益增长，现有技术在生成高质量角色视频方面仍面临诸多挑战。
2、当前，基于生成对抗网络(gan)的方法是实现角色动画的主流技术。尽管取得了一定进展，这些算法在生成图像或视频时仍然面临局部失真、细节模糊、语义不一致和时间不稳定等问题。这些问题的存在严重限制了基于gan的技术在实际应用中的效果和范围。另一种方法是采用扩散模型来生成角色视频。尽管相较于gan在某些方面有所改善，例如在人物细节的保留上更为精细，但它们在视频帧间的连贯性上仍存在问题，比如帧与帧之间可能出现抖动，这降低了生成视频的质量和观感。
3、鉴于上述现有技术的不足，迫切需要一种能够产生视觉细节丰富且时间连贯的角色视频的新方法。
技术实现思
<本文档来自技高网...【技术保护点】
1.一种角色视频生成方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述利用预设的编码器对所述角色参考图和角色描述文本进行特征提取，得到文本语义特征、参考图语义特征和参考图特征信息，包括：
3.根据权利要求1所述的方法，其特征在于，所述将所述第一融合特征及所述参考图特征信息输入到特征学习网络中进行融合，得到第二融合特征，包括：
4.根据权利要求3所述的方法，其特征在于，在所述得到第二融合特征之后，所述方法还包括：
5.根据权利要求1所述的方法，其特征在于，所述利用姿势引导器对所述角色姿态图进行编码以生...
【技术特征摘要】
1.一种角色视频生成方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述利用预设的编码器对所述角色参考图和角色描述文本进行特征提取，得到文本语义特征、参考图语义特征和参考图特征信息，包括：
3.根据权利要求1所述的方法，其特征在于，所述将所述第一融合特征及所述参考图特征信息输入到特征学习网络中进行融合，得到第二融合特征，包括：
4.根据权利要求3所述的方法，其特征在于，在所述得到第二融合特征之后，所述方法还包括：
5.根据权利要求1所述的方法，其特征在于，所述利用姿势引导器对所述角色姿态图进行编码以生成姿态图特征，包括：
6.根据权利要求1所述的方...
【专利技术属性】
技术研发人员：石雅洁，
申请(专利权)人：深圳须弥云图空间科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。