多媒体资源生成方法及设备技术

技术编号:42015280 阅读:17 留言:0更新日期:2024-07-16 23:09
本说明书实施例提供的多媒体资源生成方法及设备,针对目标剧本的目标角色设置对应的角色参考图像例如用户头像;基于角色参考图像以及目标剧本,通过生成式模型生成与目标剧本的各个部分对应的图像帧;基于目标剧本的各个部分对应的图像帧,生成目标剧本对应的多媒体资源,能够在生成的多媒体资源中建立用户与多媒体资源之间的关联,从而能够生成用户个性化的多媒体资源。

【技术实现步骤摘要】

本说明书涉及人工智能,尤其涉及一种多媒体资源生成方法及多媒体资源生成设备。


技术介绍

1、随着aigc(artificial intelligence generated content,生成式人工智能)技术的发展,涌现出了越来越多的大模型应用,例如,ai问答应用、ai文生图应用等。

2、在相关技术方案中,基于用户输入的文本提示词,通过生成式模型来生成文本提示词对应的多媒体资源例如图像。然而,这种技术方案中,仅能根据文本提示词来生成多媒体资源,无法生成用户个性化的多媒体资源。

3、因此,如何生成用户个性化的多媒体资源成为了亟待解决的技术难题。

4、
技术介绍
部分的内容仅仅是专利技术人个人所知晓的信息,并不代表上述信息在本公开申请日之前已经进入公共领域,也不代表其可以成为本公开的现有技术。


技术实现思路

1、本说明书提供一种多媒体资源生成方法及多媒体资源生成设备,能够在生成多媒体资源时建立用户与多媒体资源之间的关联,从而能够生成用户个性化的多媒体资源。>

2、第一方面本文档来自技高网...

【技术保护点】

1.一种多媒体资源生成方法,包括:

2.根据权利要求1所述的方法,其中,所述基于所述角色参考图像以及所述目标剧本,通过生成式模型生成与所述目标剧本的各个部分对应的图像帧,包括:

3.根据权利要求2所述的方法,其中,所述生成式模型为多模态生成式模型,所述基于所述目标剧本,通过所述生成式模型生成与所述目标剧本的各个部分对应的图像帧,包括:

4.根据权利要求2所述的方法,其中,所述将所述角色参考图像的面部特征变换到所述目标图像帧中的所述目标角色的面部,包括:

5.根据权利要求1所述的方法,其中,所述基于所述角色参考图像以及所述目标剧本,通过生成式...

【技术特征摘要】

1.一种多媒体资源生成方法,包括:

2.根据权利要求1所述的方法,其中,所述基于所述角色参考图像以及所述目标剧本,通过生成式模型生成与所述目标剧本的各个部分对应的图像帧,包括:

3.根据权利要求2所述的方法,其中,所述生成式模型为多模态生成式模型,所述基于所述目标剧本,通过所述生成式模型生成与所述目标剧本的各个部分对应的图像帧,包括:

4.根据权利要求2所述的方法,其中,所述将所述角色参考图像的面部特征变换到所述目标图像帧中的所述目标角色的面部,包括:

5.根据权利要求1所述的方法,其中,所述基于所述角色参考图像以及所述目标剧本,通过生成式模型生成与所述目标剧本的各个部分对应的图像帧,包括...

【专利技术属性】
技术研发人员:陈欢乐熊昀茜蒋茂林
申请(专利权)人:支付宝杭州信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1