数字人视频的处理方法、装置、存储介质和系统制造方法及图纸

技术编号:41569704 阅读:15 留言:0更新日期:2024-06-06 23:50
本申请提供了一种数字人视频的处理方法、装置、存储介质和系统,该方法包括:采用第一文本生成视频模型对第一形象图和第一动作描述文本进行处理,得到第一视频文件,并采用第二文本生成视频模型对第二形象图和第二动作描述文本进行处理,得到第二视频文件,并将第一视频文件和第二视频文件存储至视频库中;获取GPT交互文本,并基于GPT交互文本,采用GPT技术从视频库中确定目标视频文件,并播放目标视频文件。通过考虑实时信息,同时基于GPT技术处理数字人的视频文件的生成工作,从而使得视频文件更能符合当前位置所处的节日和节气,进而解决了目前的方案生成的数字人形象的动作较为呆板使得用户体验较差的问题。

【技术实现步骤摘要】

本申请涉及数字人,具体而言,涉及一种数字人视频的处理方法、装置、存储介质和系统


技术介绍

1、目前的挂载在浏览器上的类gpt助手的应用大多为只是一个图标的形式,展现给用户的概念是一个工具的存在,而没有在浏览器上通过具体的虚拟角色形象展现在用户面前的类gpt助手插件。

2、目前主流的方案都是为用户生成数字人形态的助手,再通过驱动数字人与用户进行交互,动作一般为用户提前设定好的有限数量的动作,数字人的形象也不够多样化,造成用户与数字人交互时感觉对方比较呆板,久而久之也就对这个数字人形象产生厌倦感而不愿意与之进行交互。

3、目前的方案主要是聚焦于文本驱动人型形态的虚拟角色运动,通过控制虚拟角色的人体关键点位置来控制虚拟角色运动,当出现非人型形态的虚拟角色时,则可能无法正常驱动其运动,而出现动作畸变。

4、目前的方案生成的数字人形象的动作较为呆板使得用户体验较差。


技术实现思路

1、本申请的主要目的在于提供一种数字人视频的处理方法、装置、存储介质和系统,以至少解决目前的方案生成的本文档来自技高网...

【技术保护点】

1.一种数字人视频的处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,将所述第一视频文件和所述第二视频文件存储至视频库中,包括:

3.根据权利要求1所述的方法,其特征在于,基于所述初始设定指令,采用GPT技术生成数字人的第一形象图、第一动作描述文本、初始背景故事文本,包括:

4.根据权利要求3所述的方法,其特征在于,

5.根据权利要求1所述的方法,其特征在于,基于所述实时信息指令、所述第一形象图和所述初始背景故事文本,采用GPT技术生成所述数字人的第二形象图和第二动作描述文本,包括:

6.根据权利要求1至5...

【技术特征摘要】

1.一种数字人视频的处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,将所述第一视频文件和所述第二视频文件存储至视频库中,包括:

3.根据权利要求1所述的方法,其特征在于,基于所述初始设定指令,采用gpt技术生成数字人的第一形象图、第一动作描述文本、初始背景故事文本,包括:

4.根据权利要求3所述的方法,其特征在于,

5.根据权利要求1所述的方法,其特征在于,基于所述实时信息指令、所述第一形象图和所述初始背景故事文本,采用gpt技术生成所述数字人的第二形象图和第二动作描述文本,包括:

6.根据权利要求1至5中任一项所述的方法,其特征在于,

7.根据权利要...

【专利技术属性】
技术研发人员:周科霖李健陈明武卫东
申请(专利权)人:无锡捷通数智科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1