基于大模型的视频生成方法、装置、设备及存储介质制造方法及图纸

本公开提供了一种基于大模型的视频生成方法、装置、设备及存储介质，涉及人工智能领域，尤其涉及大模型、文生图、音视频领域。具体实现方案为：获取待转换文本，并构建所述待转换文本中的角色的知识图谱；其中，所述知识图谱表征待转换文本中的角色的角色信息；根据所述待转换文本和各角色的知识图谱，确定多帧分镜图片；其中，所述分镜图片表征待转换文本中的部分文本内容；根据所述多帧分镜图片，生成目标视频。提高了视频生成流程的自动化水平，降低人力成本，提高视频质量，提升观看体验。

【技术实现步骤摘要】

本公开涉及人工智能领域中的大模型、文生图、音视频领域，尤其涉及一种基于大模型的视频生成方法、装置、设备及存储介质。

技术介绍

1、随着人工智能技术的发展，移动设备的娱乐功能日益增强。将文学作品改编为影视作品，已成为一种广受欢迎的跨媒介融合方式。

2、目前存在的文本小说视频化技术方案，通常需要人工进行大量的操作，视频生成的流程繁琐、效率低，容易受到人为判断偏差的影响，视频质量较低，影响用户的观看体验。

技术实现思路

1、本公开提供了一种基于大模型的视频生成方法、装置、设备及存储介质。

2、根据本公开的第一方面，提供了一种大于大模型的视频生成方法，包括：

3、获取待转换文本，并构建所述待转换文本中的角色的知识图谱；其中，所述知识图谱表征待转换文本中的角色的角色信息；

4、根据所述待转换文本和各角色的知识图谱，确定多帧分镜图片；其中，所述分镜图片表征待转换文本中的部分文本内容；

5、根据所述多帧分镜图片，生成目标视频。

6、根据本公开的第二方面本文档来自技高网...

【技术保护点】

1.一种基于大模型的视频生成方法，包括：

2.根据权利要求1所述的方法，其中，所述根据所述待转换文本和各角色的知识图谱，确定多帧分镜图片，包括：

3.根据权利要求2所述的方法，其中，所述对所述待转换文本进行拆分处理，得到多个分镜信息，包括：

4.根据权利要求3所述的方法，其中，所述根据所述文本块的文本内容，得到多个分镜信息，包括：

5.根据权利要求4所述的方法，其中，所述根据所述分镜片段的文本内容，确定所述分镜片段的字幕信息，包括：

6.根据权利要求2-5中任一项所述的方法，其中，所述根据所述分镜信息和所述分镜信息中所含有的角色...

【技术特征摘要】

1.一种基于大模型的视频生成方法，包括：

2.根据权利要求1所述的方法，其中，所述根据所述待转换文本和各角色的知识图谱，确定多帧分镜图片，包括：

3.根据权利要求2所述的方法，其中，所述对所述待转换文本进行拆分处理，得到多个分镜信息，包括：

4.根据权利要求3所述的方法，其中，所述根据所述文本块的文本内容，得到多个分镜信息，包括：

5.根据权利要求4所述的方法，其中，所述根据所述分镜片段的文本内容，确定所述分镜片段的字幕信息，包括：

6.根据权利要求2-5中任一项所述的方法，其中，所述根据所述分镜信息和所述分镜信息中所含有的角色的知识图谱，确定所述分镜信息的分镜图片，包括：

7.根据权利要求6所述的方法，其中，所述根据所述分镜图片的场景信息、所述分镜信息中所含有的角色的表现信息、以及所述分镜信息中所含有的角色的知识图谱，确定所述分镜信息的分镜图片，包括：

8.根据权利要求7所述的方法，其中，所述根据所述分镜图片的场景信息、所述分镜信息中所含有的角色的表现信息、以及所述分镜信息中所含有的角色的知识图谱，确定所述分镜图片的提示词信息，包括：

9.根据权利要求7或8所述的方法，其中，所述将所述...

【专利技术属性】
技术研发人员：张燕丽，汪沛毅，雷友波，庞磊，邰利龙，白云龙，王颖，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：