基于大模型的云视频生成方法、装置及计算机设备制造方法及图纸

技术编号:41400511 阅读:37 留言:0更新日期:2024-05-20 19:25
本发明专利技术涉及云计算技术领域,具体涉及基于大模型的云视频生成方法、装置及计算机设备,包括以下步骤:利用第一神经网络,对声音素材和云视频间映射关系进行深度学习,得到声音生成网络;利用第二神经网络,对画面素材和云视频间映射关系进行深度学习,得到画面生成网络;在声音生成网络和画面生成网络间设置交互网络,对声音生成网络和画面生成网络进行交互融合,得到用于根据声音素材和画面素材直接生成云视频的云视频生成大模型。本发明专利技术在声音生成网络和画面生成网络间设置交互网络,对声音生成网络和画面生成网络进行交互融合,充分利用视频中声音和画面潜在的关联信息,从而增强生成的云视频中声音画面的协调性,提升云视频的播放效果。

【技术实现步骤摘要】

本专利技术涉及云计算,具体涉及基于大模型的云视频生成方法、装置及计算机设备


技术介绍

1、云视频(cloudvideo)是指基于云计算商业模式应用的视频网络平台服务。在云平台上,所有的视频供应商,代理商,策划服务商,制作商,行业协会,管理机构,行业媒体,法律结构等都集中云整合成资源池,各个资源相互展示和互动,按需交流,达成意向,从而降低成本,提高效率,这样的概念就是云视频概念。

2、目前云视频生成,多采用获取样本数据以及样本标签的方法,通常依赖于人为进行标注,然后依据标注的标签进行视频生成。由于视频相比于图像更为复杂,标注中,还可能需要对视频进行数据清理或去重处理,大大增加了视频数据的标注成本和标注难度,且人为标注的方式还可能出现标注错误的情况。而且在生成视频时,对声音和画面单独进行标注,从而单独生成云视频,忽略了视频中声音和画面潜在的关联信息,从而使得生成的云视频中声音画面的协调性不足,降低云视频的生成效果。


技术实现思路

1、本专利技术的目的在于提供基于大模型的云视频生成方法、装置及计算机设本文档来自技高网...

【技术保护点】

1.一种基于大模型的云视频生成方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种基于大模型的云视频生成方法,其特征在于:所述声音生成网络的构建方法包括:

3.根据权利要求2所述的一种基于大模型的云视频生成方法,其特征在于:所述画面生成网络的构建方法包括:

4.根据权利要求3所述的一种基于大模型的云视频生成方法,其特征在于:所述交互网络的构建方法包括:

5.根据权利要求4所述的一种基于大模型的云视频生成方法,其特征在于:所述云视频生成大模型的构建方法包括:

6.根据权利要求5所述的一种基于大模型的云视频生成方法,其特征...

【技术特征摘要】

1.一种基于大模型的云视频生成方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种基于大模型的云视频生成方法,其特征在于:所述声音生成网络的构建方法包括:

3.根据权利要求2所述的一种基于大模型的云视频生成方法,其特征在于:所述画面生成网络的构建方法包括:

4.根据权利要求3所述的一种基于大模型的云视频生成方法,其特征在于:所述交互网络的构建方法包括:

5.根据权利要求4所述的一种基于大模型的云视频生成方法,其特征在于:所述云视频生成大模型的构建方法包括:

6.根据权利要求5所述的一种基于大模型的云视频生成方法,其特征在于:...

【专利技术属性】
技术研发人员:王曜请求不公布姓名
申请(专利权)人:深圳云天畅想信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1