一种文本生成方法、装置、电子设备及存储介质制造方法及图纸

技术编号:45517943 阅读:23 留言:0更新日期:2025-06-13 17:21
本公开实施例公开了一种文本生成方法、装置、电子设备及存储介质,其中该方法包括:对待处理视频中的各事件进行提取,并确定所述各事件对应的各目标视频帧;对所述各目标视频帧的帧特征进行提取,并根据各所述帧特征确定各事件特征;将所述各事件特征按照对应事件的提取顺序进行拼接,生成提示文本;通过第一语言模型,基于所述提示文本生成所述待处理视频的描述文本。通过将事件特征按照对应事件提取顺序拼接得到提示文本,并将提示文本输入语言模型,可使语言模型感知视频中不同事件的内容和顺序,能够提升文本生成效果。

【技术实现步骤摘要】

本公开实施例涉及计算机,尤其涉及一种文本生成方法、装置、电子设备及存储介质


技术介绍

1、现有视频描述文本的生成方法通常为,通过生成模型根据整体视频的视频帧特征生成描述文本。现有方法中,生成模型无法准确感知视频中不同事件的内容和顺序,容易产生描述错误的情况,导致文本生成效果较差。


技术实现思路

1、本公开实施例提供了一种文本生成方法、装置、电子设备及存储介质,能够提升文本生成效果。

2、第一方面,本公开实施例提供了一种文本生成方法,包括:

3、对待处理视频中的各事件进行提取,并确定所述各事件对应的各目标视频帧;

4、对所述各目标视频帧的帧特征进行提取,并根据各所述帧特征确定各事件特征;

5、将所述各事件特征按照对应事件的提取顺序进行拼接,生成提示文本;

6、通过第一语言模型,基于所述提示文本生成所述待处理视频的描述文本。

7、第二方面,本公开实施例还提供了一种文本生成装置,包括:

8、视频帧确定模块,用于对待处理视频中的各事本文档来自技高网...

【技术保护点】

1.一种文本生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据各所述帧特征确定各事件特征,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述各转换特征确定各事件特征,包括下述至少一项:

4.根据权利要求1所述的方法,其特征在于,所述将所述各事件特征按照对应事件的提取顺序进行拼接,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于预先定义的顺序提示词和生成指令提示词,将所述各事件特征按照对应事件的提取顺序进行拼接,包括:

6.根据权利要求1所述的方法,其特征在于,在所述待处理视频包...

【技术特征摘要】

1.一种文本生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据各所述帧特征确定各事件特征,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述各转换特征确定各事件特征,包括下述至少一项:

4.根据权利要求1所述的方法,其特征在于,所述将所述各事件特征按照对应事件的提取顺序进行拼接,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于预先定义的顺序提示词和生成指令提示词,将所述各事件特征按照对应事件的提取顺序进行拼接,包括:

6.根据权...

【专利技术属性】
技术研发人员:韩鸣飞杨林杰王恒
申请(专利权)人:北京字跳网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1