视频生成方法、装置、电子设备及存储介质制造方法及图纸

技术编号:36530679 阅读:15 留言:0更新日期:2023-02-01 16:13
本公开提供了一种视频生成方法、装置、电子设备及存储介质,属于多媒体技术领域。方法包括:通过多模态技术对直播视频进行分类,得到所述直播视频的直播类别;基于所述直播类别,从所述直播视频中提取至少一个第一视频片段,所述第一视频片段用于呈现所述直播视频中的属于所述直播类别的至少一个直播事件;对任一第一视频片段,从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段,所述事件关联度用于表示视频帧中的内容与直播事件的关联程度;基于至少一个第二视频片段,生成目标视频。该方法能够使目标视频为与直播事件的关联程度较高的视频帧构成的视频,提高了目标视频的质量。的质量。的质量。

【技术实现步骤摘要】
视频生成方法、装置、电子设备及存储介质


[0001]本公开涉及多媒体
,特别涉及一种视频生成方法、装置、电子设备及存储介质。

技术介绍

[0002]随着互联网技术的发展,观看视频直播已成为广大用户常用的一种娱乐方式。视频直播中包括精彩内容的视频片段往往比较少,用户如果想不错过精彩内容,需要长时间集中精力观看视频直播,导致用户观看视频直播的效率不高。如何提高用户观看视频直播的效率,是一个研究方向。
[0003]现有技术中,通常是利用人工智能技术来识别视频直播中的精彩内容的起止时间,然后自动对包含精彩内容的视频片段进行剪辑,生成包含精彩内容的视频。用户通过观看包含精彩内容的视频就能获取到视频直播中的精彩内容,而无需长时间观看视频直播。
[0004]但是,采用上述方案,终端识别的精彩内容的起止时间可能并不准确,导致生成的视频中可能包含非精彩内容,降低了生成的视频的质量。

技术实现思路

[0005]本公开提供一种视频生成的方法、装置、电子设备及存储介质,能够提示生成的目标视频的质量。本公开的技术方案如下:
[0006]根据本公开实施例的一方面,提供一种视频生成方法,包括:
[0007]通过多模态技术对直播视频进行分类,得到所述直播视频的直播类别;
[0008]基于所述直播类别,从所述直播视频中提取至少一个第一视频片段,所述第一视频片段用于呈现所述直播视频中的属于所述直播类别的至少一个直播事件;
[0009]对于任一第一视频片段,从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段,所述事件关联度用于表示视频帧中的内容与直播事件的关联程度;
[0010]基于至少一个第二视频片段,生成目标视频。
[0011]在一些实施例中,所述对于任一第一视频片段,从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段,包括:
[0012]对于任一第一视频片段,通过多模态技术、动作检测技术以及场景检测技术中的至少一种,确定所述第一视频片段中各个视频帧与对应的直播事件的事件关联度;
[0013]从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段。
[0014]在一些实施例中,所述通过多模态技术对直播视频进行分类,得到所述直播视频的直播类别,包括:
[0015]对所述直播视频进行切片,得到至少一个第三视频片段;
[0016]对于任一第三视频片段,通过所述多模态技术对所述第三视频片段进行分类,得
到所述第三视频片段的直播类别;
[0017]基于所述至少一个第三视频片段的直播类别,确定所述直播视频的直播类别。
[0018]在一些实施例中,所述基于所述至少一个第三视频片段的直播类别,确定所述直播视频的直播类别,包括:
[0019]基于所述至少一个第三视频片段的直播类别,确定占比最高的目标直播类别;
[0020]将所述目标直播类别,确定为所述直播视频的直播类别。
[0021]在一些实施例中,所述方法还包括:
[0022]获取新采集的至少一个第四视频片段;
[0023]基于所述至少一个第四视频片段的直播类别,更新所述直播视频的直播类别。
[0024]在一些实施例中,所述基于所述直播类别,从所述直播视频中提取至少一个第一视频片段,包括:
[0025]对于任一第三视频片段,基于所述直播类别,确定属于所述直播类别的至少一个直播事件;
[0026]对于任一个直播事件,在所述第三视频片段中确定所述直播事件的最早出现的第一时刻和最晚出现的第二时刻;
[0027]基于所述第一时刻和所述第二时刻,从所述第三视频片段中提取包括所述直播事件的第一视频片段。
[0028]在一些实施例中,所述第一视频片段的数量为多个;
[0029]所述方法还包括:
[0030]对于时长小于预设时长的多个第一视频片段,将相邻且属于同一直播事件的第一视频片段按照时间先后顺序进行拼接,得到至少一个第一视频片段。
[0031]根据本公开实施例的另一方面,提供一种视频生成装置,包括:
[0032]分类单元,被配置为通过多模态技术对直播视频进行分类,得到所述直播视频的直播类别;
[0033]提取单元,被配置为基于所述直播类别,从所述直播视频中提取至少一个第一视频片段,所述第一视频片段用于呈现所述直播视频中的属于所述直播类别的至少一个直播事件;
[0034]删除单元,被配置为对于任一第一视频片段,从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段,所述事件关联度用于表示视频帧中的内容与直播事件的关联程度;
[0035]生成单元,被配置为基于至少一个第二视频片段,生成目标视频。
[0036]在一些实施例中,所述删除单元,被配置为对于任一第一视频片段,通过多模态技术、动作检测技术以及场景检测技术中的至少一种,确定所述第一视频片段中各个视频帧与对应的直播事件的事件关联度;从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段。
[0037]在一些实施例中,所述分类单元,包括:
[0038]切片子单元,被配置为对所述直播视频进行切片,得到至少一个第三视频片段;
[0039]分类子单元,被配置为对于任一第三视频片段,通过所述多模态技术对所述第三视频片段进行分类,得到所述第三视频片段的直播类别;
[0040]确定子单元,被配置为基于所述至少一个第三视频片段的直播类别,确定所述直播视频的直播类别。
[0041]在一些实施例中,所述确定子单元,被配置为基于所述至少一个第三视频片段的直播类别,确定占比最高的目标直播类别;将所述目标直播类别,确定为所述直播视频的直播类别。
[0042]在一些实施例中,所述装置还包括:
[0043]获取单元,被配置为获取新采集的至少一个第四视频片段;
[0044]更新单元,被配置为基于所述至少一个第四视频片段的直播类别,更新所述直播视频的直播类别。
[0045]在一些实施例中,所述提取单元,被配置为对于任一第三视频片段,基于所述直播类别,确定属于所述直播类别的至少一个直播事件;对于任一个直播事件,在所述第三视频片段中确定所述直播事件的最早出现的第一时刻和最晚出现的第二时刻;基于所述第一时刻和所述第二时刻,从所述第三视频片段中提取包括所述直播事件的第一视频片段。
[0046]在一些实施例中,所述第一视频片段的数量为多个;所述装置还包括:
[0047]拼接单元,被配置为对于时长小于预设时长的多个第一视频片段,将相邻且属于同一直播事件的第一视频片段按照时间先后顺序进行拼接,得到至少一个第一视频片段。
[0048]根据本公开实施例的另一方面本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种视频生成方法,其特征在于,包括:通过多模态技术对直播视频进行分类,得到所述直播视频的直播类别;基于所述直播类别,从所述直播视频中提取至少一个第一视频片段,所述第一视频片段用于呈现所述直播视频中的属于所述直播类别的至少一个直播事件;对于任一第一视频片段,从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段,所述事件关联度用于表示视频帧中的内容与直播事件的关联程度;基于至少一个第二视频片段,生成目标视频。2.根据权利要求1所述的视频生成方法,其特征在于,所述对于任一第一视频片段,从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段,包括:对于任一第一视频片段,通过多模态技术、动作检测技术以及场景检测技术中的至少一种,确定所述第一视频片段中各个视频帧与对应的直播事件的事件关联度;从所述第一视频片段中删除事件关联度小于关联度阈值的视频帧,得到所述第一视频片段对应的第二视频片段。3.根据权利要求1所述的视频生成方法,其特征在于,所述通过多模态技术对直播视频进行分类,得到所述直播视频的直播类别,包括:对所述直播视频进行切片,得到至少一个第三视频片段;对于任一第三视频片段,通过所述多模态技术对所述第三视频片段进行分类,得到所述第三视频片段的直播类别;基于所述至少一个第三视频片段的直播类别,确定所述直播视频的直播类别。4.根据权利要求3所述的视频生成方法,其特征在于,所述基于所述至少一个第三视频片段的直播类别,确定所述直播视频的直播类别,包括:基于所述至少一个第三视频片段的直播类别,确定占比最高的目标直播类别;将所述目标直播类别,确定为所述直播视频的直播类别。5.根据权利要求4所述的视频生成方法,其特征在于,所述方法还包括:获取新采集的至少一个第四视频片段;基于所述至少一个第四视...

【专利技术属性】
技术研发人员:王俊邓峰李欣阳王通李杰
申请(专利权)人:北京达佳互联信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1