摘要视频的生成方法、装置、设备及存储介质制造方法及图纸

技术编号:32743704 阅读:10 留言:0更新日期:2022-03-20 08:50
本申请涉及人工智能,本申请提供一种摘要视频的生成方法、装置、设备及存储介质,所述方法基于视频播放时间轴将待处理视频进行分离,生成至少两帧图像,并基于各帧图像两两之间的相似度,生成关联图像集;获取各个关联图像集中的首帧图像以及尾帧图像,作为候选帧图像;基于各个所述候选帧图像对应的各个文案信息,在各个所述候选帧图像中确定关键帧图像;根据预设摘要形态中的主要时间节点以及所述关键帧图像,生成所述待处理视频的摘要视频。由此基于各帧图像之间的相似度,删除关联图像中除首帧图像以及尾帧图像之外的冗余图像。由此在提高摘要视频的生成效率的同时,同时减少了摘要视频的冗余图像信息,提升用户体验。提升用户体验。提升用户体验。

【技术实现步骤摘要】
摘要视频的生成方法、装置、设备及存储介质


[0001]本专利技术涉及数据处理
,尤其涉及一种摘要视频的生成方法、装置、设备及计算机可读存储介质。

技术介绍

[0002]随着短视频的普及和多媒体处理技术的不断发展,通过短视频进行产品讲解和推广,逐渐成为一种主流的手段。其中,基于幻灯片讲解的短视频是目前使用者较多的一种方式。基于幻灯片讲解的短视频不需要有讲解者的出镜,只需在后台播放幻灯片过程中配合文字或语音进行讲解。但是,基于幻灯片讲解的短视频存在待讲解的幻灯片内容冗余,重点不够突出的问题。因此,为了上述问题,主要通过人工筛查和基于计算机技术的自动筛查两种短视频摘要生成方式。其中,通过人工逐段进行视频筛查的生成方式,生成的短视频摘要内容准确,但摘要生成成本较高,生成效率较低;自动筛查主要基于幻灯片中的文本或语音的语义理解为主,该生成方式的成本较低、生成效率较高,但该方式生成的短视频摘要内容较多,产生了较多冗余信息。因此,如何在提高摘要视频生成效率的同时减少摘要视频的冗余信息成为了目前亟待解决的技术问题。

技术实现思路

[0003]本专利技术的主要目的在于提供一种摘要视频的生成方法、装置、设备及计算机可读存储介质,旨在在提高摘要视频生成效率的同时减少摘要视频的冗余信息的技术问题。
[0004]为实现上述目的,本专利技术提供一种摘要视频的生成方法,所述摘要视频的生成方法包括:基于视频播放时间轴将待处理视频进行分离,生成至少两帧图像,并基于各帧图像两两之间的相似度,生成关联图像集,其中,所述关联图像集中各帧图像之间的相似度超过预设相似度阈值;获取各个所述关联图像集中的首帧图像以及尾帧图像,作为候选帧图像;基于各个所述候选帧图像对应的各个文案信息,在各个所述候选帧图像中确定关键帧图像;根据预设摘要形态中的主要时间节点以及所述关键帧图像,生成所述待处理视频的摘要视频。
[0005]此外,为实现上述目的,本专利技术还提供一种摘要视频的生成装置,所述摘要视频的生成装置包括:关联图像筛选模块,用于基于视频播放时间轴将待处理视频进行分离,生成至少两帧图像,并基于各帧图像两两之间的相似度,生成关联图像集,其中,所述关联图像集中各帧图像之间的相似度超过预设相似度阈值;候选图像筛选模块,用于获取各个所述关联图像集中的首帧图像以及尾帧图像,作为候选帧图像;关键图像筛选模块,用于基于各个所述候选帧图像对应的各个文案信息,在各个所述候选帧图像中确定关键帧图像;摘要视频生成模块,用于根据预设摘要形态中的主要时间节点以及所述关键帧图像,生成所述待处理视频的摘要视频。
[0006]此外,为实现上述目的,本专利技术还提供一种摘要视频的生成设备,所述摘要视频的生成设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的摘要视
频的生成程序,其中所述摘要视频的生成程序被所述处理器执行时,实现如上述的摘要视频的生成方法的步骤。
[0007]此外,为实现上述目的,本专利技术还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有摘要视频的生成程序,其中所述摘要视频的生成程序被处理器执行时,实现如上述的摘要视频的生成方法的步骤。
[0008]本专利技术提供一种摘要视频的生成方法,所述方法基于视频播放时间轴将待处理视频进行分离,生成至少两帧图像,并基于各帧图像两两之间的相似度,生成关联图像集,其中,所述关联图像集中各帧图像之间的相似度超过预设相似度阈值;获取各个所述关联图像集中的首帧图像以及尾帧图像,作为候选帧图像;基于各个所述候选帧图像对应的各个文案信息,在各个所述候选帧图像中确定关键帧图像;根据预设摘要形态中的主要时间节点以及所述关键帧图像,生成所述待处理视频的摘要视频。通过上述方式,本专利技术基于各帧图像之间的相似度,删除关联图像中除首帧图像以及尾帧图像之外的冗余图像,然后基于候选帧图像,即各个关联图像集中首帧图像以及尾帧图像,对应的文案信息,进一步筛选出关键帧图像,根据摘要形态中的主要时间节点以及关键帧图像即可形成摘要视频。由此,避免人工进行视频摘要提取,在提高摘要视频的生成效率的同时,同时减少了摘要视频的冗余图像信息,提升用户体验。
附图说明
[0009]图1为本专利技术实施例方案中涉及的摘要视频的生成设备的硬件结构示意图;
[0010]图2为本专利技术摘要视频的生成方法第一实施例的流程示意图;
[0011]图3为本专利技术摘要视频的生成方法第二实施例的流程示意图;
[0012]图4为本专利技术摘要视频的生成方法第三实施例的流程示意图;
[0013]图5为本专利技术摘要视频的生成装置第一实施例的功能模块示意图。
[0014]本专利技术目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
[0015]应当理解,此处所描述的具体实施例仅仅用以解释本专利技术,并不用于限定本专利技术。
[0016]本专利技术实施例涉及的摘要视频的生成方法主要应用于摘要视频的生成设备,该摘要视频的生成设备可以是PC、便携计算机、移动终端等具有显示和处理功能的设备。
[0017]参照图1,图1为本专利技术实施例方案中涉及的摘要视频的生成设备的硬件结构示意图。本专利技术实施例中,摘要视频的生成设备可以包括处理器1001(例如CPU),通信总线1002,用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信;用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard);网络接口1004可选的可以包括标准的有线接口、无线接口(如WI

FI接口);存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non

volatile memory),例如磁盘存储器,存储器1005可选的还可以是独立于前述处理器1001的存储装置。
[0018]本领域技术人员可以理解,图1中示出的硬件结构并不构成对摘要视频的生成设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
[0019]继续参照图1,图1中作为一种计算机可读存储介质的存储器1005可以包括操作系
统、网络通信模块以及摘要视频的生成程序。
[0020]在图1中,网络通信模块主要用于连接服务器,与服务器进行数据通信;而处理器1001可以调用存储器1005中存储的摘要视频的生成程序,并执行本专利技术实施例提供的摘要视频的生成方法。
[0021]本专利技术实施例提供了一种摘要视频的生成方法。
[0022]参照图2,图2为本专利技术摘要视频的生成方法第一实施例的流程示意图。
[0023]本实施例中,所述摘要视频的生成方法包括以下步骤:
[0024]步骤S10,基于视频播放时间轴将待处理视频进行分离,生成至少两帧图像,并基于各帧图像两两之间的相似度,生成关联图像集,其中,所述关联图像集中各帧图像之间的相似度超过预设相似度阈值;
[0025]本实施例中,可基于待处理视本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种摘要视频的生成方法,其特征在于,所述摘要视频的生成方法包括以下步骤:基于视频播放时间轴将待处理视频进行分离,生成至少两帧图像,并基于各帧图像两两之间的相似度,生成关联图像集,其中,所述关联图像集中各帧图像之间的相似度超过预设相似度阈值;获取各个所述关联图像集中的首帧图像以及尾帧图像,作为候选帧图像;基于各个所述候选帧图像对应的各个文案信息,在各个所述候选帧图像中确定关键帧图像;根据预设摘要形态中的主要时间节点以及所述关键帧图像,生成所述待处理视频的摘要视频。2.如权利要求1所述的摘要视频的生成方法,其特征在于,所述基于视频播放时间轴将待处理视频进行分离,生成至少两帧图像,并基于各帧图像两两之间的相似度,生成至少一个关联图像集包括:基于视频帧提取算法,将所述待处理视频按照所述视频播放时间轴进行分离,并生成至少两帧图像;计算各帧图像两两之间的相似度,将相似度超过预设相似度阈值的各帧图像作为关联图像集,并生成各个所述关联图像集。3.如权利要求1所述的摘要视频的生成方法,其特征在于,所述基于各个所述候选帧图像对应的各个文案信息,在各个所述候选帧图像中确定关键帧图像包括:对所述候选帧图像进行文字识别,并获取各个所述候选帧图像对应的各个文案信息,其中,所述文案信息包括文字个数以及文字大小;在各个所述候选帧图像中,确定文字个数超过预设个数阈值的相关帧图像;在各个所述相关帧图像中,确定文字大小超过预设大小阈值的关键帧图像。4.如权利要求1所述的摘要视频的生成方法,其特征在于,所述基于各个所述候选帧图像对应的各个文案信息,在各个所述候选帧图像中确定关键帧图像包括:对所述候选帧图像进行文字识别,并获取各个所述候选帧图像对应的关键字、文字位置以及文字重复率,作为所述文案信息;根据各个所述候选帧图像的关键字、文字位置以及文字重复率,在各个所述关键帧图像中,确定引言起始帧图像、标题帧图像以及总结结束帧图像,作为所述关键帧图像。5.如权利要求4所述的摘要视频的生成方法,其特征在于,所述根据预设摘要形态中的主要时间节点以及所述关键帧图像,生成所述待处理视频的摘要视频包括:将各个所述关键帧图像插入所述主要时间节点,并在相邻节点的所述关键帧图像之间,插入预设过渡帧图像,生成所述摘要视频。6.如权利要求5所述的摘要视频的生成方法...

【专利技术属性】
技术研发人员:刘钊
申请(专利权)人:中国平安人寿保险股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1