一种处理方法、装置、终端设备及介质制造方法及图纸

技术编号:34016882 阅读:9 留言:0更新日期:2022-07-02 15:58
本公开公开了一种处理方法、装置、终端设备及介质,所述方法包括:获取目标视频和所述目标视频对应的视频描述信息;确定所述目标视频的主体物体信息;确定所述视频描述信息的关键帧类别;将所述目标视频、所述视频描述信息、所述主体物体信息和所述关键帧类别输入至处理模型,得到所述目标视频中与所述视频描述信息对应的图片的时间戳。利用该方法,能够根据目标视频确定主体物体信息和关键帧类别,从而通过主体物体信息和关键帧类别来辅助处理视频进行处理,使得在将视频描述信息和目标视频输入处理模型后,所输出的时间戳的准确度得到了提高。了提高。了提高。

【技术实现步骤摘要】
一种处理方法、装置、终端设备及介质


[0001]本公开实施例涉及计算机
,尤其涉及一种处理方法、装置、终端设备及介质。

技术介绍

[0002]视频结构化是指提取并呈现视频中有价值的信息,以提高视频信息获取效率的任务,如,视频高光提取与时刻定位为从视频中摘取一段短的精彩片段或视频帧,用以概括视频的重要信息。
[0003]目前视频高光提取和时刻定位的技术主要对视频内的视觉特征进行分析,从而确定出的高光帧准确度较差。

技术实现思路

[0004]本公开实施例提供了一种处理方法、装置、终端设备及介质,提高了高光帧确定的准确度。
[0005]第一方面,本公开实施例提供了一种处理方法,包括:
[0006]获取目标视频和所述目标视频对应的视频描述信息;
[0007]确定所述目标视频的主体物体信息;
[0008]确定所述视频描述信息的关键帧类别;
[0009]将所述目标视频、所述视频描述信息、所述主体物体信息和所述关键帧类别输入至处理模型,得到所述目标视频中与所述视频描述信息对应的图片的时间戳。
[0010]第二方面,本公开实施例还提供了一种处理装置,包括:
[0011]获取模块,用于获取目标视频和所述目标视频对应的视频描述信息;
[0012]第一确定模块,用于确定所述目标视频的主体物体信息;
[0013]第二确定模块,用于确定所述视频描述信息的关键帧类别;
[0014]输入模块,用于将所述目标视频、所述视频描述信息、所述主体物体信息和所述关键帧类别输入至处理模型,得到所述目标视频中与所述视频描述信息对应的图片的时间戳。
[0015]第三方面,本公开实施例还提供了一种终端设备,包括:
[0016]一个或多个处理器;
[0017]存储装置,用于存储一个或多个程序;
[0018]所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实处理公开实施例提供的处理方法。
[0019]第四方面,本公开实施例还提供了一种计算机可读介质,其上存储有计算机程序,该程序被处理器执行时实现本公开实施例提供的处理方法。
[0020]本公开实施例提供了一种处理方法、装置、终端设备及介质,所述方法包括:获取目标视频和所述目标视频对应的视频描述信息;确定所述目标视频的主体物体信息;确定
所述视频描述信息的关键帧类别;将所述目标视频、所述视频描述信息、所述主体物体信息和所述关键帧类别输入至处理模型,得到所述目标视频中与所述视频描述信息对应的图片的时间戳。利用上述技术方案,能够根据目标视频确定主体物体信息和关键帧类别,从而通过主体物体信息和关键帧类别来辅助处理视频进行处理,使得在将视频描述信息和目标视频输入处理模型后,所输出的时间戳的准确度得到了提高。
附图说明
[0021]结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
[0022]图1为本公开实施例一提供的一种处理方法的流程示意图;
[0023]图2为本公开实施例二提供的一种处理方法的流程示意图;
[0024]图3为本公开实施例二提供的一种处理方法的流程示意图;
[0025]图4为本公开实施例三提供的一种处理装置的结构示意图;
[0026]图5为本公开实施例四提供的一种终端设备的结构示意图。
具体实施方式
[0027]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
[0028]应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
[0029]本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0030]需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0031]需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
[0032]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
[0033]下述各实施例中,每个实施例中同时提供了可选特征和示例,实施例中记载的各个特征可进行组合,形成多个可选方案,不应将每个编号的实施例仅视为一个技术方案。此外,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。
[0034]实施例一
[0035]图1为本公开实施例一提供的一种处理方法的流程示意图,该方法可适用于对视
频进行处理的情况,该方法可以由处理装置来执行,其中该装置可由软件和/或硬件实现,并一般集成在终端设备上,在本实施例中终端设备包括但不限于:计算机、笔记本电脑、平板电脑和/或手机等设备。
[0036]如图1所示,本公开实施例一提供的一种处理方法,包括如下步骤:
[0037]S110、获取目标视频和所述目标视频对应的视频描述信息。
[0038]其中,目标视频可以是指待处理的视频,如待进行高光帧或高光片段分析的视频。高光帧可以认为是能够反映视频中重要信息的视频帧。高光片段可以认为是反映视频中重要信息的视频片段。目标视频可以为原始视频,也可以为原始视频中某个视频片段,原始视频可以为原始待处理的视频,如拍摄完且未经编辑的视频或拍摄后进行初步加工(如裁剪、添加标题、字幕等)后的视频等。视频片段可以为对原始视频进行章节划分后的片段,又称视频切片。视频描述信息可以理解为目标视频的简要描述,用于表征目标视频的主要内容。
[0039]在本实施例中,可以获取目标视频和目标视频对应的视频描述信息以进行后续的处理。本实施例不对获取目标视频和视频描述信息的方式进行限制,如该处理方法可以应用至视频展示类应用程序,目标视频可以为从服务端获取的原始视频,也可以为将包含多个视频片段的整个原始视频裁剪成某个视频片段的视频;视频描述信息可以基于目标视频中出现的文本和/或图像分析得到,本实施例对此不作限定。
[00本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种处理方法,其特征在于,所述方法包括:获取目标视频和所述目标视频对应的视频描述信息;确定所述目标视频的主体物体信息;确定所述视频描述信息的关键帧类别;将所述目标视频、所述视频描述信息、所述主体物体信息和所述关键帧类别输入至处理模型,得到所述目标视频中与所述视频描述信息对应的图片的时间戳。2.根据权利要求1所述的方法,其特征在于,所述将所述目标视频、所述视频描述信息、所述主体物体信息和所述关键帧类别输入至处理模型,得到所述目标视频中与所述视频描述信息对应的图片的时间戳,包括:将所述目标视频输入至所述处理模型内的第一信息提取模块,得到对应的图像信息和第一文本信息;将所述视频描述信息输入至所述处理模型内的第二信息提取模块,得到对应的第二文本信息;将所述主体物体信息、所述图像信息、所述第一文本信息、所述第二文本信息和所述关键帧类别输入至所述处理模型内的检索模块,得到所述目标视频中与所述视频描述信息对应的图片的时间戳。3.根据权利要求2所述的方法,其特征在于,所述将所述目标视频输入至所述处理模型内的第一信息提取模块,得到对应的图像信息和第一文本信息,包括:将所述目标视频输入至所述处理模型内的第一信息提取模块后,通过稀疏抽帧得到所述目标视频的第一目标对象;对所述第一目标对象进行图像信息提取,得到对应的图像信息;提取所述目标视频的字幕信息;对所述字幕信息进行文本信息提取,得到对应的第一文本信息。4.根据权利要求2所述的方法,其特征在于,所述将所述主体物体信息、所述图像信息、所述第一文本信息、所述第二文本信息和所述关键帧类别输入至所述处理模型内的检索模块,得到所述目标视频中与所述视频描述信息对应的...

【专利技术属性】
技术研发人员:袁野王宇飞文珑银
申请(专利权)人:脸萌有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1