视频查询方法、装置及电子设备制造方法及图纸

技术编号:41142006 阅读:22 留言:0更新日期:2024-04-30 18:11
本申请实施例提供了一种视频查询方法、装置、电子设备及存储介质,涉及视频处理技术领域,其中,所述方法包括:获取待分析的视频数据、视频数据的类型文本;对视频数据进行属性识别,确定视频数据的属性文本;基于视频数据、属性文本和类型文本,提取视频数据的第一特征、属性文本的第二特征和类型文本的第三特征;基于第一特征、第二特征和第三特征,训练跨模态查询模型,以依据训练好的跨模态查询模型进行视频查询。本申请提供的视频查询方法能够有效地提升模型的训练效果。

【技术实现步骤摘要】

本申请涉及视频处理,具体而言,本申请涉及一种视频查询方法、装置及电子设备


技术介绍

1、现有的视频查询方式通常是根据跨模态查询模型进行查询,比如,用户可以输入查询文本,通过跨模态查询模型来提取查询文本的文本特征,并进行跨模态匹配,确定对应的视频特征,从而筛选到符合要求的视频。

2、但是,现有的跨模态查询模型只能利用预先标注好文本与视频的对应关系的数据来进行模型训练,对模型的训练效果差。


技术实现思路

1、本申请各实施例提供了一种视频查询方法、装置及网络设备,可以提升模型的训练效果。

2、所述技术方案如下:

3、第一方面,本申请提供了一种视频查询方法,所述方法包括:获取待分析的视频数据、视频数据的类型文本;对视频数据进行属性识别,确定视频数据的属性文本;基于视频数据、属性文本和类型文本,提取视频数据的第一特征、属性文本的第二特征和类型文本的第三特征;基于第一特征、第二特征和第三特征,训练跨模态查询模型,以依据训练好的跨模态查询模型进行视频查询。

<p>4、优选的,所述本文档来自技高网...

【技术保护点】

1.一种视频查询方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于第一特征、第二特征和第三特征,训练跨模态查询模型,包括:

3.根据权利要求2所述的方法,其特征在于,提取视频数据的第一特征的步骤,包括:

4.根据权利要求3所述的方法,其特征在于,所述依据视频帧的帧特征和视频数据对应的类型文本,确定各视频帧的时间显著性,包括:

5.根据权利要求1所述的方法,其特征在于,所述对视频数据进行属性识别,确定视频数据的属性文本,包括:

6.根据权利要求5所述的方法,其特征在于,所述获取视频数据各视频帧的帧...

【技术特征摘要】

1.一种视频查询方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于第一特征、第二特征和第三特征,训练跨模态查询模型,包括:

3.根据权利要求2所述的方法,其特征在于,提取视频数据的第一特征的步骤,包括:

4.根据权利要求3所述的方法,其特征在于,所述依据视频帧的帧特征和视频数据对应的类型文本,确定各视频帧的时间显著性,包括:

5.根据权利要求1所述的方法,其特征在于,所述对视频数据进行属性识别,确定视频...

【专利技术属性】
技术研发人员:陈世峰罗海鹏
申请(专利权)人:深圳先进技术研究院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1