视频检索方法、装置、系统、电子设备及存储介质制造方法及图纸

技术编号:40657815 阅读:22 留言:0更新日期:2024-03-18 18:49
本发明专利技术提供一种视频检索方法、装置、系统、电子设备及存储介质,该方法包括:获取用户输入的视频检索信息;基于视频检索信息对视频标签信息库进行数据检索,确定与视频检索信息相匹配的目标标签信息,并确定目标标签信息对应的目标视频文件;视频标签信息库是基于对输入的多个视频文件的身份信息和每个视频文件的标签信息进行关联存储得到的;标签信息是通过将视频文件输入至预设的混合专家模型进行对象识别所确定的;混合专家模型包括多个用于执行不同视觉识别任务的专家模型。本发明专利技术可以在提升视频检索结果准确率的同时,也极大地减少了由人工查看视频带来的庞大工作量,大大提高了视频检索的效率,降低了开发成本。

【技术实现步骤摘要】

本专利技术涉及视频信息处理,尤其涉及一种视频检索方法、装置、系统、电子设备及存储介质


技术介绍

1、在高精度地图构建、目标识别、目标追踪、限界检测等与雷达、摄像头相关的感知功能开发过程中,会有大量人力和工作投入到视频数据集的构建和标注中。在此过程中,数据工程师或算法工程师需要根据不同的场景、环境条件、车辆条件和时间范围收集有效视频数据,反复进行数据的切分以及数据集之间的组合。

2、为了避免工程师对逐个视频文件进行人工查找及审查,需要有一种自动化的方式来提升此类工作的效率。对此,现有技术中出现了许多基于预训练模型实现自动检索视频文件的方案。然而,此类方案中设计预训练模型的过程非常复杂,现行多数预训练模型的参数量在亿级以上,训练过程需要庞大的云平台和显卡资源作为支撑,成本较高,同时,视频数据的检索效率也不高。


技术实现思路

1、本专利技术提供一种视频检索方法、装置、系统、电子设备及存储介质,用以解决现有技术中基于预训练模型的视频检索方案过程复杂,成本较高,同时,视频数据的检索效率也不高的缺陷。...

【技术保护点】

1.一种视频检索方法,其特征在于,包括:

2.根据权利要求1所述的视频检索方法,其特征在于,所述混合专家模型包括权重路由模型、多个特征提取器和多个专家模型;每个所述特征提取器对应处理一类视频文件;在所述基于所述视频检索信息对视频标签信息库进行数据检索之前,所述方法还包括:

3.根据权利要求2所述的视频检索方法,其特征在于,在所述将所述视频特征向量输入至所述权重路由模型之前,所述方法还包括:

4.根据权利要求3所述的视频检索方法,其特征在于,所述利用多组所述训练样本,对所述权重路由模型进行训练,包括:

5.根据权利要求4所述的视频检索方法,其...

【技术特征摘要】

1.一种视频检索方法,其特征在于,包括:

2.根据权利要求1所述的视频检索方法,其特征在于,所述混合专家模型包括权重路由模型、多个特征提取器和多个专家模型;每个所述特征提取器对应处理一类视频文件;在所述基于所述视频检索信息对视频标签信息库进行数据检索之前,所述方法还包括:

3.根据权利要求2所述的视频检索方法,其特征在于,在所述将所述视频特征向量输入至所述权重路由模型之前,所述方法还包括:

4.根据权利要求3所述的视频检索方法,其特征在于,所述利用多组所述训练样本,对所述权重路由模型进行训练,包括:

5.根据权利要求4所述的视频检索方法,其特征在于,所述预设损失函数是基于下述公式确定的:

6.根据权利要...

【专利技术属性】
技术研发人员:付哲张永增袁彬彬
申请(专利权)人:交控科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1