多媒体文件推荐方法、装置、设备及存储介质制造方法及图纸

技术编号:37972698 阅读:17 留言:0更新日期:2023-06-30 09:48
本发明专利技术涉及数据处理技术领域,公开了一种多媒体文件推荐方法、装置、设备及存储介质,所述方法包括:在检测到当前多媒体文件进行展示时,获取当前多媒体文件的文本信息;将文本信息分别与多个待选取多媒体文件对应的图像特征信息进行比对,以获得视频相似特征信息;根据视频相似特征信息从多个待选取多媒体文件中选取待推荐多媒体文件。相较于现有技术中根据检索词与视频周边的描述文本进行匹配,得到与检索词相匹配的视频,而本发明专利技术中需要将当前多媒体文件的文本信息与待选取多媒体文件对应的图像特征信息进行比对,根据比对结果确定待推荐多媒体文件,从而提高了多媒体文件的匹配精准度。配精准度。配精准度。

【技术实现步骤摘要】
多媒体文件推荐方法、装置、设备及存储介质


[0001]本专利技术涉及数据处理
,尤其涉及一种多媒体文件推荐方法、装置、设备及存储介质。

技术介绍

[0002]目前,在搜索任务中进行多媒体文件检索时最常见的方法是基于多媒体文件周边文本进行的,即根据检索词与多媒体文件周边的描述文本进行匹配,得到与检索词相匹配的多媒体文件。但是这种方式会出现周边文本与多媒体文件的实际内容不一定完全一致,另外,多媒体文件内的细节信息不一定能够覆盖,导致搜索到的多媒体文件不全或者有偏差,多媒体文件的匹配精准度低下。
[0003]上述内容仅用于辅助理解本专利技术的技术方案,并不代表承认上述内容是现有技术。

技术实现思路

[0004]本专利技术的主要目的在于提供了一种多媒体文件推荐方法、装置、设备及存储介质,旨在解决如何提高多媒体文件的匹配精准度的技术问题。
[0005]为实现上述目的,本专利技术提供了一种多媒体文件推荐方法,所述多媒体文件推荐方法包括以下步骤:
[0006]在检测到当前多媒体文件进行展示时,获取所述当前多媒体文本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多媒体文件推荐方法,其特征在于,所述多媒体文件推荐方法包括以下步骤:在检测到当前多媒体文件进行展示时,获取所述当前多媒体文件的文本信息;将所述文本信息分别与多个待选取多媒体文件对应的图像特征信息进行比对,以获得视频相似特征信息;根据所述视频相似特征信息从多个所述待选取多媒体文件中选取待推荐多媒体文件。2.如权利要求1所述的方法,其特征在于,所述将所述文本信息分别与多个待选取多媒体文件对应的图像特征信息进行比对,以获得视频相似特征信息的步骤,包括:将所述文本信息进行拆分,以获得多个文字信息;获取各待选取多媒体文件对应的多个视频帧;确定各视频帧对应的图像特征信息;将多个所述文字信息分别与多个图像特征信息进行比对,以获得视频相似特征信息。3.如权利要求2所述的方法,其特征在于,所述将多个所述文字信息分别与多个图像特征信息进行比对,以获得视频相似特征信息的步骤,包括:确定各文字信息之间的文本注意力信息;根据多个图像特征信息确定各视频帧之间的视频帧注意力信息;将多个所述文字信息分别与多个所述图像特征信息进行比对,获得各视频帧与各文字信息之间的跨模态注意力信息;根据所述文本注意力信息、所述视频帧注意力信息及所述跨模态注意力信息确定视频相似特征信息。4.如权利要求3所述的方法,其特征在于,所述根据所述文本注意力信息、所述视频帧注意力信息及所述跨模态注意力信息确定视频相似特征信息的步骤,包括:对所述文本注意力信息、所述视频帧注意力信息及所述跨模态注意力信息进行分类,获得文本注意力集和视频注意力集;根据所述文本注意力集和所述视频注意力集确定视频相似特征信息。5.如权利要求1

4任一项所述的方法,其特征在于,所述根据所述视频相似特征信息从多个所述待选取多媒体...

【专利技术属性】
技术研发人员:孔凡静
申请(专利权)人:北京奇虎科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1