跨模态检索方法、装置、设备及存储介质制造方法及图纸

本发明专利技术公开了一种跨模态检索方法、装置、设备及存储介质，属于互联网技术领域，所述方法包括：在接收到跨模态检索指令时，根据所述跨模态检索指令确定第一信息和第二信息，所述第一信息与所述第二信息为不同模态的信息；获取所述第一信息与所述第二信息之间的相似度，所述相似度根据所述第一信息和所述第二信息对应的特征确定；根据所述相似度确定跨模态检索结果。本方案可以根据不同模态的第一信息和第二信息对应的特征，来确定第一信息与第二信息之间的相似度，然后根据相似度来确定跨模态检索结果，从而可以在高效率的前提下，提升跨模态检索的精度。模态检索的精度。模态检索的精度。

【技术实现步骤摘要】
跨模态检索方法、装置、设备及存储介质


[0001]本专利技术涉及互联网
，尤其涉及一种跨模态检索方法、装置、设备及存储介质。

技术介绍

[0002]跨模态检索在跨模态领域中是最基础任务，在互联网被广泛应用于搜索相关的业务。常见的跨模态检索方式，在实际使用中，要么是精度高但存在效率较低的问题，要么是效率高但存在精度较低的问题。
[0003]上述内容仅用于辅助理解本专利技术的技术方案，并不代表承认上述内容是现有技术。

技术实现思路

[0004]本专利技术的主要目的在于提出一种跨模态检索方法、装置、设备及存储介质，旨在解决如何在高效率的前提下，提升跨模态检索的精度的技术问题。
[0005]为实现上述目的，本专利技术提供一种跨模态检索方法，所述跨模态检索方法包括：
[0006]此外，为实现上述目的，本专利技术还提出一种跨模态检索装置，所述跨模态检索装置包括：
[0007]在接收到跨模态检索指令时，根据所述跨模态检索指令确定第一信息和第二信息，所述第一信息与所述第二信息为不同模态的信息；
[0本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种跨模态检索方法，其特征在于，所述跨模态检索方法包括：在接收到跨模态检索指令时，根据所述跨模态检索指令确定第一信息和第二信息，所述第一信息与所述第二信息为不同模态的信息；获取所述第一信息与所述第二信息之间的相似度，所述相似度根据所述第一信息和所述第二信息对应的特征确定；根据所述相似度确定跨模态检索结果。2.如权利要求1所述的跨模态检索方法，其特征在于，所述获取所述第一信息与所述第二信息之间的相似度，包括：分别对所述第一信息与所述第二信息进行特征提取，得到第一特征和第二特征；根据所述第一特征和所述第二特征确定所述第一信息与所述第二信息之间的相似度。3.如权利要求2所述的跨模态检索方法，其特征在于，所述分别对所述第一信息与所述第二信息进行特征提取，得到第一特征和第二特征，包括：对所述第一信息进行特征提取，得到所述第一信息对应的第一特征；对所述第二信息进行特征提取，得到所述第二信息对应的第二特征。4.如权利要求3所述的跨模态检索方法，其特征在于，所述第一信息为文本形式的信息；所述对所述第一信息进行特征提取，得到所述第一信息对应的第一特征，包括：通过预设文本编码模型对所述第一信息进行特征提取，得到所述第一信息对应的文本特征；将所述文本特征作为第一特征。5.如权利要求3所述的跨模态检索方法，其特征在于，所述第二信息为图像形式的信息；所述对所述第二信息进行特征提取，得到所述第二信息对应的第二特征，包括：通过预设图像编码模型对所述第二信息进行特征提取，得到所述第二信息对应的图像特征；将所述图像特征作为第二特征。6.如权...

【专利技术属性】
技术研发人员：谢春宇，
申请(专利权)人：北京奇虎科技有限公司，
类型：发明
国别省市：