基于嵌入的图像搜索检索制造技术

包括编码在计算机存储介质上的计算机程序的方法、系统和装置，用于使用嵌入神经网络模型来检索图像搜索结果。在一个方面，接收图像搜索查询。确定多个图像

【技术实现步骤摘要】
【国外来华专利技术】基于嵌入的图像搜索检索

技术介绍

[0001]本说明书通常涉及检索图像搜索结果。
[0002]在线搜索引擎通常响应于接收的搜索查询来检索候选资源(例如，图像)，以呈现识别出响应于该搜索查询的资源的搜索结果。搜索引擎通常通过基于术语的检索系统来检索搜索结果，该检索系统基于搜索查询的关键词来识别搜索结果。搜索引擎可以基于各种因素来检索资源。
[0003]一些传统的图像搜索引擎，即，被配置为在着陆页上(例如，在因特网上的网页上)识别图像的搜索引擎，响应于接收的搜索查询，从i)图像的特征和ii)着陆页的特征中生成单独的信号，然后根据对于每个接收的搜索查询相同的固定加权方案来组合单独的信号。

技术实现思路

[0004]本说明书描述了使用经训练的嵌入神经网络模型响应于图像搜索查询来检索图像搜索结果的技术。
[0005]在一方面，接收图像搜索查询；确定多个图像
‑
着陆页对中的每一个的相应成对数值嵌入，每个图像
‑
着陆页对包括相应图像和相应图像的相应着陆页，其中每个成对数值嵌入是嵌入空间中的数值表示；使用图像搜本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：接收图像搜索查询；确定多个图像
‑
着陆页对中的每一个的相应成对数值嵌入，每个图像
‑
着陆页对包括相应图像和所述相应图像的相应着陆页，其中每个成对数值嵌入是嵌入空间中的数值表示；使用图像搜索查询嵌入神经网络处理所述图像搜索查询的特征，以生成所述图像搜索查询的查询数值嵌入，并且其中所述查询数值嵌入是相同嵌入空间中的数值表示；以及将图像搜索结果识别为所述图像搜索查询的第一候选图像搜索结果，所述图像搜索结果识别具有在所述嵌入空间中最接近所述图像搜索查询的查询数值嵌入的成对数值嵌入的图像
‑
着陆页对的子集。2.根据权利要求1所述的方法，还包括：对包括所述第一候选图像搜索结果的至少一些的多个第二候选图像搜索结果进行排名；生成显示根据所述排名排序的第二候选图像搜索结果的图像搜索结果呈现；以及提供所述图像搜索结果呈现用于用户设备呈现。3.根据任一前述权利要求所述的方法，其中确定多个图像
‑
着陆页对中的每一个的相应成对数值嵌入包括：使用成对嵌入神经网络访问索引数据库，所述索引数据库将图像
‑
着陆页对与已经为所述图像
‑
着陆页对生成的相应成对数值嵌入相关联。4.根据权利要求1或2中任一项所述的方法，其中确定多个图像
‑
着陆页对中的每一个的相应成对数值嵌入包括：使用成对嵌入神经网络处理每个图像
‑
着陆页对的特征，以生成所述图像
‑
着陆页对的相应成对数值嵌入。5.根据权利要求3或4中任一项所述的方法，其中所述成对嵌入神经网络和所述图像搜索查询嵌入神经网络已经被联合训练。6.根据权利要求5所述的方法，其中所述成对嵌入神经网络和所述图像搜索查询嵌入神经网络已经被联合训练，以最小化依赖于(i)训练图像搜索查询的查询数值嵌入和(ii)训练图像
‑
着陆页对的成对数值嵌入之间的点积的损失函数。7.根据权利要求6所述的方法，其中所述损失函数促使(i)训练图像搜索查询的查询数值嵌入和(ii)训练图像
‑
着陆页对的成对数值嵌入之间的点...

【专利技术属性】
技术研发人员：SK巴苏，W尹，W范，D格拉斯纳，S蒂鲁马拉雷迪，TR斯特罗曼，S弗马，MA帕塔克，S卡兰杰卡，
申请(专利权)人：谷歌有限责任公司，
类型：发明
国别省市：