图像检索方法、图像检索装置和电子设备制造方法及图纸

本公开提供了一种图像检索方法、图像检索装置和电子设备，可用于人工智能领域、金融领域或其他领域，该方法包括：获取图像检索指令，图像检索指令包括关键词；响应于图像检索指令，基于关键词遍历用户标签集合，得到与关键词相匹配的图像标识的标识集合，用户标签集合包括标签以及标签和图像标识之间的映射关系；以及从图像集合中确定与标识集合相匹配的图像，并且输出至少部分相匹配的图像。

【技术实现步骤摘要】
图像检索方法、图像检索装置和电子设备
本公开涉及人工智能
、金融领域，更具体地，涉及一种图像检索方法、图像检索装置和电子设备。
技术介绍
相关技术中图像相册主要以时间、拍照地点、拍照类型等维度对用户存储的图像进行分类存储，以便于用户快速地查找到所需的图像。在实现本公开构思的过程中，申请人发现相关技术中至少存在如下问题，随着用户存储的图像不断增长，时间跨度越来越大，图像涉及的分类越来越多，导致用户无法便捷地从图像相册中找到所需的图像。
技术实现思路
有鉴于此，本公开提供一种图像检索方法、图像检索装置和电子设备，至少部分地解决用户无法便捷地从图像相册中找到所需图像的问题，以提升用户体验。本公开的一个方面提供了一种图像检索方法、图像检索装置和电子设备，以至少部分解决图像融合任务中，因无标注的融合图像造成的网络训练困难，并且降低对人为设计融合规则的依赖，以提高网络的融合性能。本公开的一个方面提供了一种图像检索方法，包括：获取图像检索指令，图像检索指令包括关键词；响应于图像检索指令，基于关键词遍历用户标签本文档来自技高网...

【技术保护点】
1.一种图像检索方法，包括：/n获取图像检索指令，所述图像检索指令包括关键词；/n响应于所述图像检索指令，基于所述关键词遍历用户标签集合，得到与所述关键词相匹配的图像标识的标识集合，所述用户标签集合包括标签以及标签和图像标识之间的映射关系；以及/n从图像集合中确定与所述标识集合相匹配的图像，并且输出至少部分所述相匹配的图像。/n

【技术特征摘要】
1.一种图像检索方法，包括：
获取图像检索指令，所述图像检索指令包括关键词；
响应于所述图像检索指令，基于所述关键词遍历用户标签集合，得到与所述关键词相匹配的图像标识的标识集合，所述用户标签集合包括标签以及标签和图像标识之间的映射关系；以及
从图像集合中确定与所述标识集合相匹配的图像，并且输出至少部分所述相匹配的图像。


2.根据权利要求1所述的方法，还包括：
获取输入图像，所述输入图像具有属性信息；
获取针对所述输入图像的描述性文本；
从所述描述性文本中提取关键词；
将所述属性信息和所述关键词作为所述输入图像的标签；以及
基于所述输入图像的图像标识和标签构建所述用户标签集合，或者更新所述用户标签集合。


3.根据权利要求2所述的方法，其中，所述获取针对所述输入图像的描述性文本包括：
利用经训练的描述性文本获取模型处理所述输入图像，得到所述输入图像的描述性文本，所述描述性文本获取模型包括神经网络。


4.根据权利要求3所述的方法，其中，所述神经网络包括多层感知器、自注意力机制网络和长短时记忆网络，其中，
所述长短时记忆网络用于将已生成文本的第一历史信息和第二历史信息传输给所述自注意力机制网络，并且将所述已生成文本的第二历史信息传输给所述多层感知器；
所述自注意力机制网络用于基于所述第一历史信息的第一权重、输入的至少两个局部图像特征各自的第二权重，对所述第一历史信息和所述至少两个局部图像特征进行加权融合，得到上下文向量，并且输出给所述多层感知器，所述第一权重和所述第二权重是所述自注意力机制网络使用所述已生成文本的第二历史信息作为监督信息，基于自注意力机制来确定的，所述至少两个局部图像特征表征视觉信息；以及
所述多层感知器用于基于所述上下文向量和所述已生成文本的第二历史信息生成所述输入图像的描述性文本。


5.根据权利要求4所述的方法，其中，所述自注意力机制网络包括针对至少两个局部图像特征各自的分支网络和针对所述已生成文本的第一历史信息的分支网络。


6.根据权利要求1所述的方法，还包括：在所述获取图像检索指令...

【专利技术属性】
技术研发人员：郭志军，罗涛，施佳子，于海燕，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：北京;11