用于有助于基于内容的图像检索的方法和装置制造方法及图纸

提供用于有助于基于内容的图像检索的方法和装置。一种方法可以包括确定选择的目标图像。该方法还可以包括生成候选兴趣区域集，候选兴趣区域集包括目标图像内的一个或者多个兴趣区域。该方法还可以包括确定推荐兴趣区域集，推荐兴趣区域集包括至少部分基于评估标准从候选兴趣区域集选择的一个或者多个推荐兴趣区域。可以至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定评估标准。该方法也可以包括提供推荐的兴趣区域集以用于用户从推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索一个或者多个结果图像的查询标准。也提供对应装置。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术的实施例总体上涉及图像管理技术并且更具体地涉及用于有助于基于内容的图像检索的方法和装置。
技术介绍
现代计算时代已经带来计算设备的功率和存储容量的巨大扩展。许多计算设备现在包括用于存储、查看和操纵大量高分辨率数字图像的充分功率和存储容量。此外，无线和有线联网以及网络连接速度的扩展允许用户访问通过网络远程存储的大型图像库。也已经明显提高数字相机能力以允许用户捕获利用现代计算设备的扩展功率和存储容量的高分辨率图像。另外，许多移动消费电子设备(比如移动电话)现在包括允许用户容易捕获和存储数字图像的集成数字相机。 因而越来越多的人在他们的日常生活中高频率使用包括数字相机的电子设备。因此，计算设备产生的数字图像的数量和多样性近年来已经大量增加并且有望在将来的数年内继续明显增加。一些图像管理技术已经尝试有助于管理用户存储和/或可访问的大量数字图像。图像管理中的关键技术之一是图像检索。图像检索功能是向用户提供与他的请求有关的图像。
技术实现思路
这里提供用于有助于图像管理并且更具体地用于有助于基于内容的图像检索的方法、装置和计算机程序产品。就这一点而言，提供可以向计算设备和计算设备用户提供若干优点的系统、方法、装置和计算机程序产品。本专利技术的实施例在所选目标图像内提供自动生成的推荐兴趣区域(ROI)。推荐ROI允许用户更便利和快速地选择目标图像内的一个或者多个ROI以指定为用于检索有关图像的查询标准。此外，使用自动推荐的ROI可以提高搜索速度和搜索结果准确度。本专利技术的一些实施例允许用户选择跨越多个不同目标图像的多个ROI作为用于单个图像检索搜索的查询标准。本专利技术的这样的实施例允许用户更完全构造查询标准并且提供在目标图像均未包括用户想要检索的图像包括的每个ROI要素时的实例中生成更相关的搜索结果集。本专利技术的一些实施例提供如下基于ROI的搜索历史分析功能，该功能被配置成学习用户输入模式并且确定关于搜索结果的反馈以实现定制和更佳搜索结果。在这样的实施例中利用基于ROI的搜索历史功能以改进ROI推荐和/或搜索结果。本专利技术的一些实施例确定有意义的反馈而不是仅确定结果图像是否与可以改进搜索历史分析功能的查询标准有关。就这一点而言，本专利技术的一些实施例确定关于ROI等级的反馈，使得可以关于结果图像是否与作为搜索标准的组成而选择的每个个别目标ROI有关而确定反馈。可以在后续步骤中使用这一反馈以改进搜索结果。在第一不例实施例中，提供一种方法，该方法包括确定选择的目标图像。这一实施例的方法还包括生成候选兴趣区域集。这一实施例的候选兴趣区域集包括目标图像内的一个或者多个兴趣区域。这一实施例的方法还包括确定推荐兴趣区域集。这一实施例的推荐兴趣区域集包括至少部分基于评估标准从候选兴趣区域集选择的一个或者多个推荐兴趣区域，这一实施例的评估标准至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定。这一实施例的方法也包括提供推荐的兴趣区域集以用于用户从推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索一个或者多个结果图像的查询标准。在另一示例实施例中，提供一种装置。这一实施例的装置包括至少一个处理器和至少一个存储器的装置，至少一个存储器存储计算机程序代码，其中至少一个存储器和存储的计算机程序代码被配置成与至少一个处理器一起使装置至少确定选择的目标图像。至少一个存储器和存储的计算机程序代码被配置成与至少一个处理器一起还使这一实施例的装置生成候选兴趣区域集。这一实施例的候选兴趣区域集包括目标图像内的一个或者多个兴趣区域。至少一个存储器和存储的计算机程序代码被配置 成与至少一个处理器一起还使这一实施例的装置确定推荐兴趣区域集。这一实施例的推荐兴趣区域集包括至少部分基于评估标准从候选兴趣区域集选择的一个或者多个推荐兴趣区域，这一实施例的评估标准至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定。至少一个存储器和存储的计算机程序代码被配置成与至少一个处理器一起也使这一实施例的装置提供推荐的兴趣区域集以用于用户从推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索一个或者多个结果图像的查询标准。在另一示例实施例中，提供一种计算机程序产品。这一实施例的计算机程序产品包括至少一个计算机可读存储介质，至少一个计算机可读存储介质具有存储于其中的计算机可读程序指令。这一实施例的程序指令包括配置成确定选择的目标图像的程序指令。这一实施例的程序指令还包括配置成生成候选兴趣区域集的程序指令。这一实施例的候选兴趣区域集包括目标图像内的一个或者多个兴趣区域。这一实施例的程序指令还包括配置成确定推荐兴趣区域集的程序指令。这一实施例的推荐兴趣区域集包括至少部分基于评估标准从候选兴趣区域集选择的一个或者多个推荐兴趣区域，这一实施例的评估标准至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定。这一实施例的程序指令也包括配置成提供推荐的兴趣区域集以用于用户从推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索一个或者多个结果图像的查询标准的程序指令。在另一示例实施例中，提供一种装置，该装置包括用于确定选择的目标图像的装置。这一实施例的装置还包括用于生成候选兴趣区域集的装置。这一实施例的候选兴趣区域集包括目标图像内的一个或者多个兴趣区域。这一实施例的装置还包括用于确定推荐兴趣区域集的装置。这一实施例的推荐兴趣区域集包括至少部分基于评估标准从候选兴趣区域集选择的一个或者多个推荐兴趣区域，这一实施例的评估标准至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定。这一实施例的装置也包括用于提供推荐的兴趣区域集以用于用户从推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索一个或者多个结果图像的查询标准的装置。在另一示例实施例中，提供一种承载有计算机可读程序指令的计算机可读存储介质。计算机可读程序指令包括配置成确定选择的目标图像的程序指令。计算机可读程序指令还包括配置成生成候选兴趣区域集的程序指令，候选兴趣区域集包括目标图像内的一个或者多个兴趣区域。计算机可读程序指令还包括配置成确定推荐兴趣区域集的程序指令，推荐兴趣区域集包括至少部分基于评估标准从候选兴趣区域集选择的一个或者多个推荐兴趣区域，评估标准至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定。计算机可读程序指令也包括配置成提供推荐的兴趣区域集以用于用户从推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索一个或者多个结果图像的查询标准的程序指令。提供上述
技术实现思路
仅为了概括本专利技术的一些示例实施例以便提供对本专利技术一些方面的基本理解。因而将理解上文描述的示例实施例仅为示例而不应解释为以任何方式缩小本专利技术的范围或者精神实质。将理解本专利技术的范围除了这里概括的实施例之外还涵盖下文将进一步描述的许多潜在实施例。附图说明已经这样以一般性术语描述本专利技术的实施例，现在将参照未必按比例绘制的以下附图 图I图示了根据本专利技术一个示例实施例的用于有助于基于内容的图像检索的图像检索装置的框图；图2是根据本专利技术一个示例实施例的移动终端的示意框图；图3图示了根据本专利技术一个示例实施例的用于从目标图像选择一个或者多个目标ROI的示例用户接口的一系列图像；图4图示了根据本专利技术一个示例实施本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括 确定选择的目标图像； 生成候选兴趣区域集，所述候选兴趣区域集包括所述目标图像内的一个或者多个兴趣区域； 确定推荐兴趣区域集，所述推荐兴趣区域集包括至少部分基于评估标准从所述候选兴趣区域集选择的一个或者多个推荐兴趣区域，所述评估标准至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定；以及 提供所述推荐兴趣区域集以用于用户从所述推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索搜寻一个或者多个结果图像的查询标准。2.根据权利要求I所述的方法，其中确定所述推荐兴趣区域集包括 使用所述评估标准为所述候选兴趣区域集中的每个候选兴趣区域计算推荐分数；以及 至少部分基于计算的推荐分数从所述候选兴趣区域集确定一个或者多个推荐兴趣区域。3.根据权利要求1-2中的任一权利要求所述的方法，其中所述维护的基于兴趣区域的搜索历史包括以下各项中的一项或者多项历史 先前推荐兴趣区域； 先前作为目标兴趣区域而选择的兴趣区域； 在作为查询标准而选择的目标兴趣区域与对应搜索结果图像之间的历史关系；或者关于先前搜索结果图像的反馈，所述反馈指示在所述搜索结果图像与用来标识所述搜索结果图像的对应查询标准之间的对应关系。4.根据权利要求1-3中的任一权利要求所述的方法，还包括 确定选择所述选择的目标图像内的一个或者多个目标兴趣区域作为查询标准； 搜索所述图像库的至少部分以标识与所述查询标准对应的结果图像； 向所述用户提供标识的结果图像； 确定关于所述标识的结果图像的反馈，所述反馈包括对所述标识的结果图像是否与选择的目标兴趣区域有关的指示；以及 更新所述基于兴趣区域的搜索历史以包括关于所述反馈的信息。5.根据权利要求4所述的方法，还包括更新所述基于兴趣区域的搜索历史以包括以下信息中的一条或者多条信息 关于所述标识的结果图像和所述选择的一个或者多个目标兴趣区域的信息；或者关于在所述标识的结果图像与所述选择的一个或者多个目标兴趣区域之间的关系的信息。6.根据权利要求4-5中的任一权利要求所述的方法，其中搜索所述图像库的所述至少部分包括搜索所述图像库的至少部分以标识与所述查询标准对应的多个结果图像；并且还包括 通过滤除从所述维护的基于兴趣区域的搜索历史已知的未与选择的目标兴趣区域有关的任何结果图像，来至少部分基于所述维护的基于兴趣区域的搜索历史以过滤所述多个结果图像。7.根据权利要求4-6中的任一权利要求所述的方法，其中搜索所述图像库的所述至少部分包括 确定用于选择的目标兴趣区域的兴趣区域类； 分析所述维护的基于兴趣区域的搜索历史以确定所述图像库内的图像，已知该图像包括具有所述确定的兴趣区域类的兴趣区域；以及 搜索确定的图像以标识与所述查询标准对应的结果图像。8.根据权利要求4-7中的任一权利要求所述的方法，还包括 确定第二选择的目标图像；以及 在搜索所述图像库的所述至少部分之前确定对所述第二选择的目标图像内的一个或者多个目标兴趣区域的选择，其中所述查询标准还包括从所述第二选择的目标图像选择的所述一个或者多个目标兴趣区域。9.一种包括至少一个处理器和至少一个存储器的装置，所述至少一个存储器存储计算机程序代码，其中所述至少一个存储器和存储的计算机程序代码被配置成与所述至少一个处理器一起使得所述装置至少 确定选择的目标图像； 生成候选兴趣区域集，所述候选兴趣区域集包括所述目标图像内的一个或者多个兴趣区域； 确定推荐兴趣区域集，所述推荐兴趣区域集包括至少部分基于评估标准从所述候选兴趣区域集选择的一个或者多个推荐兴趣区域，所述评估标准至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定；以及 提供所述推荐兴趣区域集以用于用户从所述推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索一个或者多个结果图像的查询标准。10.根据权利要求9所述的装置，其中所述至少一个存储器和存储的计算机程序代码被配置成与所述至少一个处理器一起使得所述装置至少部分通过以下操作来确定所述推荐兴趣区域集 使用所述评估标准为所述候选兴趣区域集中的每个候选兴趣区域计算推荐分数；以及 至少部分基于计算的推荐分数从所述候选兴趣区域集确定一个或者多个推荐兴趣区域。11.根据权利要求9-10中的任一权利要求所述的装置，其中所述维护的基于兴趣区域的搜索历史包括以下各项中的一项或者多项历史 先前推荐兴趣区域； 先前作为目标兴趣区域而选择的兴趣区域； 在作为查询标准而选择的目标兴趣区域与对应搜索结果图像之间的历史关系；或者关于先前搜索结果图像的反馈，所述反馈指示在所述搜索结果图像与用来标识所述搜索结果图像的对应查询标准之间的对应关系。12.根据权利要求9-11中的任一权利要求所述的装置，其中所述至少一个存储器和存储的计算机程序代码被配置成与所述至少一个处理器一起还使得所述装置 确定选择所述选择的目标图像内的一个或者多个目标兴趣区域作为查询标准； 搜索所述图像库的至少部分以标识与所述查询标准对应的结果图像； 向所述用户提供标识的结果图像；确定关于所述标识的结果图像的反馈，所述反馈包括对所述标识的结果图像是否与选择的目标兴趣区域有关的指示；以及 更新所述基于兴趣区域的搜索历史以包括关于所述反馈的信息。13.根据权利要求12所述的装置，其中所述至少一个存储器和存储的计算机程序代码被配置成与所述至少一个处理器一起还使得所述装置更新所述基于兴趣区域的搜索历史以包括以下信息中的一条或者多条信息 关于所述标识的结果图像和所述选择的一个或者多个目标兴趣区域的信息；或者 关于在所述标识的结果图像与所述选择的一个或者多个目标兴趣区域之间的关系的信息。14.根据权利要求12-13中的任一权利要求所述的装置，其中所述至少一个存储器和存储的计算机程序代码被配置成与所述至少一个处理器一起使得所述装置通过搜索所述图像库的至少部分以标识与所述查询标准对应的多个结果图像来搜索所述图像库的所述至少部分；并且其中所述至少一个存储器和存储的计算机程序代码被配置成与所述至少一个处理器一起还使得所述装置 通过滤除从所述维护的基于兴趣区域的搜索历史已知的未与选择的目标兴趣区域有关的任何结果图像，来至少部分基于所述维护的基于兴趣区域的搜索历史以过滤所述多个结果图像。15.根据权利要求12-14中的任一权利要求所述的装置，其中所述至少一个存储器和存储的计算机程序代码被配置成与所述至少一个处理器一起使得所述装置至少部分通过以下操作来搜索所述图像库的所述至少部分 确定用于选择的目标兴趣区域的兴趣区域类； 分析所述维护的基于兴趣区域的搜索历史以确定所述图像库内的图像，已知该图像包括具有所述确定的兴趣区域类的兴趣区域；以及 搜索确定的图像以标识与所述查询标准对应的结果图像。16.根据权利要求12-15中的任一权利要求所述的装置，其中所述至少一个存储器和存储的计算机程序代码被配置成与所述至少一个处理器一起还使得所述装置 确定第二选择的目标图像；以及 在搜索所述图像库的所述至少部分之前确定对所述第二选择的目标图像内的一个或者多个目标兴趣区域的选择，其中所述查询标准还包括从所述第二选择的目标图像选择的所述一个或者多个目标兴趣区域。17.根据权利要求9-16中的任一权利要求所述的装置，其中所述装置包括移动电话或者实施于移动电话上，所述移动电话包括用户接口电路和在所述至少一个存储器中的一个或者多个存储器上存储的用户接口软件；其中所述用户接口电路和用户接口软件被配置成 通过使用显示器来有助于用户控制所述移动电话的至少一些功能；以及 使所述移动电话的用户接口的至少部分显示于所述显示器上以有助于用户控制所述移动电话的至少一些功能。18.一种计算机程序产品，包括至少一个计算机可读存储介质，所述至少一个计算机可读存储介质具有存储于其中的计算机可读程序指令，所述计算机可读程序指令包括配置成确定选择的目标图像的程序指令； 配置成生成候选兴趣区域集的程序指令，所述候选兴趣区域集包括所述目标图像内的 个或者多个兴趣区域； 配置成确定推荐兴趣区域集的程序指令，所述推荐兴趣区域集包括至少部分基于评估标准从所述候选兴趣区域集选择的一个或者多个推荐兴趣区域，所述评估标准至少部分基于对维护的基于兴趣区域的搜索历史的分析来确定；以及 配置成提供所述推荐兴趣区域集以用于用户从所述推荐兴趣区域集选择一个或者多个目标兴趣区域作为用于在图像库中搜索一个或者多个结果图像的查询标准的程序指令。19.根据权利要求18所述的计算机程序产品，其中所述配置成确定所述推荐兴趣区域集的程序指令包括 配置成使用所述评估标准为所述候选兴趣区域集中的每个候选兴趣区域计算推荐分数的程序指令；以及 配置成至少部分基于计算的推荐分数从所述候选兴趣区域集确定一个或者多个推荐兴趣区域的程序指令。20.根据权利要求18-19中的任一权利要求所述的计算机程序产品，其中所述维护的基于兴趣区域的搜索历史包括以下各项中的一项或者多项历史 先前推荐兴趣区域； 先前作为目标兴趣区域而选择的兴趣区域； 在作为查询标准而选择的目标兴趣区域与对应搜索结果图像之间的历史关系；或者关于先前搜索结果图像的反馈，所述反馈指示在所述搜索结果图像与用来标识所述搜索结果图像的对应查询标准之间的对应关系。21.根据权利要求18-20中的任一权利要求所述的计算机程序产品，还包括 配置成确定选择所述选择的目标图像内的一个或者多个...

【专利技术属性】
技术研发人员：赵峰，汪浩，
申请(专利权)人：诺基亚公司，
类型：发明
国别省市：