用于被凝视物品的信息显示的凝视交互制造技术

一种交互方法和系统，包括至少一个检测器（２１０），其被配置成检测看着物品（２３０，２３２，２３４）的至少一个观看者（２５０）的凝视。处理器（１３０）被配置成计算凝视持续时间，诸如按所述物品中每个物品的累计的凝视持续时间，根据累计的凝视持续时间来识别看得最多的物品，以及提供与看得最多的物品有关的信息。显示设备（２４０）显示所述信息、所述看得最多的物品的列表、所述看得最多的物品的表示和／或与所述看得最多的物品中至少一个物品有关的音频／视觉显示。至少一个物品（２９０）和／或物品表示可以比起其它看得最多的物品和／或物品表示更突出地被显示。

【技术实现步骤摘要】
【国外来华专利技术】本专利技术涉及一种交互解决方案，用于作为检测到正看着视场内(诸如象在交互式商店橱窗内)产品的用户的凝视(gaze)的结果，基于分析该凝视并显示例如关于看得最多的(most looked at)产品的信息，而提供系统反馈和产品信息。为了引起顾客兴趣和为了提供有关产品的额外信息，零售商已经部署了从大的液晶显示器(LCD)或等离子体显示器到透明投影屏幕的各种各样的显示技术。经常发现这些显示器被安装在商店橱窗中，在这里这些显示器被使用来显示带有关于该商店或其产品的通告或信息的视频剪辑、幻灯片显示。大多数当前使用的商店橱窗显示器是纯粹提供信息的非交互的屏幕。更先进的商店橱窗显示器提供了在基本层面上的与显示设备的某些交互性，这里用户可以按压在显示设备上或在其附近的按钮以便激活某功能性，诸如进到下一页或回到前一页。更有吸引力的商店橱窗可以通过使商店橱窗后陈列的实际产品与将显示关于用户感兴趣的产品的信息的商店橱窗显示器相结合来实现。这样的商店橱窗显示系统可以通过使用凝视跟踪或指点手势检测而推断出用户的兴趣，如在2005年8月4日提交的、标题为“Apparatus for Monitoringa Person Having an Interest to an Object，and Method Thereof”的欧洲专利申请序列号05107205.6(代理人案号No.002232)中描述的，该专利申请整体地在此引入以供参考。在这样的交互式商店橱窗中，用户可以观看或指点实际产品。观看/凝视和/或指点可被商店橱窗检测到，响应于此，商店橱窗在显示器上显示有关该产品的信息。这样的商店橱窗是有利的，因为它使得观看者能够实际地看见真实的实际产品并同时得到附加的(例如，数字)信息，包括在显示设备上提供的/建议的各种交互服务。除了检测单个观看者的凝视以外，还可以检测多个凝视和面孔。使用一个凝视跟踪器同时进行多个用户的凝视跟踪可以是基于通过使用启发式规则把检测到的瞳孔候选者分组成‘面孔对’，正如在C.Morimoto、D.Koons、A.Amir和M.Flickner的标题为“Real-Time Detection of Eyes andFaces”的文章(in Proc.Wkshp.Percept.User Interfaces，pages 117-120，-->1998)中描述的，该文章整体地在此引入以供参考。在授权给Edwards的、标题为“Techniques for Facilitating Use of Eye Tracking Data”的美国专利No 7,029,121中，描述了另外的眼睛跟踪系统，其例如由网页设计者或广告者使用来聚合多个用户的眼睛跟踪数据以确定趋势，该专利被整体地在此引入以供参考。在这样的系统中，聚合可以通过求和或平均数据、以及使用划分和统计分析而完成。本专利技术人认识到，例如对于建立一种在其中利用凝视进行产品选择的商店橱窗，存在某些没有很好地解决的状况。具体地，希望提供一种交互系统和方法，它更好地对来自观看者的凝视跟踪输入进行反应和更好地对以下状况进行反应，即：一个以上的用户或观看者与商店橱窗进行交互、或与在一个或多个观看者的视场内的物体——诸如在博物馆内的艺术品等等——的任何其它显示进行交互。用于商店橱窗情景或类似情景的其中一个直截了当的方法例如是在显示设备上展示最后被看着的产品，所述显示设备包括在其上显示或投影图像的商店橱窗显示器。然而，这个解决方案不是理想的，因为凝视不是用来明确地选择东西的适当的模态(modality)。为了举例说明，想象用户是在商店橱窗(或诸如博物馆中艺术品等等之类的实际产品的任何其它安排)前面，并只是扫视不同的产品，以得到所显示的东西的总貌。作为响应，交互系统对观看者的凝视作出反应，并在商店橱窗显示器或任何其它显示设备上展示最后被看着的产品。当用户/观看者了解在他的凝视与系统反应之间的联系时，该用户他将需要盯视他感兴趣的产品，以便在显示设备上得到关于该产品的附加信息。这样的选择方式——即为了得到附加信息而连续地盯着看——是不自然的。而且，这样的系统在多个观看者观看/凝视或指点产品的情形下没有很好地反应。也就是，在多个用户的情形下，系统应当对哪个用户的凝视作出反应或系统对多个用户凝视应当如何反应？在使用指点手势进行选择的情形下，当多个人同时地指点几个不同的产品时出现类似的问题。因此，需要一种更好的交互系统，用于根据单个或多个观看者凝视或指点一个或多个产品而提供更好的产品选择和信息。本系统和方法的一个目的是克服传统的交互系统的缺点。这个和其它目的是通过如下的系统和方法而达到的，该系统和方法把-->凝视持续时间作为用户的兴趣的指示来对待，然后它被使用来识别和突显与那个用户最相关的产品，包括在显示设备上显示产品表示，诸如图标和/或缩略图，连同与所识别的产品有关的信息，诸如幻灯片显示、视频剪辑和用来访问附加信息的链接，附加信息是诸如象产品说明书和相关的产品。按照一个说明性的实施例，一种交互方法和系统包括：检测器，被配置成检测看着物品的至少一个观看者的凝视；以及处理器，被配置成计算凝视持续时间，诸如所述物品中按每个物品的累计的凝视持续时间，根据累计的凝视持续时间来识别被看得最多的物品，以及提供与该看得最多的物品有关的信息。显示设备可被提供来显示以下的至少一项：所述信息、看得最多的物品的列表、看得最多的物品的表示和与该看得最多的物品中的至少一个物品有关的音频和视觉显示中的至少一个。至少一个物品和/或物品表示可以比其它的看得最多的物品和/或物品表示更突出地被显示。该系统和方法更好地适合于使用对于单个和多个用户都起作用的凝视交互。按每个用户/观看者来检测对于所有产品的在预定义时间帧内的凝视持续时间或凝视时间，然后识别对于所有用户和/或对于每个单独用户的被看得最多的物品。按每个用户来检测和分析与每个产品有关的凝视时间，其中计算出与每个或任何数目的产品和/或用户相关联的平均和/或累计的凝视时间，并进行排列。产品按照凝视时间进行排列，并识别出在排列的产品中的最相关的一个或多个产品。使用看得最多的产品作为交互式凝视系统的观看者或用户的最感兴趣的指示，对于系统反应使用了不同的策略。一个策略包括识别看得最多的产品，然后在显示设备上——诸如在商店橱窗显示器上——展示它们，放大它们的相应的缩略图和/或图标，和/或启动与这些看得最本文档来自技高网...

【技术保护点】
一种交互系统（１００），包括：　检测器（１１０），被配置成检测看着物品（２３０，２３２，２３４）的至少一个观看者（２５０）的凝视；以及　处理器（１３０），被配置成计算所述物品（２３０，２３２，２３４）的按每个物品的累计的凝视持续 时间，根据所述累计的凝视持续时间来识别看得最多的物品，以及提供与所述看得最多的物品有关的信息。

【技术特征摘要】
【国外来华专利技术】EP 2006-7-28 06118029.51.一种交互系统(100)，包括：
检测器(110)，被配置成检测看着物品(230，232，234)的至少一个观
看者(250)的凝视；以及
处理器(130)，被配置成计算所述物品(230，232，234)的按每个物品
的累计的凝视持续时间，根据所述累计的凝视持续时间来识别看得最多的
物品，以及提供与所述看得最多的物品有关的信息。
2.权利要求1的交互系统(100)，还包括显示器(140)，用于显示以
下至少一项：所述信息、所述看得最多的物品的列表、所述看得最多的物
品的表示和与所述看得最多的物品中的至少一个物品有关的音频和视觉
显示中的至少一个。
3.权利要求2的交互系统(100)，其中所述至少一个物品比起其它看
得最多的物品更突出地被显示。
4.权利要求2的交互系统(100)，其中所述表示中的一个表示比起其
它表示更突出地被显示。
5.权利要求1的交互系统(100)，还包括垫子(295)，其被配置成检
测所述至少一个观看者(250)的脚取向。
6.一种交互方法，包括以下动作：
检测对于在至少一个用户(250)的视场内的产品(230，232，234)的、
在预定义的时间段内的凝视时间；
识别看得最多的产品；以及
提供与所述看得最多的产品有关的信息。
7.权利要求6的交互方法，其中提供动作包括以下动作的至少一项：
在显示设备(240)上显示看得最多的产品；
显示按照凝视时间分类的看得最多的产品的缩略图(260)；
放大相应于与至少最大的所述凝视时间相关联的看得最多的产品中
至少一个产品的所述缩略图(260)的至少一个；
突显看得最多的产品；
在所述显示设备(240)上比起其它看得最多的产品更突出地显示所述
看得最多的产品中的所述至少一个产品；以及
启动与所述看得最多的产品中的所述至少一个产品有关的音频和视
觉显示中的至少一个。
8.权利要求7的交互方法...

【专利技术属性】
技术研发人员：T拉希纳，K范格尔德，SBF范德威德文，G霍尔曼斯，VP布尔，
申请(专利权)人：皇家飞利浦电子股份有限公司，
类型：发明
国别省市：NL[荷兰]