用于通过跟踪驾驶员眼睛视线来检测驾驶员是否对广告感兴趣的设备和方法技术

一种用于向车辆或可佩带外壳提供广告的控制器，以及一种计算机可读介质，其在由一个或多个处理器执行时执行操作来向所述车辆或可佩带外壳提供广告。第一信号输入端接收第一摄像机信号，第二信号输入端接收第二摄像机信号，并且至少一个信号输出端向至少一个声换能器进行传输，所述声换能器向用户提供音频广告。可布置在所述控制器内的计算机逻辑确定广告的所捕获图像的方向与用户眼睛视线的方向是否彼此对应，且如果彼此对应，那么所述计算机逻辑将音频广告输出到音频换能器。

【技术实现步骤摘要】
用于通过跟踪驾驶员眼睛视线来检测驾驶员是否对广告感 兴趣的设备和方法相关申请的交叉引用 本申请要求2013年6月28日提交的美国临时申请序列号61/840, 965的权益，所 述临时申请的全部内容以引用的方式并入本文。
本文所公开的方面一般涉及用于通过跟踪驾驶员眼睛视线方向来检测驾驶员是 否对视觉广告感兴趣，以便将通常与视觉广告相关的音频广告提供给驾驶员的装置和方 法。
技术介绍
为了引起兴趣，提供许多不同类型的广告来显示给车辆上的驾驶员。驾驶员在驾 驶时可能会观看视觉街头广告（例如广告牌），并试图记住广告上提供的信息。在某些情况 下，驾驶员可能需要将他/她的视线从道路上移开来理解广告上的信息，从而从驾驶车辆 的任务中分散注意力。许多街头广告并未针对观看者来定制，因为它们通常在本质上是静 态的。这样的静态街头广告并不具备察觉到观看者偏好的能力，并且一般不能包括太多的 信息，以保持可读性。此外，广播广告在大多数情况下对于驾驶员是没有意义的，因为它们 既不是个性化的，也不是定制的。
技术实现思路
控制器的实施方案可向用户提供广告。所述控制器可以包括第一信号输入端，其 接收第一摄像机信号，所述第一摄像机信号指示用户正在观看的方向。所述控制器还可以 包括第二信号输入端，其接收第二摄像机信号，所述第二摄像机信号包括来自周围环境的 一个或多个广告的所捕获图像。所述控制器还可以包括信号输出端，其驱动至少一个声换 能器。所述控制器还可以包括计算机逻辑，其经过编程来确定朝向广告的所捕获图像中的 每一个的方向，以及用户正在观看的所指示方向是否对应于广告的所捕获图像的方向。在 确定所述两个方向对应之后，所述计算机逻辑可确定一个或多个广告的情境，并通过所述 信号输出端来输出对应于所确定情境的音频广告。 在各种实施方案中，用于提供广告的控制器可以提供在可佩带装置中。所述控制 器可以包括第一信号输入端，其可以接收第一摄像机信号，所述第一摄像机信号指示眼睛 视线方向。所述控制器还可以包括第二信号输入端，其可以接收第二摄像机信号，所述第二 摄像机信号包括来自周围环境的一个或多个广告的所捕获图像。所述控制器可以包括信号 输出端，其驱动至少一个声换能器。所述控制器还可以包括计算机逻辑，其经过编程来确定 广告的所捕获图像中的每一个的方向，以及所指示的眼睛视线方向是否对应于广告的所捕 获图像中的一个的所确定方向。在证实所述两个方向对应之后，所述计算机逻辑可确定一 个或多个广告中的一个的情境，并向所述信号输出端输出广告的音频信号，所述广告的情 境与一个或多个广告中的所述一个的情境相匹配?所述第一摄像机提供第一摄像机信号， 所述至少一个弟一摄像机提供第二摄像机彳目号，并且所述至少一个声换能器可以布置在至 少一个可佩带外壳中。 包括程序的计算机可读介质可以在所述程序由处理器中的一个或多个执行时执 行操作，所述处理器输入视觉广告并且向用户输出相应的音频广告。所述程序可确定用户 正在观看的方向。然后，所述程序可以确定用户周围的多个广告的位置以及用户是否正在 对应于所述多个广告中的一个的方向上观看。所述程序可确定正在观看的广告的情境。所 述程序可以输出音频广告，所述音频广告的情境对应于正在观看的广告的情境。 上述优点和其它各种优点和特征可以从以下结合附图进行的对一个或多个代表 性实施方案的详细描述中显而易见。 【附图说明】 在所附权利要求书中特定指出本公开的实施方案。然而，通过参考以下详细描述 以及附图，各种实施方案的其它特征将变得更加明显，并将得到最好的理解： 图1是根据各种实施方案的系统控制器的方框图； 图2是布置在轿车中的根据各种实施方案的系统的一个实施方案的方框图； 图3示出基于来自用户正在观看的视觉广告的情境向用户提供音频广告的方法； 图4是布置在轿车中的根据各种实施方案的系统的一个实施方案的方框图； [00M]图5A示出基于来自用户正在观看的视觉广告的情境向用户提供音频广告的方 法； 图5B示出基于来自用户正在观看的视觉广告的情境向用户提供音频广告的方 法； 图6示出用于确定驾驶员是否在观看广告的示例性场景； 图7是布置在轿车中的根据各种实施方案的系统的一个实施方案的方框图； 图8示出基于来自用户正在观看的视觉广告的情境向用户提供音频广告的方法； 图9描绘示出用于确定用户正在观看哪一个广告的方法的示例性场景； 图10描绘示出用于确定用户正在观看哪一个广告的方法的示例性场景；并且 图11描绘示出用于确定用户正在观看的广告的情境的方法的示例性场景。 【具体实施方式】 按照要求，本文公开了本专利技术的详细实施方案；然而，应理解的是，所公开的实施 方案仅仅是本专利技术的示例，所述实施方案可以体现为各种替代形式。附图不一定是按比例 绘制；某些特征可能被夸大或最小化以显示特定部件的细节。因此，本文中公开的特定结构 细节和功能细节不应被解释为是限制性的，而是仅仅作为教导本领域技术人员以不同方式 运用本专利技术的代表性基础。 本公开的实施方案通常提供多个电路或其它电气装置。所有提到的电路和其它电 气装置及其各自所提供的功能性并不意图限于仅包括本文所示出和描述的。虽然可以将特 定的标签分配给所公开的各种电路或其它电气装置，但是这样的标签并不意图限制电路和 其它电气装置的操作范围。基于所期望的电气实行方案的特定类型，这样的电路和其它电 气装置可以任何方式彼此组合和/或分开。 应认识到，本文所公开的任何电路或其它电气装置可以包括任意数量的微处理 器、集成电路、存储器装置（例如，闪存、随机存取存储器（_)、只读存储器（ROM)、电可编 程只读存储器（EPROM)、电可擦除可编程只读存储器（EEPR0M)，或上述存储器的其它合适 的变体）以及软件，上述各者彼此合作来执行本文所公开的操作。此外，本文所公开的电气 装置中的任何一个或多个可以被配置来执行体现在非暂时性计算机可读介质上的计算机 程序，其被编程来执行本文所公开的任何数量的功能。 本文描述的各种实施方案可提供与用户感兴趣的广告（例如，广告牌）有关的定 制音频广告。可以以一种使驾驶员的注意力分散减少到最低限度的方式向驾驶员提供关于 感兴趣的特定产品/公司/服务的信息。 除了广告外，用户还可以查看道路标志（例如，与事故或其它前方道路危险、道路 封闭、行驶路线、绕道和/或出口相关）来触发与道路标志相关的音频信息的输出。所述系 统还可以用于其它视觉信息。例如，驾驶员可以查看道路标志，如交通或道路危险警告、公 路立交信息等，以使得用户可以接收补充所述视觉信息的音频数据。用户可以查看的视觉 广告和/或其它信息在本文中称为视觉信息。 各种实施方案可以布置在车辆上以使得可以通过车辆上的音频系统来播放与驾 驶员所观看的广告牌或其它广告相关的音频广告。其它各种实施方案可以基于通过眼睛视 线跟踪、图像辨识和/或位置数据来观察到的用户对广告（例如广告牌）感兴趣，来向可佩 带外壳提供定制的音频广告。同样可以便利的方式向用户提供关于感兴趣的特定产品/公 司/服务的信息。 实施方案可以包括各种多模式设备，所述设备尤其可以观察驾驶员的眼睛视本文档来自技高网...

【技术保护点】
一种用于提供音频信息的控制器，所述控制器包括：第一信号输入端，其被配置来接收第一摄像机信号，所述第一摄像机信号指示用户正在观看的方向；第二信号输入端，其被配置来接收第二摄像机信号，所述第二摄像机信号包括一个或多个视觉信息的所捕获图像；信号输出端，其被配置来驱动至少一个声换能器；以及计算机逻辑，其被编程来：确定朝向所述一个或多个视觉信息的所捕获图像中的每一个的方向；确定所述用户正在观看的所指示方向是否对应于所述一个或多个视觉信息中的一个的所捕获图像的所确定方向；并且在确定所述用户正在观看的所述所指示方向对应于所述一个或多个视觉信息中的一个之后：确定所述一个或多个视觉信息中的所述一个的情境；并且将与所述一个或多个视觉信息中的所述一个的所述情境相关的音频信息输出到所述信号输出端。

【技术特征摘要】
2013.06.28 US 61/840,9651. 一种用于提供音频信息的控制器，所述控制器包括： 第一信号输入端，其被配置来接收第一摄像机信号，所述第一摄像机信号指示用户正 在观看的方向； 第二信号输入端，其被配置来接收第二摄像机信号，所述第二摄像机信号包括一个或 多个视觉信息的所捕获图像； 信号输出端，其被配置来驱动至少一个声换能器；以及 计算机逻辑，其被编程来： 确定朝向所述一个或多个视觉信息的所捕获图像中的每一个的方向； 确定所述用户正在观看的所指示方向是否对应于所述一个或多个视觉信息中的一个 的所捕获图像的所确定方向；并且 在确定所述用户正在观看的所述所指示方向对应于所述一个或多个视觉信息中的一 个之后： 确定所述一个或多个视觉信息中的所述一个的情境；并且 将与所述一个或多个视觉信息中的所述一个的所述情境相关的音频信息输出到所述 信号输出端。2. 如权利要求1所述的控制器，其中第一摄像机连接到所述第一信号输入端，其中至 少一个第二摄像机连接到所述第二信号输入端，其中至少一个声换能器连接到所述信号输 出端，其中所述第一摄像机、所述至少一个第二摄像机、所述至少一个声换能器以及所述计 算机逻辑被布置在轿车中，其中第一摄像机模块被布置在所述轿车的车厢中，以确定所述 用户正在观看的方向，且其中所述至少一个第二摄像机是以面向外部的布置来布置在所述 车辆上。3. 如权利要求1所述的控制器，其进一步包括数据收发器，其中在确定所述用户正在 观看所述一个或多个视觉信息中的一个之后，所述计算机逻辑通过所述数据收发器从远程 数据库检索所述音频信息。4. 如权利要求1所述的控制器，其中所述第一摄像机检测所述用户的眼睛视线方向， 且其中所述用户正在观看的所述所指示方向是所述检测到的眼睛视线方向。5. 如权利要求1所述的控制器，其中所述第一摄像机检测所述用户的头部定向，所述 头部定向包括所述用户的头部所面对的方向，且其中所述用户正在观看的所述所指示方向 是所述用户的头部所面对的所述检测方向。6. 如权利要求1所述的控制器，其中所述计算机逻辑进一步通过以下步骤中的至少一 个来确定所述用户是否对所述一个或多个视觉信息中的感兴趣： 确定所述用户已经在所述一个或多个视觉信息中的所述一个的方向上观看至少预定 的时间量； 确定所述用户已经在所述一个或多个视觉信息中的所述一个的方向上观看超过预定 次数；以及 确定所述用户已经在所述一个或多个视觉信息中的所述一个的方向上观看的总累计 时间量超过预定量， 从用户接口（例如，物理按钮、数字接口上的图标等）接收输入信号； 且其中在确定所述用户对所述一个或多个视觉信息中的所述一个感兴趣之后，所述计 算机逻辑输出所述音频信息。7. 如权利要求1所述的控制器，其中所述至少一个声换能器包括布置在车辆中的音频 扬声器。8. -种用于提供音频信息的可佩带控制器，所述控制器包括： 第一信号输入端，其被配置来接收第一摄像机信号，所述第一摄像机信号指示眼睛视 线方向； 第二信号输入端，其被配置来接收第二摄像机信号，所述第二摄像机信号包括一个或 多个视觉信息的所捕获图像； 信号输出端，其被配置来驱动至少一个声换能器；以及 计算机逻辑，其被编程来： 确定朝向所述一个或多个视觉信息的所捕获图像中的每一个的方向； 确定所指示眼睛视线方向是否对应于所述一个或多个视觉信息中的一个的所述所捕 获图像的所确定方向；并且 在确定所述所指示眼睛视线方向对应于所述一个或多个视觉信息中的一个之后： 确定所述一个或多个视觉信息中的所述一个的情境；并且 将与所述一个或多个视觉信息中的所述一个的所述情境相关的音频信息输出到所述 信号输出端， 其中提供所述第一摄像机信号的第一摄像机、提供所述第二摄像机信号的所述至少一 个第二摄像机，以及所述至少一个声换能器是布...

【专利技术属性】
技术研发人员：D迪森索，S马蒂，A琼加，
申请(专利权)人：哈曼国际工业有限公司，
类型：发明
国别省市：美国;US