用于确定驾驶员分心的系统和方法技术方案

一种用于确定车辆驾驶员分心的方法，包括在车辆的车载系统处对传感器测量值进行采样；产生表示分心状态的输出；基于输出确定车辆的驾驶员以分心状态为特征；在远程计算系统的第二分心检测模块处，基于传感器测量值，产生表示驾驶员以分心状态为特征的第二输出；响应于生成第二输出并基于传感器测量值和分心状态，在远程计算系统的评分模块处计算分心分数。

System and method for determining driver distraction

【技术实现步骤摘要】
【国外来华专利技术】用于确定驾驶员分心的系统和方法相关申请的交叉引用本申请要求2016年11月7日提交的美国临时申请序列号62/418,655的权益，该临时申请通过引用整体并入本文。
本专利技术一般涉及车辆交互领域，更具体地涉及用于车辆交互领域中的确定驾驶员分心的新的和有用的系统和方法。附图说明图1是用于驾驶员分心确定的方法的流程图表示。图2是用于驾驶员分心确定的作为例子的系统的示意图。图3是确定模块更新的例子的示意表示。图4是与针对一个驾驶会话中车辆沿示例路线经过的多个地点的每一个所确定的多个驾驶员分心分数相关联的路线的示意表示。图5是与实现方法的示例相关联的示例信息和处理流程的示意图。图6是实现方法的特定示例的流程图表示。图7是实现方法的特定示例的流程图表示。优选实施例以下对本专利技术优选示例的描述并非旨在将本专利技术限制于这些优选示例，而是使本领域技术人员能够制造和使用本专利技术。1.概述。如图1所示，用于确定驾驶员分心的方法100包括：在驾驶会话期间对传感器测量值进行采样S110；基于传感器测量值确定分心因子值S120；并且基于因子值确定驾驶员分心S130。方法100用于确定驾驶员在驾驶会话期间是否分心。在一些变型中，方法100可以确定频率，严重性，位置，周围环境(例如，并发交通参数，并发车辆内部参数等)，和/或驾驶员分心事件的任何其他合适参数(例如，驾驶员分心参数)。该方法可以可选地包括将传感器测量值发送到远程计算系统S140；基于确定驾驶员分心生成通知S150；并且，在应用中使用驾驶员分心确定S160。方法100的全部或部分优选地以实时或接近实时的方式执行(例如，在驾驶会话期间，当正在采样新的传感器测量值时等)，但是可替代地可以异步地执行(例如，在驾驶会话结束之后，当用于车外(off-vehicle)数据传输的合适网络链路可用时等)或在任何其他合适的时间。方法100优选地针对多个驾驶员和多个驾驶会话执行，但是可替代地针对单个驾驶员，单个驾驶会话或任何合适的驾驶员或驾驶会话群体(population)执行。方法100优选地在整个驾驶会话中重复多次，但是可以替代地每个驾驶会话执行一次，响应于确定事件的发生而执行(例如，当分心因子值超过阈值时；当接近碰撞事件发生时；当用户启动分心确定；等)时，或者在任何其他合适的时间或频率下执行。方法100可以完全或部分地由车辆上的系统(例如，车载系统)执行。该系统可以是改装到车辆上的辅助系统，车辆本身，用户设备或任何其他合适系统。该系统可包括传感器(例如，光学传感器，音频传感器，立体相机，立体声麦克风，惯性传感器，加速度计，陀螺仪，磁力计等)，处理系统(例如，CPU，GPU)，输出(例如，扬声器，振动机构等)，定位系统(例如，GPS，蜂窝三边测量系统等)，通信系统(例如，远程连接，例如蜂窝或WiFi，短程连接，例如BLE或NFC，有线连接，例如车辆数据总线等)，电力系统(例如，车辆电源插头，电池等)或任何其他合适的部件。在一个变型中，该系统包括面向内部的相机(例如，朝向车辆内部，朝向驾驶员的头部体)，面向外部的相机(例如，指向地平线，朝向道路等)，一组音频传感器，一组惯性传感器，定位系统和安装件，该安装件配置成将系统安装到车辆仪表板，挡风玻璃，后视镜或车辆的任何其他合适的部件。在另一个变型中，方法100由基本上如2017年9月14日提交的美国申请序列号15/705,043中描述的系统执行，该申请通过引用以其整体并入本文。然而，该方法可以由任何其他合适的系统执行。在一个例子中，面向内部的相机和面向外部的相机之间的相对位置和/或相对视场关系(例如，x，y，z关系；角度关系等)是已知的并且是静态耦合的，从而例如从由面向内部的相机(内部相机)采样的图像中提取的信息可以在空间上映射到从由外部相机采样的图像中提取的信息(外部图像)。在特定例子中，从内部图像确定的驾驶员的注视方向可以在空间上映射到出现在外部图像中的车辆周围环境中的物理区域。然而，可以以其他方式使用传感器之间的空间关系。附加地或替代地，方法100的全部或部分可以由远程计算系统(例如，远程服务器)，辅助系统或任何其他合适的系统来执行。在分离计算的一种变型中，对与分心因子相关联的传感器测量值进行采样，将传感器测量值处理成分心因子值，以及基于分心因子值(例如，即将发生的，正在发生的或先前发生的分心事件)来识别分心事件可以全部由车载系统执行，而分心事件验证和应用于其他过程(例如，后处理成分心热图，过滤驾驶路线用于最佳路线等)可以由远程计算执行系统。在该变型中，车载系统可以发送与分心事件相关联的传感器测量值(例如，在分心事件之前，期间和/或之后记录的传感器测量值)，与分心事件相关联的衍生信息(例如，从一个或多个传感器或其他输入类型生成的衍生信息)，分心事件参数值(例如，时间，驾驶员，位置，严重性等)或到远程计算系统的任何其他合适的信息：在分心确定时立即(例如，使用通信系统)发送，在连接到高带宽连接时(例如，在连接到家庭或办公室WiFi系统时)发送，或在任何其他合适的时间发送。在第二变型中，传感器测量值可以实时或近实时地传输到远程计算系统，其中远程计算系统执行方法100的其余部分。然而，方法100可以由系统的任何其他适合的集合以其他方式执行。检测到的驾驶员分心(分心事件，分心状态)可以用在一个或多个应用中。在第一应用中，检测到的分心事件可以用于从多个行驶路线(例如，遍历路径)中过滤出被考虑用于最佳路线规划的的行驶路线(遍历路线)，其中随后可以向驾驶员推荐最佳路线，用于引导自动驾驶车辆或以其他方式使用。例如，与分心事件相关联的第一路线或路线区段(或高于阈值水平的分心分数)可以从考虑中移除，而第二路线或路线区段没有相关的分心事件(或者分心事件低于阈值)可以保留以确定最佳路线。在第二应用中，检测到的分心事件或其分数可用于动态调整通知参数。通知可以是即将发生的碰撞事件的通知，提醒驾驶员他们分心的通知，或者是任何其他合适的通知。即将发生的碰撞事件可以是对象移动进入或已经在车辆的预期遍历路径内的的预期车辆碰撞，或者是任何其他合适的碰撞事件。即将发生的碰撞事件可以由外部相机记录的图像(例如，使用对象检测，跟踪等)，来自车辆传感器(例如，接近传感器，RF传感器等)确定，或以其他方式检测。在一个变型中，通知参数值(例如，音量，亮度，持续时间等)可以根据驾驶员分心分数(例如，针对即将发生的碰撞事件的检测时间计算)成比例地增加。在第二变型中，可以基于驾驶员分心分数(例如，针对即将发生的碰撞事件检测时间计算)来选择通知类型。例如，当分心分数低于阈值分数时，驱动轮可以振动，而当分心分数高于阈值分数时，可以控制车辆的音频系统发出音频通知。然而，可以基于分心分数动态地调整通知参数。在第三应用中，可以将检测到的分心事件或其分数馈送到接近碰撞确定模块，该模块确定是否已经发生接近碰撞事件。在第四应用中，分心分数可用于确定驾驶员是否是碰撞的原因，或确定分配给驾驶员的故障百分比。例如，如果驾驶员在碰撞前的期间或碰撞前的一段时间内没有分心或者分心分数低于阈值水平，则驾驶员可以被分配比如果在碰撞之前的期间或碰撞之前一段时间内驾驶员分心或分心分数高于阈值水平的更低的故障百分比。时本文档来自技高网...

【技术保护点】
1.一种用于确定车辆驾驶员分心的方法，包括：·在所述车辆的车载系统处对传感器测量值进行采样，其中所述传感器测量值包括所述驾驶员的图像；·在所述车载系统的面部检测模块处接收图像，并产生第一输出，其中所述第一输出表示在所述图像中存在面部；·在所述车载系统的驾驶员分心模块处接收图像，并且在产生所述第一输出的同时期产生第二输出，其中所述第二输出表示分心状态；·基于所述第一输出和所述第二输出的组合，确定所述车辆的所述驾驶员以分心状态为特征；·确定所述分心状态的情境；·根据所述分心状态的所述情境确定所述分心状态的分数；和·基于所述分心状态，所述分心状态的所述情境和所述分心状态的所述分数，在所述车辆的所述车载系统的输出处基本上实时地通知所述驾驶员。

【技术特征摘要】
【国外来华专利技术】2016.11.07 US 62/418,6551.一种用于确定车辆驾驶员分心的方法，包括：·在所述车辆的车载系统处对传感器测量值进行采样，其中所述传感器测量值包括所述驾驶员的图像；·在所述车载系统的面部检测模块处接收图像，并产生第一输出，其中所述第一输出表示在所述图像中存在面部；·在所述车载系统的驾驶员分心模块处接收图像，并且在产生所述第一输出的同时期产生第二输出，其中所述第二输出表示分心状态；·基于所述第一输出和所述第二输出的组合，确定所述车辆的所述驾驶员以分心状态为特征；·确定所述分心状态的情境；·根据所述分心状态的所述情境确定所述分心状态的分数；和·基于所述分心状态，所述分心状态的所述情境和所述分心状态的所述分数，在所述车辆的所述车载系统的输出处基本上实时地通知所述驾驶员。2.根据权利要求1所述的方法，其中，所述分心状态包括所述驾驶员的注视方向，并且其中，生成所述第二输出基于从所述图像识别所述驾驶员的所述注视方向。3.根据权利要求1所述的方法，其中所述分心状态的所述情境包括所述分心状态的持续时间，并且其中确定严重性包括基于所述持续时间超过阈值持续时间来确定所述分心状态的所述分数。4.根据权利要求3所述的方法，其中，所述阈值持续时间由与所述驾驶员相关联的远程实体预先确定，并且还包括基于确定的所述分心状态的分数向所述远程实体发送通知。5.根据权利要求1所述的方法，其中，所述传感器测量值包括加速度计输出，并且还包括：·基于所述加速度计的输出，在所述车载系统的驾驶员行为分析模块处确定驾驶员行为；和·其中，确定所述车辆的所述驾驶员以所述分心状态为特征是基于所确定的驾驶员行为。6.根据权利要求1所述的方法，还包括：响应于所述分心状态的所述分数超过阈值分数，将所述传感器测量值发送到远程计算系统。7.根据权利要求6所述的方法，其中，在确定所述分心状态的所述分数超过所述阈值分数之后，基本上即时地执行将所述传感器测量值发送到所述远程计算系统。8.根据权利要求6所述的方法，还包括：基于所述传感器测量值，在所述远程计算系统的第二驾驶员分心模块处生成表示所述驾驶员以所述分心状态为特征的第三输出。9.根据权利要求8所述的方法，还包括：响应于生成所述第三输出，向与所述驾驶员相关联的远程实体发送通知，其中，所述通知包括所述分心状态，所述分心状态的所述分数，所述分心状态的所述情境，以及分心状态确定的时间点。10.根据权利要求6所述的方法，还包括：基于所述传感器测量值，所确定的分数以及与所述驾驶员相关联的分数...

【专利技术属性】
技术研发人员：柳德米拉·乐夫科瓦，斯特凡·赫克，班杰明·O·艾波特，拉维·萨特左达，苏池特拉·萨蒂亚纳亚纳，维韦克·瑟卡尔，
申请(专利权)人：新自动公司，
类型：发明
国别省市：美国,US