交通工具乘员监测制造技术

本文描述了用于交通工具乘员监测的系统和技术。包括视觉图像数据的传感器数据从交通工具的传感器阵列被获得。交通工具承载的对象从视觉图像数据检测。针对交通工具的安全性事件可以基于对象检测被标识，并且交通工具的操作元件响应于检测到该安全性事件被更改。作元件响应于检测到该安全性事件被更改。作元件响应于检测到该安全性事件被更改。

【技术实现步骤摘要】
交通工具乘员监测


[0001]本文描述的实施例大体上涉及汽车中的计算机视觉技术，并且更具体地，涉及交通工具乘员监测。

技术介绍

[0002]交通工具传感器系统正变得更复杂。这一趋势已伴随着高级驾驶员辅助系统(advanced driver
‑
assistance system,ADAS)和自主驾驶交通工具增长。通常，这些系统包括一系列传感器(诸如，相机、RADAR、LIDAR或超声波)，以感测交通工具行驶通过的环境。传感器使交通工具能够确定如何避开障碍物或从一个点导航到另一个点。通常，传感器以交通工具周围的不同视场(field
‑
of
‑
view,FOV)布置，从而提供交通工具周围的纵向(例如，前和后)和横向(例如，侧到侧)覆盖。
[0003]交通工具乘员监测通常不如上述ADAS和自主驾驶设施复杂。乘员监测可以包括诸如以下事项：安全带检测(乘员是否系了安全带)、分心驾驶员检测、或由相机或镜子向驾驶员提供的后座乘员视图等。
附图说明
[0004]在附图中(这些附图不一定是按比例绘制的)，同样的数字可描述不同视图中的类似组件。具有不同的字母后缀的同样的数字可表示类似组件的不同实例。附图总的来说通过示例的方式而不是限制的方式来图示在本文档中所讨论的各实施例。
[0005]图1是根据实施例的环境的示例的框图，该环境包括用于交通工具乘员监测的系统。
[0006]图2图示出根据实施例的由于对象从交通工具延伸而添加到交通工具导航的安全性裕度的示例。
[0007]图3图示出根据实施例的用于观察延伸超出交通工具的对象的示例传感器位置。
[0008]图4图示出根据实施例的用于风险等级评估的示例流程。
[0009]图5图示出根据实施例的用于跟踪横向裕度和控制驾驶策略的体系结构的示例。
[0010]图6图示出根据实施例的交通工具中的示例传感器放置。
[0011]图7图示出根据实施例的用于组合视觉和音频数据以观察交通工具的乘员的系统的示例。
[0012]图8图示出根据实施例的音频处理管线的示例。
[0013]图9图示出根据实施例的视觉分类系统的示例。
[0014]图10图示出根据实施例的组合式音频和视觉处理管线的示例。
[0015]图11图示出根据实施例的音频分类系统的示例。
[0016]图12图示出根据实施例的驾驶员监测系统的示例。
[0017]图13图示出根据实施例的用于交通工具乘员监测的方法的示例的流程图。
[0018]图14是图示出可在其上实现一个或多个实施例的机器的示例的框图。
具体实施方式
[0019]在大多数管辖区，交通工具驾驶员(例如，操作员)负责交通工具的安全操作。安全操作包括确保外部实体(例如，其他交通工具、行人、骑自行车者、动物、财产等)的安全以及交通工具的乘员的安全。确保交通工具乘员安全可以包括监测和纠正乘员的行为，诸如，确保安全带被正确使用，如果乘员将肢体伸出窗户则调整驾驶裕度，或者甚至监测自己是否分心(例如，在进食或在手机上交谈)。因此，驾驶员通常负责持续观察所有乘客(包括后座上的那些乘客)的行为。
[0020]为了促进监测，已在各种配置中使用了镜子。例如，补充标准后视镜的镜子可以被引导用于观察儿童座位中的儿童。然而，当儿童位于后座上，或甚至婴儿向后移动时，镜子往往无法很好地起作用。此外，儿童和婴儿经常掉落物品(例如，奶嘴、玩具等)，这些物品可导致分心(例如，儿童突然爆发或发脾气)(这种分心只有在物品被返回时才结束)，以安全带不再正确定位的方式移动，或开始哭泣或在不健康的位置入睡。
[0021]现有监测技术的问题通常包括驾驶员的额外分心(例如，必须查看附加的镜子组)和不完整的信息(例如，缺乏情况检测和提供纠正措施)。
[0022]为了解决这些问题，可将传感器系统集成到交通工具中，其输出可用于检测和分类与交通工具所承载的对象相关的事件。一旦检测到安全性事件，可以更改交通工具的操作元件以帮助缓解该安全性事件。例如，仪表板内显示器可显示乘客不恰当地佩戴安全带的图片或符号、以及对驾驶员的警告。如果安全性事件被归类为特别危险(例如，超过阈值)，则被更改的交通工具的操作元件可导致交通工具减速，或甚至将交通工具拉到路边以解决问题。此外，在各种实施例中，系统可以以取决于情况的方式突出显示掉落的物品以供更快地发现和拾取，或者向驾驶员通知(例如，警告)不适当的行为或身体位置。在各种实施例中，系统在驾驶员仪表板中提供直接视频连接以避免镜子或零部件市场解决方案，分析乘客行为，并且可以在仪表板中向驾驶员警告不适当的行为(诸如，不健康的睡眠位置、不正确的安全带定位等)，(诸如，当系统检测到非常关键的情况(如安全带被移除)时)，可以实施交通工具风险降低机动，或者可以标记乘客掉落的物品以便于它们的取回，并从而最小化驾驶员分心时间。
[0023]除了发生在交通工具内部的乘客行为外，乘客行为还可以涉及交通工具外部的安全性事件。例如，如果乘客将手臂或腿伸出车窗，则环境中的交通工具占用空间的这种附加的延伸可能意味着需要更改自主驾驶安全性裕度，以保持交通工具与其他对象之间的安全横向距离。例如，如果将尺寸过大的负载固定到交通工具上，可能会出现相同的情况，从而再次延伸交通工具的占用空间。在这些情况下，可以作出关于延伸的可能持续多久(例如，持续整个行程或持续几分钟)的评估。安全性裕度参数可以响应于该评估而被更改。一般来说，延伸越是临时性的，安全性裕度的变化就越小。
[0024]捕获静态和视频图像的相机通常提供良好的传感器平台，用于实现上述技术。麦克风可以被添加，用于为安全性事件的检测和分类提供甚至更多情境。此外，麦克风可以用于对情况(例如，有人在免提电话上讲话)进行消歧，或者可以用作附加感测(例如，定位事件正发生的位置或标识物品掉落的位置等)。
[0025]本文所述的设备、系统和技术的使用提供了对安全性事件的更复杂和准确的检测和分类。此外，可以在不在与之前技术相比的那么大程度上干扰驾驶员的情况下减轻安全
性事件。因此，驾驶员可以更好地实现安全地操作交通工具的责任。以下提供了附加的细节和示例。
[0026]图1是根据实施例的环境的示例的框图，该环境包括用于交通工具乘员监测的系统。该系统可以包括容纳在交通工具105中的处理电路系统110、相机115和仪表板内显示器125。
[0027]如图所示，处理电路系统110被布置成用于实现三个元件：感测(例如，监测)；分析(例如，用于检测不适当的行为、评估危险性等)和致动(例如，通知或警告驾驶员、强制执行安全性交通工具反应(诸如，减速或停车)等)。为此，处理电路系统110包括传感器接口130，用于接纳来自一个或多个传感器(诸如，捕获乘客120的视图的相机115)的传感器数据。除了覆盖交通工具舱的各种视图的一个或多个相机之外，传感器还可以包括运动传感器(例如，超声波、红外等)、压力传本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于交通工具乘员监测的设备，所述设备包括：接口，所述接口用于从交通工具的传感器阵列获取传感器数据，所述传感器数据包括视觉图像数据；存储器，所述存储器包括指令；以及处理电路系统，所述处理电路系统在操作时由所述指令配置成用于：从所述视觉图像数据检测所述交通工具承载的对象；基于对象检测来标识针对所述交通工具的安全性事件；以及响应于检测到所述安全性事件，更改所述交通工具的操作元件。2.如权利要求1所述的设备，其特征在于，为了检测所述安全性事件，所述处理电路系统：获取所述交通工具的操作条件；以及基于所述操作条件和所述事件的组合，将包括所述对象的事件分类为所述安全性事件。3.如权利要求1所述的设备，其特征在于，为了更改所述交通工具的所述操作元件，所述处理电路系统使所述交通工具减速。4.如权利要求3所述的设备，其特征在于，为了更改所述交通工具的所述操作元件，所述处理电路系统使所述交通工具：将所述交通工具导航至安全位置；以及使所述交通工具停下。5.如权利要求1所述的设备，其特征在于，所述对象是由乘客掉落的对象。6.如权利要求5所述的设备，其特征在于，为了更改所述交通工具的所述操作元件，所述处理电路系统提供所掉落的对象的位置。7.如权利要求1所述的设备，其特征在于，所述对象是安全带。8.一种用于交通工具乘员监测的方法，所述方法包括：从交通工具的传感器阵列获取传感器数据，所述传感器数据包括视觉图像数据；从所述视觉图像数据检测所述交通工具承载的对象；基于所述对象检测来标识针对所述交通工具的安全性事件；以及响应于检测到所述安全性事件，更改所述交通工具的操作元件。9.如权利要求8所述的方法，其特征在于，检测所述安全性事件包括：获取所述交通工具的操作条件；以及基于所述操作条件和所述事件的组合，将包括所述对象的事件分类为所述安全性事件。10.如权利要求8所述的方法，其特征在于，更改所述交通工具的所述操作元件包括使所述交通工具减速。11.如权利要求10所述的方法，其特征在于，更改所述交...

【专利技术属性】
技术研发人员：F，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：