用于机器向驾驶员转变的移交助手制造技术

本发明专利技术涉及用于机器向驾驶员转变的移交助手。本文公开了一种监测交通工具的环境的交通工具移交系统。交通工具移交系统接收将交通工具控制权从自动化驾驶模式改变为交通工具的乘客的转变请求。交通工具移交系统检测可能与转变请求相关的关键事件，并且关键事件的检测基于被监测的环境。交通工具移交系统可以生成包括与关键事件相关联的图像的移交场景，并且该图像包括在关键事件的时间段内的图像序列。在交通工具移交系统将交通工具控制权从自动化驾驶模式改变给乘客之前，移交场景被显示给乘客。给乘客。给乘客。

【技术实现步骤摘要】
用于机器向驾驶员转变的移交助手


[0001]本公开总体上涉及自动驾驶系统，并且具体地涉及可将交通工具的控制权从自动驾驶模式转移给人类驾驶员的驾驶系统。

技术介绍

[0002]具有自主或部分自主驾驶模式的交通工具正变得越来越流行。此类交通工具通常包括各种监测系统，这些监测系统配备有用于观察与交通工具内部有关的信息、监测交通工具的运动以及扫描交通工具外部的对象的各种相机和其他传感器。当交通工具以自主(或部分自主)驾驶模式操作时，将交通工具的控制权(或部分控制权)返还给人类驾驶员可能变得是必要的。
附图说明
[0003]在附图中，贯穿不同的视图，相同的附图标记一般指代相同部分。这些附图不一定是按比例的，而是一般着重于说明本公开的示例性原理。在下列描述中，参照下列附图描述本公开的各个示例性方面，在附图中：图1图示出可以从自动驾驶模式转变到手动驾驶模式的交通工具的交通工具移交系统的示例流程图；图2示出在交通工具移交期间向人类驾驶员呈现转变信息的示例性的交通工具移交系统；图3描绘了对增强型图像序列的关键事件排定优先级的事件概括的示例性流程图；图4示出了与在增强型图像序列的单个帧图像中显示的多个关键事件有关的示例性概括信息。图5图示出可以描绘一个或多个关键事件和相关联的元数据的示例性增强型图像序列；图6示出了用于预测乘客的预期响应时间并且用于确定在交通工具的特定地理位置和情况下的所需响应时间的响应时间系统的示例性流程图；图7描绘了用于确定乘客对监测到的事件的响应时间的示例性流程图；图8示出图示出用于将交通工具的控制权从自动化驾驶模式移交给手动驾驶模式的设备的示例性示意图；图9描绘了用于将交通工具的控制权移交给乘客的方法的示意性流程图。
具体实施方式
[0004]以下详细描述中对附图进行参考，附图通过图示方式示出了示例性细节和特征。
[0005]在本文中使用词语“示例性”来意指“充当示例、实例或说明”。本文中被描述为“示例性”的任何方面或设计不必被解释为相比其他方面或设计是优选或有利的。
[0006]贯穿附图，应注意，除非另有说明，否则相同的附图标记用于描绘相同或相似的要素、特征和结构。
[0007]短语“至少一个”和“一个或多个”可被理解为包括大于或等于一的数量(例如，一个、两个、三个、四个、[...]等)。关于一组要素的短语
“……
中的至少一个”在本文中可用于意指来自由这些要素组成的组的至少一个要素。例如，关于一组要素的短语
“……
中的至少一个”在本文中可用于意指以下各项中的选择：所列要素中的一个、多个所列要素中的一个要素、多个个体所列要素、或多个个体所列要素中的多个。
[0008]说明书和权利要求书中的词语“复数个(plural)”和“多个(multiple)”明确地指代大于一的量。因此，任何明确地援引上述词语来指代某个数量的要素的短语(例如，“复数个[要素]”、“多个[要素]”)明确地指代多于一个的所述要素。例如，短语“多个(a plurality)”可被理解为包括大于或等于二的数量(例如，两个、三个、四个、五个、[...]等)。
[0009]说明书中和权利要求书中的短语“(
……
的)组”、“(
……
的)集”、“(
……
的)集合”、“(
……
的)系列”、“(
……
的)序列”、“(
……
的)分组”等(如果存在)指代等于或大于一的量，即一个或多个。术语“适当的子集”、“减小的子集”、和“较小的子集”指代集合的不等于该集合的子集，说明性地，指代集合的包含比该集合少的元素的子集。
[0010]如本文中所使用的术语“数据”可被理解为包括采用任何合适的模拟或数字形式的信息，例如，作为文件、文件的部分、文件集合、信号或流、信号或流的部分、信号或流的集合等等来提供的信息。进一步地，术语“数据”还可用于意指对信息的例如以指针的形式的引用。然而，术语“数据”不限于上述示例，并且可采取各种形式并表示如本领域中理解的任何信息。
[0011]例如，如本文中所使用的术语“处理器”或“控制器”可被理解为允许处置数据的任何种类的技术实体。可根据由处理器或控制器执行的一个或多个特定功能来处置数据。进一步地，如本文中所使用的处理器或控制器可被理解为任何种类的电路，例如任何种类的模拟或数字电路。处理器或控制器因此可以是或可包括模拟电路、数字电路、混合信号电路、逻辑电路、处理器、微处理器、中央处理单元(Central Processing Unit，CPU)、图形处理单元(Graphics Processing Unit，GPU)、数字信号处理器(Digital Signal Processor，DSP)、现场可编程门阵列(Field Programmable Gate Array，FPGA)、集成电路、专用集成电路(Application Specific Integrated Circuit，ASIC)等、或其任何组合。下文将进一步详细描述的相应功能的任何其他种类的实现方式也可被理解为处理器、控制器或逻辑电路。应理解，本文中详述的处理器、控制器或逻辑电路中的任何两个(或更多个)可被实现为具有等效功能的单个实体等等，并且相反地，本文中详述的任何单个处理器、控制器或逻辑电路可被实现为具有等效功能的两个(或更多个)分开的实体等等。
[0012]如本文中所使用，“存储器”被理解为数据或信息可以被存储在其中以供检取的计算机可读介质(例如，非暂态计算机可读介质)。对本文中所包括的“存储器”的引用可因此被理解为是指易失性或非易失性存储器，包括随机存取存储器(random access memory，RAM)、只读存储器(read
‑
only memory，ROM)、闪存、固态存储、磁带、硬盘驱动器、光驱、3D XPoint
TM
等等、或其任何组合。在本文中，寄存器、移位寄存器、处理器寄存器、数据缓冲器等等也可由术语存储器包含。术语“软件”是指任何类型的可执行指令，包括固件。
[0013]除非明确地指定，否则术语“发射”涵盖直接(点对点)和间接(经由一个或多个中间点)的发射两者。相似地，术语“接收”涵盖直接和间接的接收两者。此外，术语“发射”、“接收”、“传递”和其他相似术语涵盖物理传输(例如，对无线电信号的传输)和逻辑传输(例如，通过逻辑软件级连接对数字数据的传输)两者。例如，处理器或控制器可通过与另一处理器或控制器的软件级连接以无线电信号的形式对数据进行发射或接收，其中，物理发射和接收由诸如RF收发机和天线之类的无线电层组件处置，并且通过软件级连接的逻辑发射和接收由处理器或控制器执行。术语“传递”涵盖发射和接收中的一者或两者，即，在传入方向和传出方向中的一个方向或这两个方向上的单向或双向传输。术语“计算”涵盖经由数学表达式/等式/关系进行的
‘
直接
’
计算和经由查找表或散列表以及其他数本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种交通工具移交系统，包括：处理器，所述处理器被配置成用于：监测交通工具的环境；接收将所述交通工具的控制权从自动化驾驶模式改变给所述交通工具的乘客的转变请求；检测与所述转变请求相关的关键事件，其中所述关键事件基于被监测的环境；生成包括与所述关键事件相关联的图像的移交场景，其中所述图像包括在所述关键事件的时间段内的图像序列；以及在所述交通工具的控制权从所述自动化驾驶模式改变给所述乘客之前，向所述乘客显示所述移交场景。2.如权利要求1所述的交通工具移交系统，其中，所述关键事件包括以下各项中的至少一项：已经导致所述交通工具的轨迹改变的移动事件、所述交通工具的被监测的环境中观察到的交通工具的意料之外的行为事件和/或包括所述交通工具的、不符合所述交通工具的预期操作条件的操作设定点的外部操作域事件。3.如权利要求1所述的交通工具移交系统，其中，所述图像包括根据至少一个相机图像生成的增强型图像序列，该至少一个相机图像利用与所述关键事件相关联的事件元数据进行增强。4.如权利要求1至3中任一项所述的交通工具移交系统，其中，所述移交场景包括与所述乘客的视点相对应的多个视角。5.如权利要求1至3中任一项所述的交通工具移交系统，其中，所述移交场景包括由与多个关键事件相关联的图像和/或事件元数据形成的静态图像。6.如权利要求1至3中任一项所述的交通工具移交系统，其中，所述移交场景进一步包括与所述图像相关联的文本，其中所述文本是使用多模态概括系统从图像生成的。7.如权利要求6所述的交通工具移交系统，其中，所述文本包括通过所述交通工具的音频系统向所述乘客用言辞表达的所述关键事件的描述。8.如权利要求1至3中任一项所述的交通工具移交系统，其中，所述关键事件被分配优先级，所述优先级与所述关键事件相比于所述交通工具的当前情形的重要性相对应，其中所述优先级基于以下各项中的至少一项：自所述关键事件发生以来所经过的时间、所述关键事件的类别、从所述关键事件的事件位置到所述交通工具的当前位置的距离和/或所述乘客已经知晓所述关键事件的可能性。9.如权利要求1至3中任一项所述的交通工具移交系统，其中，所述处理器进一步被配置成用于监测所述乘客以确定所述乘客已经知道所述关键事件的可能性。10.如权利要求1至3中任一项所述的交通工具移交系统，其中，生成所述移交场景取决于所述乘客的预期响应时间，其中所述预期响应时间基于所述乘客对多个被监测的事件的平均响应时间。11.如权利要求10所述的交通工具移交系统，其中，所述预期响应时间基于所述交通工具的被监测的环境的环境评级来调整。12.如权利要求10所述的交通工具移交系统，其中，所述预期响应时间基于所述乘客的注意力评级来调整，所述乘客的注意力评级取决于所述乘客的观察到的特性。
13.如权利要求10所述的交通工具移交系统，其中，所述预期响应时间基于所述交通工具的地理位置和与所述地理位置相关联的基于地图的信息来调整。14.如权利要求13所述的交通工具移交系统，其中，所述基于地图的信息包括与所述地理位置的平均反应时间相关联的基线反应时间偏移。15.如权利要求1至3中任一项所述的交通工具移交系...

【专利技术属性】
技术研发人员：I，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：