基于用户认知状态和/或情境状态的会话调整系统和方法技术方案

提供了一种特别是当用户正在操作交通工具时基于人类用户的认知状态和/或情境状态来调整人类用户与计算机之间的自然语言会话的系统和方法。所述系统可以基于各种情境状态和/或用户状态而解除与所述用户(例如，驾驶员)的会话或采取其它动作。例如，当所述系统检测到驾驶情况复杂(例如，汽车并入高速公路、右转的同时有多个行人试图穿过等)时，所述系统可以解除会话。所述系统可以(附加地或替代地)感测用户的认知负荷并且基于该认知负荷而解除会话。所述系统可以改变其特性(例如，基于情境状态和/或用户状态接入精神上减压的会话(诸如讲笑话))。

【技术实现步骤摘要】
【国外来华专利技术】基于用户认知状态和/或情境状态的会话调整系统和方法相关申请的交叉引用本申请要求于2015年12月6日提交的美国临时专利申请序列号为62/263,682、名称为“SYSTEMANDMETHODOFCONVERSATIONALADJUSTMENTBASEDONUSER'SCOGNITIVESTATEAND/ORSITUATIONALSTATE”的权益，该美国临时专利申请的内容通过引用整体并入本文。
本专利技术涉及一种基于人类用户的认知状态和/或情境状态，特别是当用户正在操作交通工具时的认知状态和/或情境状态，调整人类用户与计算机之间的自然语言会话的系统和方法。
技术介绍
以自然方式促进人机交互是一个难题。非语音接口和某些语音接口往往过于结构化并且需要对接口有一定程度的熟悉度。使用自然语言发声(utterance)的人类与机器在各种环境下进行交互的能力仍然是理想的目标。但是，人类与机器在各种环境下的交互能够产生认知负荷，这可能会干扰其它任务(如操作交通工具)。因此，期望的是，系统确定何时应该延迟、阻止或以其它方式改变系统-人类会话。
技术实现思路
根据本专利技术的实现方式，解决由用户接入人机交互引起的潜在的过度认知负荷的本专利技术涉及基于人类用户的认知状态和/或情境状态调整人类用户与计算机之间的自然语言会话的系统和方法。交通工具内(in-vehicle)会话系统(例如在汽车中的系统)可以响应于各种情境状态和/或用户状态而采取一个或多个动作。例如，系统可以解除与人类用户(例如，驾驶员)的会话、改变系统的用于与驾驶员交互的特性、向驾驶员提供警报、和/或采取其它动作。在一个实现方式中，当系统检测到驾驶情况复杂(例如，汽车并入高速公路、右转的同时有多个行人试图穿过等)时，或者当存在危险情况(例如，附近有事故或道路施工、恶劣的天气和路况等)时，系统可以解除会话。所述系统可以通过全球定位系统(GPS)、计算机视觉、雷达传感器、交通数据、天气数据和/或其它信息来感测各种情境。通过终止对系统的语音输入能力、允许语音输入但延迟对语音输入的响应、和/或以其它方式中断或改变系统与用户的正常会话，可以解除会话。当驾驶情境恢复到正常状态时，系统可以重新接入会话。如果在对话期间会话被解除，则系统可以保持在延迟之前或期间接收到的上下文和任何发声，以便当会话重新接入时，系统(和用户)能够恢复会话，而不需要用户重复任何发声。所述系统可以通过将任何相关发声和上下文添加到会话堆栈中来这样做。替选地或附加地，当系统确定用户的认知负荷使得用户应该专注于驾驶而不是操作自然语言处理(NLP)系统时，该系统可以解除会话。系统可以基于与用户有关的传感器信息评估用户的认知负荷。例如，可以使用传感器信息通过语音分析来评估驾驶员的语音、通过皮肤电反应电极来评估排汗、通过基于来自内部摄像机的图像的瞳孔分析来评估警觉性或注意力、和/或使用其它用户传感器信息来评估驾驶员的状态。也可以从交通工具的传感器信息(例如，交通工具正在转入和转出道路行驶车道)以及从用户行为或生理状态的历史模型中推断用户的状态。例如，可以将驾驶时用户的典型注视(根据总体驾驶行程的平均值确定)与用户的当前注视进行比较，以确定用户是否正在注意道路。如果为否，则系统可以解除会话和/或采取其它动作。在一个实现方式中，系统可响应于某些情境状态或用户状态而改变其行为。例如，当通过各种传感器检测到用户困倦时，该系统可以接入精神上减压的(non-taxing)会话(例如，讲笑话)。在一些情况下，当确定用户困倦时，系统可以发起用于提供给用户的自然语言警报(例如，“也许你应该靠边停车并喝点咖啡”)。在参照附图考虑如下描述和所附权利要求之后，本文中所公开的系统和/或方法的这些和其它目的、特征和特性以及相关的结构元件的操作方法和功能以及制造部件和经济性的组合将变得更明显，所有的附图形成本说明书的一部分，其中，相同的附图标记在各图中指代对应部分。然而，要明确地理解，附图仅出于说明和描述的目的，且不意图作为本专利技术的限制的定义。如在说明书中和在权利要求中所使用，单数形式“一”和“该”包括复数个所指对象，除非上下文另有明确指示。附图说明图1示出了根据本专利技术的实现方式的基于人类用户的认知状态和/或情境状态来调整人类用户与计算机之间的自然语言会话的系统。图2描绘了根据本专利技术的实现方式的被配置为对发声执行自然语言处理的NLP系统。图3描绘了根据本专利技术的实现方式的被配置为评估人类用户的认知状态和/或情境状态并且基于该认知状态和/或情境状态来调整来自计算机的自然语言会话的会话管理系统。图4描绘了根据本专利技术的实现方式的基于用户的认知状态和/或情境状态，调整来自计算机和用户之间的自然语言会话中的计算机的响应。图5描绘了根据本专利技术的实现方式的基于人类用户的认知状态和/或情境状态，调整人类用户与计算机之间的自然语言会话的过程。具体实施方式本文描述的本专利技术涉及基于人类用户的认知状态和/或情境状态来调整人类用户和计算机之间的自然语言会话的系统和方法。如在下文中所使用的，“人类用户”和“用户”将在全文中可互换地使用。系统可以根据用户的认知状态和/或情境状态来调整NLP系统的会话。这允许系统根据(例如)用户是否分心和/或是否已经检测到危险的情境条件，针对与用户的会话来减少、增加、终止动作或采取其它调整动作。本文使用的各种示例将涉及用户的认知状态和/或情境状态的评估以及当用户正在操作交通工具时调整NLP系统与用户的会话。交通工具可以包括但不限于，可以由用户操作的汽车、飞机、火车、公共汽车、船舶和/或其它交通工具。贯穿本专利技术使用的示例旨在为了方便且清楚地示出，从而减少分心驾驶的情况(例如，通过减少或消除用户向NLP系统讲话的能力)或提高交通工具操作者在操作交通工具时的注意力(例如通过提供语音警报或其它警报)。然而，这些示例是非限制性的，因为如基于在这里的本专利技术而显而易见的，也可以基于用户的认知状态和/或情境状态，使用用于调整用户和计算机之间的会话的系统的其它用途和环境。示例性系统架构图1示出了根据本专利技术的实现方式的基于人类用户的认知状态和/或情境状态调整人类用户与计算机之间的自然语言会话的系统。在一个实现方式中，系统100可以包括计算机系统110、数据提供器120、输入/输出设备130、用户设备140、环境传感器150、用户传感器160、数据库104和/或其它部件。计算机系统110可以将计算机系统110配置为可被编程为基于人类用户的认知状态和/或情境状态来调整人类用户和计算机之间的自然语言会话的服务器(例如，具有一个或多个服务器刀锋、处理器等)、游戏控制台、手持式游戏设备、个人计算机(例如，台式计算机、膝上型计算机等)、智能手机、平板计算设备和/或其它设备。计算机系统110可以包括一个或多个处理器112(为了方便，在本文中也可以互换地称为多个处理器(processors)112、处理器(一个或多个)(processor(s))112或处理器(processor)112)、一个或多个存储设备114和/或其它部件。处理器112可以由一个或多个计算机程序指令进行编程。例如，处理器112可以由NLP系统106A、会话管理系统108A和/或对计算机系统110进行编程的其本文档来自技高网...

【技术保护点】
1.一种基于用户在操作交通工具时的用户认知状态和/或情境状态来调整用户和计算机之间的自然语言会话的计算机实现的方法，所述方法在具有用计算机程序指令编程的一个或多个物理处理器的计算机中实现，所述计算机程序指令在由所述一个或多个物理处理器执行时，使所述计算机执行所述方法，所述方法包括：在与所述用户的会话期间，由所述计算机接收来自所述用户的第一发声；由所述计算机获取与所述用户的至少第一生理特性有关的传感器信息；由所述计算机基于所述传感器信息确定所述用户的认知状态；由所述计算机基于所述用户的认知状态，确定是否解除与所述用户的会话；以及响应于确定解除与所述用户的会话，由所述计算机延迟对所述第一发声的响应。

【技术特征摘要】
【国外来华专利技术】2015.12.06 US 62/263,6821.一种基于用户在操作交通工具时的用户认知状态和/或情境状态来调整用户和计算机之间的自然语言会话的计算机实现的方法，所述方法在具有用计算机程序指令编程的一个或多个物理处理器的计算机中实现，所述计算机程序指令在由所述一个或多个物理处理器执行时，使所述计算机执行所述方法，所述方法包括：在与所述用户的会话期间，由所述计算机接收来自所述用户的第一发声；由所述计算机获取与所述用户的至少第一生理特性有关的传感器信息；由所述计算机基于所述传感器信息确定所述用户的认知状态；由所述计算机基于所述用户的认知状态，确定是否解除与所述用户的会话；以及响应于确定解除与所述用户的会话，由所述计算机延迟对所述第一发声的响应。2.根据权利要求1所述的方法，所述方法还包括：由所述计算机获取与所述用户的至少第二生理特性有关的第二传感器信息；由所述计算机基于所述第二传感器信息确定所述用户的第二认知状态；由所述计算机基于所述用户的所述第二认知状态，确定应当再次接入与所述用户的会话；以及由所述计算机再次接入与所述用户的会话，其中，再次接入包括提供对所述第一发声的响应。3.根据权利要求2所述的方法，所述方法还包括：在解除所述计算机与所述用户的会话时，由所述计算机接收来自所述用户的第二发声；以及由所述计算机将所述第二发声添加到包括所述第一发声的会话堆栈中，其中，由所述计算机再次接入与所述用户的会话包括处理所述第二发声以相关于所述第一发声确定所述第二发声的意图。4.根据权利要求1所述的方法，所述方法还包括：由所述计算机基于所述认知状态改变所述计算机的行为，而不是解除与所述用户的会话。5.根据权利要求4所述的方法，其中，改变所述行为包括：由所述计算机基于所述认知状态提供笑话。6.根据权利要求1所述的方法，所述方法还包括：由所述计算机获取与所述交通工具或所述交通工具的周围环境有关的信息；以及由所述计算机基于与所述交通工具或所述交通工具的周围环境有关的所述信息来确定所述情境状态，其中，还基于所述情境状态来确定是否解除与所述用户的会话。7.根据权利要求1所述的方法，其中，与所述交通工具或所述交通工具的周围环境有关的信息包括与指示需要提高驾驶员注意力的位置或方位有关的信息。8.根据权利要求7所述的方法，其中，与指示需要提高驾驶员注意力的位置或方位有关的所述信息包括指示所述用户正在驶入高速公路、所述用户在有行人的人行横道附近、所述用户邻近道路危险或所述用户的附近交通繁忙的信息。9.根据权利要求6所述的方法，所述方法还包括：由所述计算机基于所述用户的认知状态或基于所述情境状态向所述用户提...

【专利技术属性】
技术研发人员：菲利普·R·科恩，
申请(专利权)人：声钰科技，
类型：发明
国别省市：美国,US