[发明专利]基于用户认知状态和/或情境状态的会话调整系统和方法

说明书

提供了一种特别是当用户正在操作交通工具时基于人类用户的认知状态和/或情境状态来调整人类用户与计算机之间的自然语言会话的系统和方法。所述系统可以基于各种情境状态和/或用户状态而解除与所述用户(例如，驾驶员)的会话或采取其它动作。例如，当所述系统检测到驾驶情况复杂(例如，汽车并入高速公路、右转的同时有多个行人试图穿过等)时，所述系统可以解除会话。所述系统可以(附加地或替代地)感测用户的认知负荷并且基于该认知负荷而解除会话。所述系统可以改变其特性(例如，基于情境状态和/或用户状态接入精神上减压的会话(诸如讲笑话))。

相关申请的交叉引用

本申请要求于2015年12月6日提交的美国临时专利申请序列号为62/263,682、名称为“SYSTEM AND METHOD OF CONVERSATIONAL ADJUSTMENT BASED ON USER'S COGNITIVESTATE AND/OR SITUATIONAL STATE”的权益，该美国临时专利申请的内容通过引用整体并入本文。

技术领域

本发明涉及一种基于人类用户的认知状态和/或情境状态，特别是当用户正在操作交通工具时的认知状态和/或情境状态，调整人类用户与计算机之间的自然语言会话的系统和方法。

背景技术

以自然方式促进人机交互是一个难题。非语音接口和某些语音接口往往过于结构化并且需要对接口有一定程度的熟悉度。使用自然语言发声(utterance)的人类与机器在各种环境下进行交互的能力仍然是理想的目标。但是，人类与机器在各种环境下的交互能够产生认知负荷，这可能会干扰其它任务(如操作交通工具)。因此，期望的是，系统确定何时应该延迟、阻止或以其它方式改变系统-人类会话。

发明内容

根据本发明的实现方式，解决由用户接入人机交互引起的潜在的过度认知负荷的本发明涉及基于人类用户的认知状态和/或情境状态调整人类用户与计算机之间的自然语言会话的系统和方法。

交通工具内(in-vehicle)会话系统(例如在汽车中的系统)可以响应于各种情境状态和/或用户状态而采取一个或多个动作。例如，系统可以解除与人类用户(例如，驾驶员)的会话、改变系统的用于与驾驶员交互的特性、向驾驶员提供警报、和/或采取其它动作。

在一个实现方式中，当系统检测到驾驶情况复杂(例如，汽车并入高速公路、右转的同时有多个行人试图穿过等)时，或者当存在危险情况(例如，附近有事故或道路施工、恶劣的天气和路况等)时，系统可以解除会话。所述系统可以通过全球定位系统(GPS)、计算机视觉、雷达传感器、交通数据、天气数据和/或其它信息来感测各种情境。通过终止对系统的语音输入能力、允许语音输入但延迟对语音输入的响应、和/或以其它方式中断或改变系统与用户的正常会话，可以解除会话。当驾驶情境恢复到正常状态时，系统可以重新接入会话。如果在对话期间会话被解除，则系统可以保持在延迟之前或期间接收到的上下文和任何发声，以便当会话重新接入时，系统(和用户)能够恢复会话，而不需要用户重复任何发声。所述系统可以通过将任何相关发声和上下文添加到会话堆栈中来这样做。

替选地或附加地，当系统确定用户的认知负荷使得用户应该专注于驾驶而不是操作自然语言处理(NLP)系统时，该系统可以解除会话。系统可以基于与用户有关的传感器信息评估用户的认知负荷。例如，可以使用传感器信息通过语音分析来评估驾驶员的语音、通过皮肤电反应电极来评估排汗、通过基于来自内部摄像机的图像的瞳孔分析来评估警觉性或注意力、和/或使用其它用户传感器信息来评估驾驶员的状态。也可以从交通工具的传感器信息(例如，交通工具正在转入和转出道路行驶车道)以及从用户行为或生理状态的历史模型中推断用户的状态。例如，可以将驾驶时用户的典型注视(根据总体驾驶行程的平均值确定)与用户的当前注视进行比较，以确定用户是否正在注意道路。如果为否，则系统可以解除会话和/或采取其它动作。