[发明专利]具有自适应响应生成的AI驱动的个人助理

说明书

一种个人助理系统和方法。个人助理电子设备接收指示查询的输入数据，该查询说明了来自环境内的用户的请求。背景处理引擎建立查询的背景，该引擎将经训练的模型应用于输入数据，以识别与查询相关联的个人线索和环境线索。响应生成器基于请求、查询背景和用户的响应简档生成响应消息，响应简档说明了用户的一个或更多个偏好，一个或更多个偏好中的每一个偏好与响应生成器响应来自用户的请求的方式相关联，一个或更多个偏好中的每一个偏好由响应生成器响应于来自用户对先前响应消息的反馈来设置。

技术领域

本公开总体涉及计算系统，且更具体地，涉及虚拟个人助理系统。

背景

虚拟个人助理基于命令或查询为用户执行任务或服务。例如，虚拟个人助理用于响应于口头查询而获得信息，基于用户命令控制家庭自动化，以及管理个人日历、待办事项列表和电子邮件。例如，虚拟个人助理可以在智能手机和智能扬声器、尤其突出的是在基于语音的用户界面中实现。

概述

总的来说，本公开描述了识别音频命令并且用个性化响应来响应音频命令的虚拟个人助理系统。在一个示例中，虚拟个人助理系统确定来自用户的口头查询的背景，并基于该背景向用户提供个性化响应。在一个示例方法中，虚拟个人助理系统通过将经训练的模型应用于输入数据以识别与查询相关联的个人线索和环境线索来确定查询的背景(“查询背景”)，且然后基于查询背景和针对用户的响应简档为用户精心制作个性化响应。虚拟个人助理系统可以包括个人助理电子设备，诸如智能手机或智能扬声器，其接收说明了来自用户的请求的查询。

更具体地，本公开描述了由人工智能(AI)驱动的虚拟个人助理系统，该系统应用一个或更多个AI模型以基于建立的背景来向用户生成响应。例如，系统可以使响应的内容适应描述查询的传递的参数，诸如口头查询的长度、音调、语音模式、音量、嗓音(voice)或语速。例如，通过将一个或更多个AI模型应用于由用户发出的查询，系统可以确定用户有急事、有某种情绪、在户外、在室内、被人群包围、独自一人等。在一些示例中，基于捕获的音频和/或视频，系统可以确定用户与特定的个人(例如，伙伴、朋友或老板)在一起，并且使响应适应于此。作为附加示例，系统可以确定用户日历上安排的未来事件，并基于安排的未来事件修改对给定查询的响应的内容。系统可以访问用户的社交媒体，以获得除了那些通过对查询的分析所识别的个人线索之外的个人线索。

在一个示例中，虚拟个人助理包括：个人助理电子设备，其接收指示查询的输入数据，该查询说明了来自环境内的用户的请求；背景处理引擎，其被配置成建立查询的背景，该引擎将经训练的模型应用于输入数据，以识别与查询相关联的个人线索和环境线索；以及响应生成器，其被配置成基于请求、查询背景和针对用户的响应简档来输出响应消息，响应简档说明了用户的一个或更多个偏好，一个或更多个偏好中的每一个偏好与响应生成器响应来自用户的请求的方式相关联，一个或更多个偏好中的每一个偏好由响应生成器响应于来自用户对先前响应消息的反馈来设置。

在一些实施例中，背景处理引擎和响应生成器可以在个人助理电子设备的处理器上执行。

在一些实施例中，背景处理引擎和响应生成器可以在个人助理电子设备外部的处理器上执行。

在一些实施例中，个人助理电子设备的至少一个输入源可以包括麦克风，并且指示查询的输入数据包括音频数据。

在一些实施例中，个人助理电子设备的至少一个输入源还可以包括相机，并且输入数据还包括与音频数据同时捕获的图像数据。

在一些实施例中，背景处理引擎可以被配置成将一个或更多个经训练的模型应用于输入数据，以基于以下中的任一项来确定环境线索：(i)噪声水平，(ii)在用户附近的人的存在，(iii)用户是否存在于一组预定义用户中的一个或更多个预定义用户中，(iv)位置，(v)位置传音性(location acoustics)，(vi)隐私程度，以及(vii)一天中的时间。