[发明专利]用于面向任务的对话的全局到本地存储器指针网络

说明书

提供了一种用于为用户和计算机之间的对话生成应答的系统和相应的方法。系统包括存储对话历史和知识库的信息的存储器。编码器可以接收来自用户的新话语并且生成用于过滤存储器中的知识库信息的全局存储器指针。解码器可以为新话语生成至少一个本地存储器指针和草稿应答。草稿应答包括要由来自存储器的知识库信息替换的至少一个草稿标签。系统使用本地存储器指针，从过滤的知识库信息中选择词语来替换草稿应答中的至少一个草稿标签，从而生成对话计算机应答。

相关申请

本申请要求2018年9月27日提交的美国临时专利申请号 62/737,234和2018年10月30日提交的美国非临时专利申请号 16/175,639的优先权，其全部内容通过引用并入本文。

版权通知

本专利文献的披露内容的一部分包含受版权保护的材料。版权所有者不反对任何人对本专利文件或专利披露的传真复制，只要其是出现在专利商标局专利文件或记录中，但在其他情况下保留所有版权。

技术领域

本申请总体上涉及对话系统，并且更具体地涉及使用用于面向任务的对话(task-oriented dialogue)的全局到本地(global to local)存储器指针网络。

背景技术

已经开发了面向任务的对话系统来实现特定的用户目标，例如预定餐厅、找到感兴趣的地方、帮助导航或驾驶方向等。通常，对这些对话系统的用户查询限于通过自然语言输入或提供的相对较小的对话词语或话语集合。传统的面向任务的对话解决方案是利用用于自然语言理解、对话管理和自然语言生成的技术来实现的，其中为特定目的或任务单独地并且以某种代价来定制每个模块。

附图说明

图1是根据一些实施例的计算设备的简化图。

图2是根据一些实施例的全局本地存储器指针模型或网络的简化图。

图3是根据一些实施例的外部知识存储器的简化图。

图4是根据一些实施例的用于编码对话历史和知识库的编码器的简化图。

图5是根据一些实施例的解码器的简化图。

图6示出了根据一些实施例的知识库和对话历史的示例表。

图7是根据一些实施例的用于全局本地存储器指针模型或网络的方法的简化图。

图8和图9示出了将全局本地存储器指针模型或网络与基线相比较的示例表。

图10示出了示出全局本地存储器指针模型或网络对性能的贡献的示例表。

图11是SMD导航域中的存储器注意力可视化的示例。

图12示出了示出针对不同跳跃所选择的超参数的示例表(hops)。

图13示出了示出全局本地存储器指针模型或网络与其他基线相比的适当性和人类相似性的得分的示例图表。

在附图中，具有相同标号的元件具有相同或相似的功能。

具体实施方式

说明方面、实施例、实施方案或应用的说明和附图不应被视为限制。权利要求书限定受保护的发明。在不偏离本说明书和权利要求书的精神和范围的情况下，可以进行各种机械的、组成的、结构的、电气的和操作的改变。在一些情况下，没有详细示出或描述公知的电路、结构或技术，因为这些是本领域技术人员已知的。两个或多个图中的相同数字表示相同或相似的元件。