[发明专利]基于捕捉到的笔画信息来与助理组件交互

摘要

本文描述了接收在用户使用输入捕捉设备输入手写笔记时捕捉到的笔画信息的计算机实现的技术。该技术然后自动地对捕捉到的笔画信息执行分析以产生输出分析信息。基于该输出分析信息，该技术使用助理组件来标识对捕捉到的笔画信息的响应和/或标识要执行的动作。该技术然后与捕捉到的原始笔画信息一起呈现该响应。附加地或替换地，该技术执行该动作。在一种情形中，该响应是基于文本的响应；该基于文本的响应可以按自由形式的手写样式呈现以给予用户虚拟助理正在响应该用户自己的笔记的印象。在另一情形中，该响应使用户参与任何类型的交互式活动。

主权项

1.一种用于存储计算机可读指令的计算机可读存储介质，所述计算机可读指令在由一个或多个处理设备执行时执行一种方法，包括：从输入捕捉设备接收捕捉到的笔画信息，所述输入捕捉设备响应于捕捉到由用户在与所述输入捕捉设备相关联的输入表面上做出的徒手墨水笔画来产生所述捕捉到的笔画信息；将所述捕捉到的笔画信息变换成识别出的笔画信息；自动对所述识别出的笔画信息执行分析以生成输出分析信息；基于所述输出分析信息来标识对所述捕捉到的笔画信息的响应，和/或基于所述输出分析信息来标识将要执行的动作，而不由所述用户提示这样做；在画布显示设备上显示所述捕捉到的笔画信息；以及向所述用户呈现所述响应和/或执行所述动作。