[发明专利]基于多模态客户端设备的模态的动态列表构成

权利要求书

1.一种由一个或多个处理器实现的方法，所述方法包括：

接收由多模态客户端设备的用户提供的用户接口输入的一个或多个实例；

基于对所述用户接口输入的处理，确定多个项的列表是响应于所述用户接口输入的；

至少部分地基于来自所述多模态客户端设备的一个或多个传感器的传感器数据，确定所述多模态客户端设备的当前模态，

其中，基于其确定了所述当前模态的所述传感器数据不同于由用户接口输入的所述一个或多个实例生成的任何传感器数据；

基于所述列表的列表属性来确定要渲染的所述列表的第一子集，其中，所述列表属性包括所述列表中的项的数量和所述列表中的每个项中的字符的数量，并且其中，基于所述列表的所述列表属性来确定要渲染的所述列表的所述第一子集包括：

在所述当前模态是第一模态时，基于所述列表中的项的数量、所述列表中的每个项中的字符的数量以及所述当前模态是所述第一模态来确定所述多个项中的第一子组，

其中，所述第一模态是仅语音模态、仅视觉模态和多模态的模态中的一个，并且

在所述当前模态是不同于所述第一模态的第二模态时，基于所述列表中的项的数量、所述列表中的每个项中的字符的数量以及所述当前模态是所述第二模态来确定所述多个项中的第二子组，其中，所述多个项中的所述第二子组不同于所述多个项中的所述第一子组，

其中，所述第二模态是所述仅语音模态、所述仅视觉模态和所述多模态的模态中的另一个；以及

使所述列表的所述第一子集由所述多模态客户端设备的一个或多个用户接口输出设备渲染，其中，在所述列表的所述第一子集是交互式列表时，使所述列表的所述第一子集由所述多模态客户端设备的一个或多个用户接口输出设备渲染包括：

使所述交互式列表的第一交互项而无需使所述交互式列表的第二交互项由所述用户接口输出设备中的一个或多个渲染给所述用户；

在渲染所述第一交互项之后的阈值持续时间内监视与所述第一交互项交互的附加用户输入，以及

响应于在渲染所述第一交互项之后监视期间没有接收到附加用户输入，使所述交互式列表的第二交互项被所述多模态客户端设备的所述用户接口输出设备中的一个或多个渲染给所述用户。

2.根据权利要求1所述的方法，还包括：

在接收到所述多模态客户端设备的所述用户响应于由所述一个或多个用户接口输出设备渲染的询问而提供的肯定用户输入的一个或多个实例时，其中所述询问提问是否应该渲染所述列表的附加子集：

基于所述一个或多个列表属性并且基于所述客户端设备的所述当前模态，确定要渲染的所述列表的第二子集；以及

使所述列表的所述第二子集由所述多模态客户端设备的所述一个或多个用户接口输出设备渲染。

3.根据权利要求2所述的方法，还包括：

从远程服务器接收非结构化列表，其中，所述非结构化列表由第三方提供并且不具有列表属性；以及

处理所述非结构化列表以确定一个或多个列表属性以用于确定要渲染的所述列表的所述第一子集。

4.根据权利要求1所述的方法，其中，所述列表由所述多模态客户端设备从远程服务器接收，并且其中，生成所述列表的所述第一子集是由所述多模态客户端设备进行的。

5.根据权利要求4所述的方法，其中，响应于由所述多模态客户端设备传输至所述远程服务器的基于所述用户接口输入的请求，所述列表由所述多模态客户端设备从所述远程服务器接收，并且其中，确定所述多模态客户端设备的所述当前模态是由所述多模态客户端设备进行的并且在所述请求的传输之后发生。

6.根据权利要求1所述的方法，其中，所述当前模态是所述仅语音模态，并且所述列表的所述第一子集仅经由所述一个或多个用户接口输出设备的一个或多个扬声器来渲染。

7.根据权利要求1所述的方法，其中，所述当前模态是所述多模态的模态，并且所述列表的所述第一子集经由所述一个或多个用户接口输出设备的一个或多个扬声器以及经由所述一个或多个用户接口输出设备的触摸屏来渲染。