[发明专利]用于语音命令情景的装置和方法

说明书

提供了一种用于移动钱包汇款的方法、电子设备和非暂时性计算机可读介质。该方法包括在显示器上显示包括对象的内容。该方法还包括确定显示器上的眼睛焦点的区域，并将眼睛焦点的区域与对象相关联。该方法额外地包括接收口语表达的命令并基于检测到的唇部运动的集合来得出命令。该方法还包括从与眼睛焦点相关联的对象、接收到的口语表达的命令或推导出的命令中的至少一者来提取情景信息。该方法还包括基于口语表达的命令与推导出的命令的调和以及提取出的情景信息来确定期望的命令。然后该方法执行所确定的期望的命令。

技术领域

本公开总体上涉及控制电子设备。更具体地，本公开涉及通过语音识别、唇部读取、眼睛焦点和情景信息的组合来控制电子设备。

背景技术

为了遵循更自然的方法，正在不断改进与计算设备进行交互并控制计算设备的方法。诸如个人计算机、智能电话、平板电脑、头戴式显示器等的计算设备利用显示屏幕上的图形用户界面(GUI)来方便用户进行控制。诸如文本、图像和视频的对象被显示在屏幕上，并且用户可以采用诸如键盘、鼠标、触摸板的各种设备来控制计算设备。许多GUI还可以包括触敏屏幕，由此当用户用手指或手写笔触摸显示屏幕时，GUI接收输入。此外，计算设备还可通过语音输入提供交互。

发明内容

技术问题

用于与计算设备进行交互并控制计算设备的许多此类方法通常需要用户物理地触摸屏幕或利用诸如键盘或鼠标之类的工具来提供快速且精确的输入。

问题的解决方案

本公开提供了用于语音命令情景的装置和方法的实施例。

在第一实施例中，提供了用于控制头戴式显示器的方法。该方法包括在显示器上显示包括对象的内容。该方法还确定显示器上的眼睛焦点的区域，并将眼睛焦点的区域与对象相关联。该方法还包括接收口语表达的命令。该方法还基于检测到的唇部运动的集合来推导出命令。该方法还包括从与眼睛焦点相关联的对象、接收到的口语表达的命令或推导出的命令中的至少一者来提取情景信息。该方法还基于口语表达的命令与推导出的命令的调和(reconciliation)以及提取出的情景信息来确定期望的命令。该方法还执行所确定的期望的命令。

在第二实施例中，提供了一种电子设备。至少一个处理器连接到显示器、通信接口和存储器，并且被配置为在显示器上显示包括对象的内容。该至少一个处理器还被配置为确定显示器上的眼睛焦点的区域，并将眼睛焦点的区域与对象相关联。该至少一个处理器还被配置为接收口语表达的命令并基于检测到的唇部运动的集合来推导出命令。该至少一个处理器还被配置为从与眼睛焦点相关联的对象、接收到的口语表达的命令或推导出的命令中的至少一者来提取情景信息。该至少一个处理器还被配置为基于口语表达的命令与推导出的命令的调和以及提取出的情景信息来确定期望的命令，并且执行所确定的期望的命令。

在第三实施例中，提供了包含计算机程序的非暂时性计算机可读介质。该计算机程序包括程序代码，该程序代码在被执行时使得至少一个处理器：接收请求以在显示器上显示包括对象的内容；确定显示器上的眼睛焦点的区域，并且将眼睛焦点的区域与对象相关联；接收口语表达的命令；基于检测到的唇部运动的集合推导出命令；从与眼睛焦点相关联的对象、接收到的口语表达的命令或推导出的命令中的至少一者中提取情景信息；基于口语表达的命令与推导出的命令的调和以及提取出的情景信息来确定期望的命令；以及执行所确定的期望的命令。

根据以下附图、说明书和权利要求书，其他技术特征对于本领域技术人员而言是显而易见的。