[发明专利]用户界面的语音控制方法、装置、电子设备及存储介质

权利要求书

1.一种用户界面的语音控制方法，其特征在于，包括：

根据获取到的语音信息确定文本信息；

根据所述文本信息以及待控制用户界面中的特征信息生成控制指令，其中，所述特征信息为所述待控制用户界面中各个控件所对应的特性信息；

响应于所述控制指令，触发所述待控制用户界面中所述控制指令对应的待控制控件。

2.根据权利要求1所述的用户界面的语音控制方法，其特征在于，所述根据所述文本信息以及待控制用户界面中的特征信息生成控制指令，包括：

根据所述文本信息以及所述待控制用户界面中的所述特征信息确定所述待控制控件；

根据所述文本信息以及所述待控制控件的控件类型生成所述控制指令。

3.根据权利要求2所述的用户界面的语音控制方法，其特征在于，所述特征信息包括所述待控制用户界面中各个控件的名称；

相应的，所述根据所述文本信息以及所述待控制用户界面中的所述特征信息确定所述待控制控件，包括：

根据所述文本信息中的第一文本以及所述待控制用户界面中各个控件的名称确定所述待控制控件，其中，所述第一文本包括所述待控制控件的名称中的关键字。

4.根据权利要求3所述的用户界面的语音控制方法，其特征在于，所述根据所述文本信息以及所述待控制控件的控件类型生成所述控制指令，包括：

若所述待控制控件的控件类型为输入框控件，则根据所述文本信息中的第二文本确定输入指令；

对应的，所述响应于所述控制指令，触发所述待控制用户界面中所述控制指令对应的待控制控件，包括：

响应于所述输入指令，在所述待控制用户界面中的待输入框中输入所述第二文本。

5.根据权利要求3所述的用户界面的语音控制方法，其特征在于，所述根据所述文本信息以及所述待控制控件的控件类型生成所述控制指令，包括：

若所述待控制控件的控件类型为选择控件，则根据所述文本信息中的第二文本确定选择指令；

对应的，所述响应于所述控制指令，触发所述待控制用户界面中所述控制指令对应的待控制控件，包括：

响应于所述选择指令，在所述待控制用户界面中的待选择框中选中与所述第二文本对应的选项。

6.根据权利要求3所述的用户界面的语音控制方法，其特征在于，所述根据所述文本信息以及所述待控制控件的控件类型生成所述控制指令，包括：

若所述待控制控件的控件类型为点击控件，则根据所述第一文本确定点击指令；

对应的，所述响应于所述控制指令，触发所述待控制用户界面中所述控制指令对应的待控制控件，包括：

响应于所述点击指令，触发所述待控制用户界面中的所述点击指令对应的待点击控件。

7.根据权利要求1-6中任意一项所述的用户界面的语音控制方法，其特征在于，在所述根据获取到的语音信息确定文本信息之前，还包括：

获取用户输入的所述语音信息；

获取用户面部的图像信息，并根据所述语音信息与所述图像信息生成唤醒指令，所述唤醒指令用于唤醒语音服务。

8.根据权利要求7所述的用户界面的语音控制方法，其特征在于，所述根据所述语音信息与所述图像信息生成唤醒指令，包括：

根据所述图像信息确定唇动频率；

若所述语音信息与所述唇动频率相匹配，则生成所述唤醒指令。

9.根据权利要求1-6中任意一项所述的用户界面的语音控制方法，其特征在于，在所述根据获取到的语音信息确定文本信息之后，还包括：

根据所述文本信息以及语言环境信息确定反馈信息，其中，所述语言环境信息包括所述文本信息对应的多个意图信息，所述反馈信息为所述多个意图信息中服务请求置信度最高的意图信息；

输出所述反馈信息。