[发明专利]基于AI语音的终端控制方法、终端设备和存储介质

说明书

本发明提供一种基于AI语音的终端控制方法、终端设备和存储介质，其中，基于AI语音的终端控制方法，包括：获取语音信息；根据终端设备用户的电话号码归属地或终端设备当下所处位置调出预建立的相应语音数据库，语音数据库根据不同地区的口音和/或不同语种建立；将语音信息与调出的相应语音数据库对比，识别筛选可用于终端控制的语音信息；根据筛选出的语音信息，从当前界面所包含的控件中确定与筛选出的语音信息匹配的控件；生成对控件的控制指令；执行控制指令，以控制控件进行相应操作。通过从当前显示窗口所包含的控件中，确定与用于进行语音控制的语音信息匹配的控件，实现了对终端设备显示界面和各个应用的语音控制。

技术领域

本发明涉及到语音控制技术领域，特别是涉及到一种基于AI语音的终端控制方法、终端设备和存储介质。

背景技术

随着语音识别技术的发展，如何利用语音识别技术实现对终端设备的语音控制已经成为了研究热点。

目前，终端设备主要是基于自带的语音助手或特定的APP软件应用来实现对某些特定功能的语音控制。例如通过语音助手终端设备可以实现语音拨打电话，语音编辑短息，语音输入搜索请求等功能。然而，相对于日益增长的用户需求而言，目前终端设备的语音控制功能还比较单一，用户不能通过语音控制终端显示界面和各个应用软件，无法满用户的需求。

发明内容

本发明的主要目的为提供一种基于AI语音的终端控制方法、终端设备和存储介质，旨在解决用户不能通过语音控制手机界面和各个应用软件的问题。

为了实现上述目的，本发明提出一种基于AI语音的终端控制方法，包括：

获取语音信息；

根据终端设备用户的电话号码归属地或终端设备当下所处位置调出预建立的相应语音数据库，语音数据库根据不同地区的口音和/或不同语种建立；

将语音信息与调出的相应语音数据库对比，识别筛选可用于终端控制的语音信息；

根据筛选出的语音信息，从当前界面所包含的控件中确定与筛选出的语音信息匹配的控件；

生成对控件的控制指令；

执行控制指令，以控制控件进行相应操作。

进一步地，根据筛选出的语音信息，从当前界面所包含的控件中确定与筛选出的语音信息匹配的控件，包括：

根据筛选出的语音信息，生成对应的文本；

识别出文本中的关键字，并获取当前界面的控件信息；关键字包括控件名称和操作方式，当前界面的控件信息包括控件名称和操作方式；

将关键字中与当前界面的控件信息中对应的控件名称和/或操作方式进行匹配。

进一步地，识别出文本中的关键字的步骤，包括：

将文本与预先建立的关键字模型进行对比；

筛选出文本中与关键字模型中一致的文字作为关键字。

进一步地，获取当前界面的控件信息的步骤，包括：

判断当前界面包含的控件中是否存在无标识属性的控件；

若存在，对无标识属性的控件临时赋予标识信息。

进一步地，标识信息为数字信息。

进一步地，执行控制指令，以控制控件进行相应操作的步骤之后，包括：

删除临时赋予的标识信息。

进一步地，执行控制指令，以控制控件进行相应操作的步骤，包括：

根据所确定的与语音信息匹配的控件，获取控件在当前屏幕的坐标点；