[发明专利]智能终端上应用程序的运行方法、终端和存储介质

权利要求书

1.一种智能终端上应用程序的运行方法，其特征在于，所述智能终端至少包括一个服务项，所述服务项中包括指令生成模块、位置确定模块、动作执行模块，所述方法包括：

所述指令生成模块接收向智能终端进行输入的语音指令，并将所述语音指令转化为控制指令，其中，所述语音指令被配置有对应的文本指令，所述文本指令被配置有对应的指令标识图像；

所述位置确定模块无法通过语音指令确定待运行的应用程序在所述智能终端的当前屏幕中的程序位置坐标的情况下，所述位置确定模块通过所述指令标识图像确定待运行的应用程序在所述智能终端的当前屏幕中的程序位置坐标；

所述动作执行模块根据所述程序位置坐标对所述待运行的应用程序执行所述控制指令。

2.根据权利要求1所述的方法，其特征在于，在所述应用程序被所述控制指令启动之后，所述位置确定模块通过所述指令标识图像确定待执行控件在智能终端的当前屏幕中的控件位置坐标；

所述动作执行模块根据所述控件位置坐标对所述应用程序中的待执行控件执行所述控制指令。

3.根据权利要求2所述的方法，其特征在于，所述服务项还包括目标控件确定模块，所述方法还包括：

若存在所述文本指令对应的指令标识图像，则所述目标控件确定模块将所述指令标识图像与当前屏幕中执行的应用程序中的各个控件的控件标识图像进行匹配，将与所述指令标识图像匹配的控件标识图像对应的控件作为待执行控件；

所述位置确定模块确定所述待执行控件的控件位置坐标。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

若不存在所述文本指令对应的指令标识图像，则所述目标控件确定模块将所述文本指令与当前屏幕中执行的应用程序中的各个控件的控件标识文本进行匹配，将与所述文本指令匹配的控件标识文本对应的控件作为待执行控件。

5.根据权利要求4所述的方法，其特征在于，所述目标控件确定模块将所述文本指令与当前屏幕中执行的应用程序中的各个控件的控件标识文本进行匹配，包括：

所述目标控件确定模块将所述文本指令与文本控件信息集合中的控件标识文本进行匹配；

若所述文本控件信息集合中不存在与所述文本指令匹配的控件标识文本，则所述目标控件确定模块将所述文本指令与图像控件信息集合中的图像转换文本进行匹配，所述图像转换文本是对所述图像控件信息集合中的控件标识图像进行文本识别得到的；

所述图像控件信息集合是基于自身不包含文本的控件构建的，所述文本控件信息集合是基于自身包含文本的控件构建的。

6.根据权利要求5所述的方法，其特征在于，所述目标控件确定模块将所述文本指令与文本控件信息集合中的控件标识文本进行匹配，包括：

所述目标控件确定模块基于所述文本指令与任一控件标识文本之间的相互包含关系，以及所述文本指令与所述任一控件标识文本的字符数，确定所述文本指令与所述任一控件标识文本之间的相似度；

所述目标控件确定模块基于所述文本指令与各个控件标识文本之间的相似度，确定所述文本指令与各个控件标识文本之间的匹配结果。

7.根据权利要求3所述的方法，其特征在于，所述目标控件确定模块将所述指令标识图像与当前屏幕中执行的应用程序中的各个控件的控件标识图像进行匹配，包括：

所述目标控件确定模块将所述指令标识图像与图像控件信息集合中的控件标识图像进行匹配；

若所述图像控件信息集合中不存在与所述指令标识图像匹配的控件标识图像，则所述目标控件确定模块将所述指令标识图像与文本控件信息集合中的控件标识图像进行匹配；

所述图像控件信息集合是基于自身不包含文本的控件构建的，所述文本控件信息集合是基于自身包含文本的控件构建的。