[发明专利]一种功能业务的操作方法、装置、终端设备及存储介质

说明书

本发明公开了一种功能业务的操作方法、装置、终端设备及存储介质。所述方法包括：获取功能业务的当前业务界面及待执行的操作指令；根据预先确定的目标操作模型，从所述当前业务界面中识别所述操作指令对应的待操作元素；确定所述待操作元素的操作位置，并在所述操作位置处执行所述操作指令。利用该方法，能够有效的提升功能业务自动化操作的适用性。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种功能业务的操作方法、装置、终端设备及存储介质。

背景技术

目前计算机在各行各业都承担着很重要的角色，在计算机上运行着可以满足使用者日常生活和工作业务需要的应用系统。应用系统往往包括多个功能业务，操作人员可以通过应用系统的人机交互界面对各功能业务进行操作，其具体可以对功能业务中显示在人机交互界面上的各待操作元素进行相应的操作。

目前，应用系统中需要处理的功能业务较多，仅靠操作人员手动操作很难实现实时操作，由此出现了通过程序自动化实现功能业务的操作来替代操作人员的手动操作。然而，目前应用系统都是可以跨平台运行的，现有的通过程序自动化对功能业务进行操作的操作方式往往仅适用于特定操作平台下的应用系统，很大程度限定了功能业务自动化操作的适用范围。

发明内容

本发明实施例提供了一种功能业务的操作方法、装置、终端设备及存储介质，以能够有效的提升功能业务自动化操作的适用性。

第一方面，本发明实施例提供了一种功能业务的操作方法，包括：

获取功能业务的当前业务界面及待执行的操作指令；

根据预先确定的目标操作模型，从所述当前业务界面中识别所述操作指令对应的待操作元素；

确定所述待操作元素的操作位置，并在所述操作位置处执行所述操作指令。

可选的，功能业务的操作方法，还包括：

构建并训练操作模型，获得目标操作模型。

可选的，所述构建并训练操作模型，获得目标操作模型，包括：

构建模型结构为卷积神经网络的操作模型；

基于所确定样本元素库中样本元素组训练所述操作模型，获得目标操作模型。

可选的，基于下述操作确定样本元素库：

获取所述功能业务的历史业务界面和对应的历史操作指令；

从所述历史业务界面中确定所述历史操作指令对应历史操作元素；

基于历史业务界面、历史操作指令及所述历史操作元素，形成一个样本元素组，并将所述样本元素组添加至样本元素库。

可选的，所述样本元素组包括：作为输入的样本业务界面及样本操作指令，作为对应输出的样本操作元素；

其中，所述样本业务界面包括：界面名称信息、路径信息、来源信息和界面尺寸信息；所述样本操作元素包括：元素名称信息和元素尺寸信息。

第二方面，本发明实施例还提供了一种功能业务的操作装置，包括：

获取模块，用于获取功能业务的当前业务界面及待执行的操作指令；

识别模块，用于根据预先确定的目标操作模型，从所述当前业务界面中识别所述操作指令对应的待操作元素；

确定模块，用于确定所述待操作元素的操作位置，并在所述操作位置处执行所述操作指令。

可选的，功能业务的操作装置，还包括：

训练模块，用于构建并训练操作模型，获得目标操作模型。

可选的，所述训练模块，具体用于：