[发明专利]结合AI和RPA的远程控制方法、装置、电子设备及介质

权利要求书

1.一种结合人工智能AI和机器人流程自动化RPA的远程控制方法，其特征在于，应用于主控终端，包括：

控制RPA机器人在所述主控终端上安装自动化流程服务程序；其中，所述自动化流程服务程序用于操作流程的创建和执行；

控制RPA机器人将所述自动化流程服务程序对应的流程服务扩展管理程序发送至被控终端，以使所述被控终端安装所述流程服务扩展管理程序；

控制RPA机器人对所述被控终端进行远程控制，以根据所述流程服务扩展管理程序获取界面可操作元素；

控制RPA机器人根据所述自动化流程服务程序对所述界面可操作元素进行操作流程的创建和执行。

2.根据权利要求1所述的方法，其特征在于，所述以根据所述流程服务扩展管理程序获取界面可操作元素，包括：

控制所述被控终端通过流程服务扩展管理程序对扩展程序进行管理，并控制所述被控终端通过所述扩展程序结合自然语言处理技术NLP和/或光学字符识别技术OCR获取所述界面可操作元素；

控制所述被控终端将所述界面可操作元素发送至所述主控终端。

3.根据权利要求1所述的方法，其特征在于，所述控制RPA机器人将所述自动化流程服务程序对应的流程服务扩展管理程序发送至被控终端，包括：

控制RPA机器人在所述主控终端与所述被控终端之间建立虚拟通道；

控制RPA机器人将所述自动化流程服务程序通过所述虚拟通道将所述自动化流程服务程序对应的流程服务扩展管理程序发送至所述被控终端。

4.根据权利要求2所述的方法，其特征在于，所述扩展程序包括以下扩展程序中的至少一种：Chrome扩展、FireFox扩展、Java扩展、Windows远程桌面扩展和Citrix扩展。

5.根据权利要求3所述的方法，其特征在于，所述方法还包括：

在所述操作流程的创建和执行完成时，关闭所述虚拟通道并释放所述虚拟通道分配的资源。

6.一种结合人工智能AI和机器人流程自动化RPA的远程控制方法，其特征在于，应用于被控终端，包括：

接收所述主控终端通过所述RPA机器人发送的流程服务扩展管理程序并安装所述流程服务扩展管理程序；

根据所述流程服务扩展管理程序，获取界面可操作元素；

将所述界面可操作元素发送至所述主控终端，以控制RPA机器人根据所述自动化流程服务程序对所述界面可操作元素进行操作流程的创建和执行。

7.一种结合人工智能AI和机器人流程自动化RPA的远程控制装置，其特征在于，应用于主控终端，包括：

安装模块，用于控制RPA机器人在所述主控终端上安装自动化流程服务程序；其中，所述自动化流程服务程序用于操作流程的创建和执行；

发送模块，用于控制RPA机器人将所述自动化流程服务程序对应的流程服务扩展管理程序发送至被控终端，以使所述被控终端安装所述流程服务扩展管理程序；

控制模块，用于控制RPA机器人对所述被控终端进行远程控制，以根据所述流程服务扩展管理程序获取界面可操作元素；

处理模块，用于控制RPA机器人根据所述自动化流程服务程序对所述界面可操作元素进行操作流程的创建和执行。

8.根据权利要求7所述的装置，其特征在于，所述控制模块，用于：

控制所述被控终端通过流程服务扩展管理程序对扩展程序进行管理，并控制所述被控终端通过所述扩展程序结合自然语言出来技术NLP和/或光学字符识别技术OCR获取所述界面可操作元素；

控制所述被控终端将所述界面可操作元素发送至所述主控终端。

9.根据权利要求8所述的装置，其特征在于，所述发送模块，用于：

控制RPA机器人在所述主控终端与所述被控终端之间建立虚拟通道；

控制RPA机器人将所述自动化流程服务程序通过所述虚拟通道将所述自动化流程服务程序对应的流程服务扩展管理程序发送至被控终端。