[发明专利]克服像素点定位限制的系统、方法、装置及可读存储介质

说明书

本发明提供了一种克服像素点定位限制的系统、方法、装置及可读存储介质，本发明以OCR技术与相对位置适配技术为核心，来解决RPA机器人在C/S端配置时元素定位的问题。可以在PRA机器人C/S端应用的初次配置上，大大降低配置时间，从而提升了开发效率。并且避免了因为像素变化而导致的功能失效问题。

【技术领域】

本发明涉及计算机文字处理技术领域，尤其涉及一种基于RPA本地客户端设置的，克服像素点定位限制的系统、方法、装置及可读存储介质。

【背景技术】

目前的RPA技术，在B/S端可以通过页面元素标签完成定位问题，然而对于C/S端，普遍上对于精确位置定位只能选择捕捉像素点的方式进行定位。而通过像素点定位位置存在诸多的问题，例如在测试端的屏幕像素与生产端的屏幕像素不一致，那么这个不一致的问题就会导致RPA的定位偏离，丧失设计好的功能。如果客户更换了显示器，同样会产生像素变化的问题，那么此前所设计的功能均会因此产生很大的负面影响。此外，在通过像素点位置进行RPA初期功能配置的时候，也会非常的繁琐，需要保证每一次的位置是准确的，并且需要频繁的在各个位置进行点击，大大降低了配置效率。因此，就目前市场上的RPA产品，在C/S端的RPA初次配置时，对个人用户或是开发者来讲，都会遇到配置效率低下的问题。

因此，有必要研究一种克服像素点定位限制的系统、方法、装置及可读存储介质来应对现有技术的不足，以解决或减轻上述一个或多个问题。

【发明内容】

有鉴于此，本发明提供了一种克服像素点定位限制的系统、方法、装置及可读存储介质，本发明以OCR技术与相对位置适配技术为核心，来解决RPA机器人在C/S端配置时元素定位的问题。可以在PRA机器人C/S端应用的初次配置上，大大降低配置时间，从而提升了开发效率。并且避免了因为像素变化而导致的功能失效问题。

一方面，本发明提供一种克服像素点定位限制系统，所述系统基于RPA本地客户端设置，所述系统包括：

图像信息获取模块，用于获得目标操作界面的截图和屏幕分辨率；

标注框处理模块，用于对目标操作界面中需要操作的目标进行框选标注；

编号处理模块，对框选标注对象生成唯一顺序的id编号；

标记处理模块，通过对截图中标注框进行识别，并在标注框的中心点处生成标记点；

坐标处理模块，对标注框和标记点进行相对坐标计算，并根据屏幕分辨率进行适应性缩放；

RPA配置模块，用于对RPA机器人的C/S端进行配置。

如上所述的方面和任一可能的实现方式，进一步提供一种克服像素点定位限制的方法，所述方法包括以下步骤：

S1：通过截屏和数据读取，获得目标操作界面的图像信息；

S2：在图像信息中对目标元素进行标注框处理；

S3：对标注框进行编号处理；

S4：对标注框进行图像识别并进行标记处理；

S5：对标记处理的标注框进行相对坐标计算；

S6：根据S1中的图像信息进行相对坐标缩放；

S7：对RPA机器人的C/S端进行配置。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述S1中截屏获得目标操作界面的图像信息为截图。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述S1中数据读取获得目标操作界面的图像信息为目标操作界面的屏幕分辨率。