[发明专利]基于图像的应用自动化

摘要

在一个实施方式中，基于图像的应用自动化系统检测与图形用户界面相关的输入事件，并将多个图像与该输入事件关联。来自该多个图像的每个图像包括输入事件发生在的该图形用户界面的至少一部分。

主权项

一种基于图像的应用自动化系统，包括：事件检测模块，用以在记录阶段期间检测与图形用户界面相关的输入事件；图像生成模块，用以在所述记录阶段期间生成图像，所述图像中的每一个图像包括图形用户界面的至少一部分；以及关联模块，用以在所述记录阶段期间将来自该图像的多个图像与来自输入事件的输入事件关联；选择模块，用于在所述记录阶段期间，输出包含所述多个图像的选择界面至显示器，响应于用户输入从所述多个图像中选择图像；该关联模块进一步用于，在所述记录阶段期间，从所述多个图像中指定所述图像作为所述输入事件的目标；定义标识所述输入事件和所述目标的自动化动作，所述自动化动作在重放阶段期间被重放。