[发明专利]记录和重新创建界面导航过程

权利要求书

1.一种方法，包括：

由计算机系统从由用户执行的手动界面导航过程接收描述所述用户与一个或多个用户界面(UI)元素之间的多个交互的信息，所述手动界面导航过程包括在主机系统的多个UI状态之中的导航，所述导航从所述多个UI状态中的初始UI状态和所述多个UI状态中的最终UI状态开始；

基于所述多个交互来确定界面导航记录的一个或多个步骤，所述一个或多个步骤中的每个步骤可由所述计算机系统执行，以利用所述主机系统的所述多个UI状态中的UI状态来重新创建所述多个交互中的至少一个交互；以及

将所述界面导航记录存储在所述计算机系统处。

2.根据权利要求1所述的方法，还包括：

基于白名单来过滤所述多个交互。

3.根据权利要求2所述的方法，其中所述白名单是由机器学习模型生成的，所述机器学习模型是根据关于先前生成的界面导航记录的信息而训练的。

4.根据权利要求1所述的方法，其中确定所述一个或多个步骤包括优化所述多个交互，所述优化减少了生成所述步骤的交互的数目。

5.根据权利要求1所述的方法，还包括：

从所述用户接收对所生成的步骤中的至少一个步骤的校正；以及

基于所接收的校正来修正所述界面导航记录。

6.根据权利要求1所述的方法，其中所述多个交互是由所述用户在所述手动界面导航过程中执行的所有所述交互的子集。

7.根据权利要求1所述的方法，还包括：

由所述计算机系统通过执行所述界面导航记录的所述一个或多个步骤来执行自动界面导航过程，所述自动界面导航过程重新创建在所述手动界面导航过程的所述主机系统的所述多个UI状态之中的所述导航。

8.根据权利要求7所述的方法，还包括：

通过在所述自动界面导航过程的所述最终UI状态下检测一个或多个验证器来验证所述自动导航过程成功，所述一个或多个验证器中的每个验证器是在所述手动界面导航过程的所述最终UI状态下找到的UI元素。

9.根据权利要求8所述的方法，还包括：

接收所述手动界面导航过程的所述多个UI状态中的最终UI状态和先前UI状态；以及

由所述计算机系统基于所述最终UI状态下存在的UI元素与所述先前UI状态下存在的UI元素的比较来确定一个或多个验证器。

10.根据权利要求1所述的方法，还包括：

通过在所述自动界面导航过程的所述最终UI状态下检测一个或多个否定验证器来确定所述自动导航过程不成功，所述一个或多个否定验证器中的每个否定验证器是在所述手动界面导航过程的所述初始UI状态下找到的UI元素。

11.一种包括指令的非暂态计算机可读介质，所述指令在由处理器执行时引起所述处理器：

由计算机系统从由用户执行的手动界面导航过程接收描述所述用户与一个或多个用户界面(UI)元素之间的多个交互的信息，所述手动界面导航过程包括在主机系统的多个UI状态之中的导航，所述导航从所述多个UI状态中的初始UI状态和所述多个UI状态中的最终UI状态开始；

基于所述多个交互来确定界面导航记录的一个或多个步骤，所述一个或多个步骤中的每个步骤可由所述计算机系统执行，以利用所述主机系统的所述多个UI状态中的UI状态来重新创建所述多个交互中的至少一个交互；以及

将所述界面导航记录存储在所述计算机系统处。

12.根据权利要求11所述的非暂态计算机可读介质，其中所述指令还引起所述处理器：

基于白名单来过滤所述多个交互。