[发明专利]用户界面UI元素的信息抓取方法及装置、及存储介质

权利要求书

1.一种用户界面UI元素的信息抓取方法，其特征在于，包括：

检测作用于UI的用户操作，获得所述用户操作所作用的位置参数；

根据所述位置参数确定所述用户操作用的目标元素；

获取所述目标元素的类型；

根据所述目标元素的类型，调用对应的元素抓取工具抓取所述目标元素的信息。

2.根据权利要求1所述的方法，其特征在于，所述获取所述目标元素的类型，包括以下至少之一：

根据所述目标元素的进程名和/或所述目标元素的类名，确定所述目标元素的类型；

根据所述目标元素的父元素的类型和/或所述目标元素的属性，确定所述目标元素的类型；

根据所述目标元素的父元素的类型和/或所述目标元素的进程名，确定所述目标元素的类型。

3.根据权利要求2所述的方法，其特征在于，

所述根据所述目标元素的进程名和/或所述目标元素的类名，确定所述目标元素的类型，包括以下至少之一：

若所述目标元素的类名和/或所述目标元素的进程名包含有字眼“Sap”，确定所述目标元素为Sap元素；

若所述目标元素的类名和/或所述目标元素的进程名“iexplore”，确定所述目标元素为Web元素。

4.根据权利要求2所述的方法，其特征在于，

所述根据所述目标元素的父元素的类型和/或所述目标元素的属性，确定所述目标元素的类型，包括：

若所述目标元素的父元素为窗口元素，且所述目标元素的属性“FrameworkId”包含“Internet Explorer”字眼，确定所述目标元素为Web元素。

5.根据权利要求2所述的方法，其特征在于，

所述根据所述目标元素的父元素的类型和/或所述目标元素的进程名，确定所述目标元素的类型，包括：

若所述目标元素的父元素为窗口元素，且所述目标元素的进程名包含有字眼“iexplore”，确定所述目标元素为Web元素。

6.根据权利要求2所述的方法，其特征在于，

所述获取所述目标元素的类型，还包括：

若根据目标元素的类名、目标元素的类型、所述目标元素的属性及所述目标元素的进程名无法确定所述目标元素的类型时，确定所述目标元素为WinForm元素。

7.根据权利要求1至6任一项所述的方法，其特征在于，

所述根据所述目标元素的类型，调用对应的元素抓取工具抓取所述目标元素的信息，包括以下至少之一：

若所述目标元素为Sap元素，调用SapNode类抓取工具抓取所述目标元素的信息；

若所述目标元素为Web元素，调用WebNode类抓取工具抓取所述目标元素的信息；

若所述目标元素为WinForm元素，调用WinFormNode类抓取工具抓取所述目标元素的信息。

8.根据权利要求1至6任一项所述的方法，其特征在于，

所述检测作用于UI的用户操作，获得所述用户操作所作用的位置参数，包括以下至少之一：

检测作用于所述UI的点击操作，获得所述点击操作所作用的页面坐标或窗口坐标；

检测作用于所述UI的选中操作，获得所述选中操作所作用的页面坐标或窗口坐标；

检测作用于所述UI的光标悬停操作，获得所述光标悬停操作所作用的页面坐标或窗口坐标。

9.一种用户界面UI元素的信息抓取装置，其特征在于，包括：

检测模块，用于检测作用于UI的用户操作，获得所述用户操作所作用的位置参数；

确定模块，用于根据所述位置参数确定所述用户操作用的目标元素；

获取模块，用于获取所述目标元素的类型；

抓取模块，用于根据所述目标元素的类型，调用对应的元素抓取工具抓取所述目标元素的信息。

10.一种计算机存储介质，所述计算机存储介质存储有计算机可执行指令；所述计算机可执行指令被执行后，能够实现权利要求1至8任一项提供的方法。