[发明专利]一种通用的界面元素自动探测系统

权利要求书

1.一种通用的界面元素自动探测系统，其特征在于：所述的通用的界面元素自动探测系统包含可扩展的元素选择器schema、智能录制器和元素探测器，Schema定义了一个树形结构，智能录制器是一个集成的元素录制单元，智能录制器是一个集成的元素录制单元。

2.根据权利要求1所述的一种通用的界面元素自动探测系统，其特征在于：所述的元素选择器schema第一层ApplicationMetaDataType包含应用当前进程相关信息，进程名ProcessName，进程运行参数Parameters，程序文件路径FilePathChildControls包含目标元素各层级定位信息，包含窗口信息，父节点信息和自身信息。

3.根据权利要求1所述的一种通用的界面元素自动探测系统，其特征在于：所述的智能录制器集成了UIA、MSAA、WEB、JAB多种录制技术，根据进程信息，主窗口ClassName属性信息智能选择选择合适的录制技术，在录制过程中，实时显示当前屏幕相关信息，该录制单元定义了一系列统一的接口，当需要新增录制技术，只要实现了相关接口即可集成进去。

4.根据权利要求1所述的一种通用的界面元素自动探测系统，其特征在于：所述的元素探测器将识别到的元素转为可保存、可传输的选择器内容，元素探测器左侧有一个进程树面板，展示了系统桌面上可见与不可见的界面元素，每个元素支持右键生成对应的选择器内容。

5.根据权利要求1所述的一种通用的界面元素自动探测系统，其特征在于：所述的智能录制器工作时分为智能模式和手动模式，智能录制时首先根据当前鼠标的坐标获取到当前的进程信息，然后根据进程获取适配该进程的录制技术，继而进入该录制技术的相关实现方法，获取到目标选择器返回给客户端；手动模式即需要指定当前的录制技术，用户通过快捷键F4进行切换录制技术，然后直接调用该录制技术对应的实现方法达到录制效果。