[发明专利]用户界面显示识别方法及终端设备

权利要求书

1.一种用户界面显示识别方法，其特征在于，包括：

获取待检测用户界面的目标界面截图，提取所述目标界面截图的特征向量；

获取预存的正常用户界面的正常界面截图，提取所述正常界面截图的特征向量；

根据所述目标界面截图的特征向量和所述正常界面截图的特征向量，确定所述目标界面截图与所述正常界面截图的余弦距离；

判断所述余弦距离是否超过预设阈值；

若判定所述余弦距离超过所述预设阈值，则获取所述待检测用户界面的各个元素控件的层级及位置；

检测各个所述元素控件的层级及位置是否异常；

若检测到各个所述元素控件的层级及位置均正常，则判定所述待检测用户界面显示正常。

2.如权利要求1所述的用户界面显示识别方法，其特征在于，所述提取所述目标界面截图的特征向量包括：

从所述目标界面截图中选取第一预设数目个样本，每个样本提取第二预设数目个特征；

根据所述第一预设数目个样本和每个样本提取的第二预设数目个特征，构成第一矩阵；

根据所述第一矩阵和所述第一矩阵的转置矩阵获得第二矩阵；

计算所述第二矩阵的特征向量，根据所述第二矩阵的特征向量确定所述目标界面截图的特征向量。

3.如权利要求1所述的用户界面显示识别方法，其特征在于，所述根据所述目标界面截图的特征向量和所述正常界面截图的特征向量，确定所述目标界面截图与所述正常界面截图的余弦距离包括：

分别计算所述目标界面截图的特征向量和所述正常界面截图的特征向量的长度；

获得所述目标界面截图的特征向量和所述正常界面截图的特征向量的内积；

根据所述目标界面截图的特征向量的长度、所述正常界面截图的特征向量的长度和所述内积，确定所述目标界面截图与所述正常界面截图的余弦距离。

4.如权利要求1所述的用户界面显示识别方法，其特征在于，所述获取所述待检测用户界面的各个元素控件的层级及位置包括：

通过软件开发工具包SDK生成运行状态获取命令；

根据所述运行状态获取命令实时获取所述待检测用户界面的各个元素控件的层级及位置。

5.如权利要求1所述的用户界面显示识别方法，其特征在于，所述检测各个所述元素控件的层级及位置是否异常包括：

根据各个所述元素控件的层级确定各个所述元素控件中的子控件，以及子控件对应的母控件；

检测目标子控件的位置是否设置在所述目标子控件对应的目标母控件的前端，并检测所述目标子控件所占范围是否超出所述目标母控件所占范围，所述目标子控件为确定的各个所述元素控件中的子控件中任意一个子控件。

6.一种用户界面显示识别终端设备，其特征在于，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如下步骤：

获取待检测用户界面的目标界面截图，提取所述目标界面截图的特征向量；

获取预存的正常用户界面的正常界面截图，提取所述正常界面截图的特征向量；

根据所述目标界面截图的特征向量和所述正常界面截图的特征向量，确定所述目标界面截图与所述正常界面截图的余弦距离；

判断所述余弦距离是否超过预设阈值；

若判定所述余弦距离超过所述预设阈值，则获取所述待检测用户界面的各个元素控件的层级及位置；

检测各个所述元素控件的层级及位置是否异常；

若检测到各个所述元素控件的层级及位置均正常，则判定所述待检测用户界面显示正常。

7.如权利要求6所述的用户界面显示识别终端设备，其特征在于，所述提取所述目标界面截图的特征向量包括：

从所述目标界面截图中选取第一预设数目个样本，每个样本提取第二预设数目个特征；

根据所述第一预设数目个样本和每个样本提取的第二预设数目个特征，构成第一矩阵；

根据所述第一矩阵和所述第一矩阵的转置矩阵获得第二矩阵；

计算所述第二矩阵的特征向量，根据所述第二矩阵的特征向量确定所述目标界面截图的特征向量。