[发明专利]图标识别方法和装置

权利要求书

1.一种图标识别方法，用于应用场景中，该应用场景中包括：测试平台和承载测试对象的终端设备，终端设备上安装有应用程序，应用程序的用户界面上显示有第一图标和第二图标，其中：在自动化测试过程中，测试平台获取该用户界面的界面图像，并采用图标识别模块对其中的图标进行识别，若识别出其中的第一图标的图标类型，则对第一图标执行相应的测试步骤；若未识别出其中的第一图标，则采用人为或机器标注的方式，标注第一图标的图标类型，并对第一图标执行相关的测试步骤；其特征在于，包括：

获取待识别的第一图标；

基于预训练的图标识别模型，提取所述第一图标的第一特征向量；其中，预训练的图标识别模型为经过预先收集预设数量的图标和相对应的图标类型训练后得到的图标识别模型；图标识别模型包括多层网络，第一特征向量为图标识别模型的最后一层网络对应的向量；

确定数据库中的各个特征向量与所述第一特征向量的相似度；

若存在相似度大于或等于预设相似度阈值的特征向量，则确定所述数据库中存在目标特征向量；否则，确定不存在目标特征向量；其中，目标特征向量为相似度大于或等于预设相似度阈值的特征向量；

若不存在目标特征向量，则确定所述第一图标的第一标注信息，所述第一标注信息用于描述所述第一图标的图标类型；

确定所述数据库中不存在目标特征向量时，确定所述第一图标的第二标注信息，所述第二标注信息用于将所述第一特征向量标注为临时特征向量；

将所述第一特征向量和所述第一图标的图标类型，存入所述数据库中，以供更新所述数据库；

基于所述第一图标和所述第一图标的图标类型，优化所述图标识别模型，以供基于优化完成的图标识别模型，识别第二图标；

基于优化完成的图标识别模型，提取所述第一图标的第二特征向量；

确定所述数据库中被标注为临时特征向量的第一特征向量，并将所述第一特征向量替换为所述第二特征向量；

其中，第一特征向量为未使用第一图标和第一图标的图标类型对图标模型进行训练时，从图标识别模型中提取到的特征向量；第二特征向量为使用第一图标和第一图标的图标类型对图标模型进行训练后，从优化完成的图标识别模型中提取到的特征向量。

2.根据权利要求1所述的方法，其特征在于，所述数据库中存有特征向量和图标类型之间的对应关系；所述方法还包括：

确定目标特征向量中相似度最高的特征向量对应的图标类型，并将该图标类型作为所述第一图标的图标类型。