[发明专利]用户界面验收方法及装置在审
申请号: | 202211644315.0 | 申请日: | 2022-12-20 |
公开(公告)号: | CN115965803A | 公开(公告)日: | 2023-04-14 |
发明(设计)人: | 杨平;罗鑫平;周聪;梁广宇;庄瑞炎;马志斌 | 申请(专利权)人: | 美的集团股份有限公司 |
主分类号: | G06V10/75 | 分类号: | G06V10/75;G06V10/774;G06V10/764;G06V10/82;G06F16/958 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 杨伟东 |
地址: | 528311 广东省佛山市顺德区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用户界面 验收 方法 装置 | ||
1.一种用户界面验收方法,其特征在于,包括:
获取待处理用户界面图像和所述待处理用户界面对应的模板图像;
将所述待处理用户界面图像和所述模板图像输入差异比对模型,得到所述待处理用户界面图像与所述模板图像的差异标注图像;
基于所述差异标注图像,得到所述待处理用户界面的验收结果。
2.根据权利要求1所述的用户界面验收方法,其特征在于,所述差异比对模型包括特征提取模块、特征匹配模块、差异定位模块和标注模块;所述将所述待处理用户界面图像和所述模板图像输入差异比对模型,得到所述待处理用户界面图像与所述模板图像的差异标注图像,包括:
将所述待处理用户界面图像和所述模板图像输入至所述特征提取模块中,通过所述特征提取模块对所述待处理用户界面图像和所述模板图像分别进行特征提取和特征分类,得到所述第一特征组和所述第二特征组;
将所述第一特征组和所述第二特征组输入至所述特征匹配模块,通过所述特征匹配模块中预设的注意力机制图神经网络,得到所述待处理用户界面图像和所述模板图像的变换矩阵以及所述待处理用户界面图像的配准图像;
将所述配准图像与所述模板图像输入至所述差异定位模块进行对比,得到差异坐标;
将所述变换矩阵和所述差异坐标所述标注模块,得到所述差异标注图像。
3.根据权利要求2所述的用户界面验收方法,其特征在于,所述对所述待处理用户界面图像和所述模板图像分别进行特征提取和特征分类,得到所述第一特征组和所述第二特征组模板图像,包括:
将所述待处理用户界面图像和所述模板图像通过共享编码结构进行特征提取,得到所述待处理用户界面图像的原始特征图和所述模板图像的原始特征图;
将所述待处理用户界面图像的原始特征图通过特征点检测分支和描述符检测分支进行特征分类,得到所述第一特征组,将所述模板图像的原始特征图通过所述特征点检测分支和所述描述符检测分支进行特征分类,得到所述第二特征组。
4.根据权利要求2所述的用户界面验收方法,其特征在于,所述通过所述特征匹配模块中预设的注意力机制图神经网络,得到所述待处理用户界面图像和所述模板图像的变换矩阵以及所述待处理用户界面图像的配准图像模板图像,包括:
对所述第一特征组和所述第二特征组分别进行编码,得到对应的第一特征匹配向量和第二特征匹配向量;
将所述第一特征匹配向量和所述第二特征匹配向量输入所述预设的注意力机制图神经网络,得到目标特征匹配矩阵;
基于所述目标特征匹配矩阵,得到所述待处理用户界面图像和所述模板图像的变换矩阵,以及所述待处理用户界面图像的配准图像。
5.根据权利要求2所述的用户界面验收方法,其特征在于,所述将所述变换矩阵和所述差异坐标所述标注模块,得到所述差异标注图像,包括:
基于所述变换矩阵,得到所述待处理用户界面图像和所述模板图像的整体差异量;
将所述差异坐标和所述整体差异量在所述配准图像上标注,得到所述差异标注图像。
6.根据权利要求1至5任一所述的用户界面验收方法,其特征在于,所述基于所述差异标注图像,得到所述待处理用户界面的验收结果,包括:
基于所述差异标注图像,通过预设规则计算所述待处理用户界面图像的缺陷评分,并生成所述待处理用户界面图像的验收报告;
基于所述待处理用户界面图像的验收报告,确定所述待处理用户界面的验收结果。
7.根据权利要求1至5任一所述的用户界面验收方法,其特征在于,所述获取待处理用户界面图像和所述待处理用户界面对应的模板图像,还包括:
获取初始待处理用户界面图像和所述初始待处理用户界面对应的初始模板图像;
对所述初始待处理用户界面图像和所述初始模板图像进行重叠校验,得到所述初始待处理用户界面图像相对于所述初始模板图像的重叠偏差量;
对所述初始重叠偏差量进行修复,模板图像得到所述待处理用户界面图像与所述模板图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于美的集团股份有限公司,未经美的集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211644315.0/1.html,转载请声明来源钻瓜专利网。