[发明专利]用户界面验收方法及装置在审
申请号: | 202211644315.0 | 申请日: | 2022-12-20 |
公开(公告)号: | CN115965803A | 公开(公告)日: | 2023-04-14 |
发明(设计)人: | 杨平;罗鑫平;周聪;梁广宇;庄瑞炎;马志斌 | 申请(专利权)人: | 美的集团股份有限公司 |
主分类号: | G06V10/75 | 分类号: | G06V10/75;G06V10/774;G06V10/764;G06V10/82;G06F16/958 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 杨伟东 |
地址: | 528311 广东省佛山市顺德区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用户界面 验收 方法 装置 | ||
本发明涉及计算机领域,提供一种用户界面验收方法及装置。方法包括:获取待处理用户界面图像和所述待处理用户界面对应的模板图像;将所述待处理用户界面图像和所述模板图像输入差异比对模型,得到所述待处理用户界面图像与所述模板图像的差异标注图像;基于所述差异标注图像进行验收,得到所述待处理用户界面的验收结果。通过差异比对模型实现待处理用户界面图像和模板图像的像素级匹配,输出差异标注图像并进行自动化验收,实现UI验收全流程的自动化。
技术领域
本发明涉及计算机领域,尤其涉及用户界面验收方法及装置。
背景技术
随着企业数字化的不断深化以及应用程序开发的快速迭代,为了确保开发的用户界面(User Interface,UI)尽可能还原设计稿给出的UI设计方案,UI验收成为了应用程序研发过程中的一个关键环节。
UI验收,会将样稿与开发的网页UI页面进行比对,往往会存在页面布局,字体字号,线体,色彩等不一致的情况。如果不能及时发现差异,会影响用户体验。传统人工比对效率低下且不易察觉差异所在,极易漏检。因此,催生了一批自动化UI验收平台,支持大批量智能化验收。然而,由于样稿的样式多种多样,难以穷举,同时由于样稿与网页UI存在类似或重复的样式,因此现有的UI验收平台无法有效地去定位异常数据,难以表征两幅图像之间的共性特征,容易造成误匹配。
发明内容
本发明旨在至少解决相关技术中存在的技术问题之一。为此,本发明提出一种用户界面验收方法,通过差异比对模型实现待处理用户界面图像和模板图像的像素级匹配,输出差异标注图像并进行自动化验收,实现UI验收全流程的自动化。
本发明还提出一种用户界面验收装置。
本发明还提出一种电子设备。
本发明还提出一种非暂态计算机可读存储介质。
本发明还提出一种计算机程序产品。
根据本发明第一方面实施例的一种用户界面验收方法,包括:
获取待处理用户界面图像和所述待处理用户界面对应的模板图像;
将所述待处理用户界面图像和所述模板图像输入差异比对模型,得到所述待处理用户界面图像与所述模板图像的差异标注图像;
基于所述差异标注图像进行验收,得到所述待处理用户界面的验收结果。
根据本发明实施例的用户界面验收方法,能够自动采集待处理用户界面图像和模板图像,并将其输入差异比对模型得到特征组并进行差异定位。相较于现有技术通过特征描述子的相似度进行匹配的方式,本方法考虑到样稿与网页UI具有整体偏移以及缩放的情况,能够找到两幅图像间的共性特征,在页面存在类似或重复的样式的前提下提高了匹配的精确度。同时,基于匹配结果进行差异标注后,可以方便后续自动化地进行验收并收获验收结果。
根据本发明的一个实施例,所述差异比对模型包括特征提取模块、特征匹配模块、差异定位模块和标注模块;所述将所述待处理用户界面图像和所述模板图像输入差异比对模型,得到所述待处理用户界面图像与所述模板图像的差异标注图像,包括:
将所述待处理用户界面图像和所述模板图像输入至所述特征提取模块中,通过所述特征提取模块对所述待处理用户界面图像和所述模板图像分别进行特征提取和特征分类,得到所述第一特征组和所述第二特征组;
将所述第一特征组和所述第二特征组输入至所述特征匹配模块,通过所述特征匹配模块中预设的注意力机制图神经网络,得到所述待处理用户界面图像和所述模板图像的变换矩阵以及所述待处理用户界面图像的配准图像;
将所述配准图像与所述模板图像输入至所述差异定位模块进行对比,得到差异坐标;
将所述变换矩阵和所述差异坐标所述标注模块,得到所述差异标注图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于美的集团股份有限公司,未经美的集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211644315.0/2.html,转载请声明来源钻瓜专利网。