[发明专利]控件定位方法、装置、电子设备及可读存储介质在审

专利信息
申请号: 202111580847.8 申请日: 2021-12-22
公开(公告)号: CN114511696A 公开(公告)日: 2022-05-17
发明(设计)人: 蒋晓海;谢春鸿 申请(专利权)人: 北京云测信息技术有限公司
主分类号: G06V10/24 分类号: G06V10/24;G06K9/62;G06V10/74
代理公司: 北京国昊天诚知识产权代理有限公司 11315 代理人: 马瑞
地址: 100016 北京市朝*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 控件 定位 方法 装置 电子设备 可读 存储 介质
【权利要求书】:

1.一种控件定位方法,其特征在于,包括:

接收预存储的目标控件的第一描述信息,其中,所述第一描述信息包括第一特征信息和所述目标控件与其预设范围内的第一参考控件的第一关系信息,所述第一特征信息用于指示所述目标控件的属性信息,所述第一关系信息用于指示所述目标控件与所述第一参考控件之间的位置关系;

分别获取界面中m个待定位控件的第二描述信息,其中,所述第二描述信息包括第二特征信息和所述待定位控件与其预设范围内的第二参考控件的第二关系信息,所述第二特征信息用于指示所述待定位控件的属性信息,所述第二关系信息用于指示所述待定位控件与所述第二参考控件之间的位置关系,m为大于0的整数;

分别获取所述第一描述信息与m个所述待定位控件的第二描述信息的相似度值;

确定与目标相似度值对应的待定位控件为所述目标控件,其中,所述目标相似度值大于预设阈值,且所述目标相似度值为获取的m个相似度值中的最大相似度值。

2.根据权利要求1所述的控件定位方法,其特征在于,分别获取界面中m个待定位控件的第二描述信息,包括:

分别获取界面中m个待定位控件的第二特征信息;

对于各个所述待定位控件,获取所述待定位控件与其预设范围内的第二参考控件的第二关系信息;

根据所述第二特征信息和所述第二关系信息,获取所述待定位控件的第二描述信息。

3.根据权利要求2所述的控件定位方法,其特征在于,根据所述第二特征信息和所述第二关系信息,获取所述待定位控件的第二描述信息,包括:

将所述第二特征信息和所述第二关系信息进行向量转化处理,将得到的向量作为所述待定位控件的描述信息。

4.根据权利要求3所述的控件定位方法,其特征在于,分别获取所述第一描述信息与m个所述待定位控件的第二描述信息相似度值,包括:

将所述第一描述信息与一个所述待定位控件的第二描述信息输入匹配模型中,通过所述匹配模型的计算,得到所述目标控件与所述一个待定位控件的一个相似度值;

将所述第一描述信息与下一个所述待定位控制的第二描述信息输入所述匹配模型中,通过所述匹配模型的计算,得到所述目标控件与所述下一个待定位控件的相似度值,如此重复,分别得到所述目标控件的第一描述信息与m个所述待定位控件的第二描述信息的相似度值。

5.根据权利要求4所述的控件定位方法,其特征在于,在将所述第二特征信息和所述第二关系信息进行向量转化处理之前,所述方法包括:

对所述第二特征信息和所述第二关系信息进行归一化处理。

6.根据权利要求4所述的控件定位方法,其特征在于,在接收预存储的目标控件的第一描述信息之前,所述方法包括:

获取相似信息对和非相似信息对;

根据所述相似信息对和所述非相似信息对,对所述匹配模型进行训练。

7.根据权利要求6所述的控件定位方法,其特征在于,获取相似信息对和非相似信息对,包括:

步骤1,获取当前控件的第三特征信息;

步骤2,获取所述当前控件与其预设范围内的第三参考控件的第三关系信息;

步骤3,将所述第三特征信息和所述第三关系信息进行向量转化处理,将得到的向量作为所述当前控件的第三描述信息;

步骤4,采用步骤1-步骤3的方法,得到其他控件的第三描述信息;

步骤5,改变所述当面控件的第三特征信息和/或改变所述当面控件的第三关系信息,得到第四特征信息和第四关系信息;

步骤6,将所述第四特征信息和所述第四关系信息进行向量转化处理,将得到的向量作为所述当前控件的第四描述信息;

步骤7,将所述当前控件的第三描述信息和所述当前控件的第四描述信息作为相似信息对;

步骤8,将所述当前控件的第三描述信息和其他控件的第三描述信息作为非相似信息对。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京云测信息技术有限公司,未经北京云测信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111580847.8/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top