[发明专利]一种应用商城中应用信息的抓取方法及装置在审
申请号: | 201810850341.6 | 申请日: | 2018-07-28 |
公开(公告)号: | CN109063110A | 公开(公告)日: | 2018-12-21 |
发明(设计)人: | 阳雄 | 申请(专利权)人: | 安徽捷兴信息安全技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 合肥市浩智运专利代理事务所(普通合伙) 34124 | 代理人: | 丁瑞瑞 |
地址: | 230001 安徽省合肥市高新区*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种应用商城中应用信息的抓取方法,所述方法包括:接收预定义的与应用商城匹配的爬虫规则,其中,所述预定义的规则中至少包括:与应用商城的标识信息相对应的爬虫标识信息、应用商城的分类列表、应用商城分类列表页面连接模式、列表页抓取配置、详情页抓取配置、抓取脚本、HTTP请求头以及爬虫工具的cookie设置中的至少一种;解析所述爬虫规则,并加载所述爬虫规则;根据所述爬虫规则对所述应用商城中的应用进行应用信息抓取。本发明实施例还提供了一种应用商城中应用信息的抓取方装置。应用本发明实施例,可以提高应用信息的采集效率。 | ||
搜索关键词: | 抓取 爬虫 应用信息 应用 标识信息 预定义 连接模式 列表页面 爬虫工具 分类 脚本 加载 配置 解析 匹配 采集 | ||
【主权项】:
1.一种应用商城中应用信息的抓取方法,其特征在于,所述方法包括:接收预定义的与应用商城匹配的爬虫规则,其中,所述预定义的规则中至少包括:与应用商城的标识信息相对应的爬虫标识信息、应用商城的分类列表、应用商城分类列表页面连接模式、列表页抓取配置、详情页抓取配置、抓取脚本、HTTP请求头以及爬虫工具的cookie设置中的至少一种;解析所述爬虫规则,并加载所述爬虫规则;根据所述爬虫规则对所述应用商城中的应用进行应用信息抓取。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于安徽捷兴信息安全技术有限公司,未经安徽捷兴信息安全技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810850341.6/,转载请声明来源钻瓜专利网。
- 上一篇:一种基于以太坊的数据查询系统
- 下一篇:一种大数据处理方法及系统