[发明专利]提升数据抓取成功率的系统及相应的数据抓取处理方法在审
申请号: | 201910372042.0 | 申请日: | 2019-05-06 |
公开(公告)号: | CN110059239A | 公开(公告)日: | 2019-07-26 |
发明(设计)人: | 宋志朋 | 申请(专利权)人: | 上海富数科技有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F17/27;G06K9/62 |
代理公司: | 上海智信专利代理有限公司 31002 | 代理人: | 王洁;郑暄 |
地址: | 201802 上海市嘉定区科*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种提升数据抓取成功率的系统,包括数据抓取模块、统计模块、规则引擎模块、分析模块,用于匹配原始错误信息对应的决策结果。本发明还涉及一种基于该系统实现提升抓取成功率的数据抓取处理方法。采用了本发明的提升数据抓取成功率的系统及相应的数据抓取处理方法,能够给用户返回更加友好的错误提示文案,并引导用户对错误提示及时纠正,满足系统访问条件,进而能顺利抓取到数据,避免因错误信息多次中断数据抓取过程,让用户多次验证,使数据抓取过程更方便快捷。 | ||
搜索关键词: | 数据抓取 成功率 抓取 错误提示 错误信息 规则引擎模块 数据抓取模块 分析模块 决策结果 统计模块 系统访问 系统实现 用户返回 匹配 验证 中断 纠正 | ||
【主权项】:
1.一种提升数据抓取成功率的系统,其特征在于,所述的系统包括:数据抓取模块,与前台H5页面和外部数据源相连接,用于进行数据抓取;统计模块,与所述的数据抓取模块相连接,用于统计每种错误信息提示的文案出现的次数;规则引擎模块,与所述的数据抓取模块相连接,用于查询原始错误信息,获取标准输出文案和动作指令;分析模块,与所述的规则引擎模块相连接,用于匹配原始错误信息对应的决策结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海富数科技有限公司,未经上海富数科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910372042.0/,转载请声明来源钻瓜专利网。