[发明专利]一种分布式垂直爬虫方法及终端设备在审
| 申请号： | 201911078228.1 | 申请日： | 2019-11-06 |
| 公开（公告）号： | CN110941836A | 公开（公告）日： | 2020-03-31 |
| 发明（设计）人： | 侯林勇;方程;张亮;杨坤;袁率;王俊;李亚萍;刘婉莹 | 申请（专利权）人： | 贵州小叮当信息技术有限公司 |
| 主分类号： | G06F21/60 | 分类号： | G06F21/60;G06F21/62;G06F16/951;G06F16/906;G06F16/9535 |
| 代理公司： | 重庆百润洪知识产权代理有限公司 50219 | 代理人： | 陈付玉 |
| 地址： | 550008 贵州省贵阳市国家高新技*** | 国省代码： | 贵州;52 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种分布式垂直爬虫方法及终端设备，包括以下步骤：A、首先数据抓取单元中网络爬虫爬取网页资源数据；B、之后对抓取的网页资源数据进行预处理；C、将预处理后的网页资源数据进行分类，得到分类后的数据；D、将分类后的数据传输至数据分析单元进行数据分析；E、分析后的数据传输至存储单元中进行加密存储；F、最后将加密存储后的数据传输至后台监控终端，本发明能够实现对网页资源数据的快速抓取、预处理、分类以及加密处理，提高了数据处理效率，而且安全性高，不会出现数据泄露现象。 | ||
| 搜索关键词： | 一种 分布式 垂直 爬虫 方法 终端设备 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于贵州小叮当信息技术有限公司，未经贵州小叮当信息技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201911078228.1/，转载请声明来源钻瓜专利网。
