[发明专利]网页数据处理方法、装置、计算机设备和存储介质在审
申请号: | 201910857890.0 | 申请日: | 2019-09-09 |
公开(公告)号: | CN110781366A | 公开(公告)日: | 2020-02-11 |
发明(设计)人: | 梅锦振华 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951 |
代理公司: | 44224 广州华进联合专利商标代理有限公司 | 代理人: | 于丽君 |
地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请涉及一种网页数据处理方法、装置、计算机设备和存储介质。所述方法包括:获取网页行为数据,根据预设规则检测网页行为数据中是否存在异常行为数据;当网页行为数据中存在异常行为数据时,获取异常行为数据对应的网页访问数据;根据网页访问数据提取访问特征,将访问特征输入到已训练的爬虫识别模型中,得到爬虫识别结果;当爬虫识别结果是网页访问数据为爬虫访问数据时,得到网页访问数据中的爬虫标识,根据爬虫标识从网页行为数据中得到对应的爬虫网页行为数据;根据爬虫网页行为数据和网页行为数据得到目标网页行为数据。采用本方法能够提高得到目标网页行为数据的准确性。 | ||
搜索关键词: | 行为数据 爬虫 网页 网页访问 异常行为数据 目标网页 网页数据处理 计算机设备 存储介质 访问数据 数据提取 特征输入 预设规则 访问 检测 申请 | ||
【主权项】:
1.一种网页数据处理方法,所述方法包括:/n获取网页行为数据,根据预设规则检测所述网页行为数据中是否存在异常行为数据;/n当所述网页行为数据中存在所述异常行为数据时,获取所述异常行为数据对应的网页访问数据;/n根据所述网页访问数据提取访问特征,将所述访问特征输入到已训练的爬虫识别模型中,得到爬虫识别结果;/n当所述爬虫识别结果是所述网页访问数据为爬虫访问数据时,得到所述网页访问数据中的爬虫标识,根据所述爬虫标识从所述网页行为数据中得到对应的爬虫网页行为数据;/n根据所述爬虫网页行为数据和所述网页行为数据得到目标网页行为数据。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910857890.0/,转载请声明来源钻瓜专利网。