[发明专利]一种页面代理方法、装置、电子设备及存储介质有效
申请号: | 202011611316.6 | 申请日: | 2020-12-29 |
公开(公告)号: | CN112637361B | 公开(公告)日: | 2022-09-16 |
发明(设计)人: | 刘德森 | 申请(专利权)人: | 北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司 |
主分类号: | H04L67/562 | 分类号: | H04L67/562;H04L61/10;H04L61/4511;H04L47/125;G06F8/38;G06F16/951;G06F16/955;G06F16/957;G06F16/958 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 余菲 |
地址: | 100000 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请提供一种页面代理方法、装置、电子设备及存储介质,用于改善对页面中资源链接的爬取率不高的问题。该包括:接收爬虫终端发送的页面请求,并获取页面请求中的访问链接对应的响应页面;判断响应页面是否包括脚本代码;若是,则使用浏览器加载并渲染响应页面,并对渲染后的响应页面中的脚本代码进行修改,将修改后的脚本代码注入响应页面,并向爬虫终端发送注入后的响应页面,以使爬虫终端触发脚本代码并获取响应页面中的资源链接。 | ||
搜索关键词: | 一种 页面 代理 方法 装置 电子设备 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司,未经北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011611316.6/,转载请声明来源钻瓜专利网。