[发明专利]对网址进行查重的方法及装置在审
| 申请号： | 201510784239.7 | 申请日： | 2015-11-16 |
| 公开（公告）号： | CN105468683A | 公开（公告）日： | 2016-04-06 |
| 发明（设计）人： | 李雪峰 | 申请（专利权）人： | 孙宝文;李雪峰 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30 |
| 代理公司： | 北京三高永信知识产权代理有限责任公司 11138 | 代理人： | 江崇玉 |
| 地址： | 100081 北京市海淀*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本公开是关于一种对网址进行查重的方法及装置，属于网络技术领域。方法包括：获取训练样本；根据所述训练样本确定提取规则，所述提取规则用于指示在一个网址中提取对应网页的标识；根据所述提取规则提取目标网址集合中的各个网址对应网页的标识；将提取到的网页的标识相匹配的至少两个网址确定为页面内容相同的网址。只需要从待查重的网址中提取出网页的标识，根据网页的标识进行查重，能够有效的查找出对应内容相同的网址，提高查重的准确性，同时，只根据网页的标识进行查重，能够减少计算量，提高查重效率。 | ||
| 搜索关键词： | 网址 进行 方法 装置 | ||
【主权项】：
一种对网址进行查重的方法，其特征在于，所述方法包括：获取训练样本，所述训练样本中包含有若干个训练组，每个训练组中包含至少一个网址，对于所述若干个训练组中的任意一个训练组，当所述训练组中包含两个或者两个以上网址时，所述两个或者两个以上网址指向同一网页；根据所述训练样本确定提取规则，所述提取规则用于指示在一个网址中提取对应网页的标识；根据所述提取规则提取目标网址集合中的各个网址对应网页的标识；将提取到的网页的标识相匹配的至少两个网址确定为页面内容相同的网址。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于孙宝文;李雪峰，未经孙宝文;李雪峰许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201510784239.7/，转载请声明来源钻瓜专利网。
- 上一篇：减少冗余数据的方法及装置
- 下一篇：一种融合用户关系的自适应微博话题追踪方法
