[发明专利]一种针对网络图片格式文件的链接方法在审
申请号: | 201410160126.5 | 申请日: | 2014-04-21 |
公开(公告)号: | CN105005566A | 公开(公告)日: | 2015-10-28 |
发明(设计)人: | 张军;宋惟忠 | 申请(专利权)人: | 上海京知信息科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 200060 上海市普*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 针对 网络 图片 格式文件 链接 方法 | ||
技术领域
本发明涉及一种针对网络图片格式文件的链接方法
背景技术
网络爬虫,也称网络蜘蛛、网络机器人,是一个自动提取网页的程序,它从因特网上下载网页,是搜索引擎的重要组成部分。网络爬虫利用标准的HTTP协议,根据超级链接和Web文档检索的方法遍历因特网信息空间。
因特网上有数千种不同的数据类型,HTTP给每种要通过Web传输的对象都打上了名为MIME类型的数据格式标签(常见图片格式:image/jpeg,image/gif)。统一资源定位符(URL)是资源标识符最常见的形式。URL描述了一台特定服务器上某资源的特定位置。元素文件(METAFILE)可提供有关页面的元信息,比如针对搜索引擎和更新频度的描述和关键词,可针对元素的关键词进行索引。
目前网络爬虫只爬取文本,不能爬取音乐、图片和视频等多媒体文件,原因主要是多媒体数据量太大;如何爬取多媒体文件;如何索引多媒体文件;进而对处理过的多媒体文件检索。现在因特网上有大量的多媒体文件,特别是社交网站和多媒体分享的兴起,需要对多媒体文件进行精准检索。
本发明提供了一种针对网络图片格式文件的链接方法,通过METAFILE的关键词对包含图片格式文件的网页进行查询,初始化每个相关网页的中心度和权威度,重复投票过程,报告排好序的包含图片格式文件的网页列表,即指向网络图片格式文件地址的URL库,并且URL与网络图片格式文件的直方图建立映射以便精准检索。
发明内容
本发明的目的在于提供一种针对网络图片格式文件的链接方法。本发明包括以下特征:
发明技术方案
一种针对网络图片格式文件的链接方法,其具体步骤如下:
1)通过METAFILE的关键词对包含图片格式文件的网页进行查询,找出n4与该查询最为相关的包含图片格式文件的网页集合,其中n是预先设定的参数;
2)向网页集合中添加所有与匹配网页存在着链接关系的包含图片格式文件的网页;
3)移除所有的站内链接;
4)基于被相关网页链接的入链数,为每个网页赋予一个权威权重以及基于链向权威网页的来源网页,赋予一个中心权重;
5)统计每个网页链接的入链数之和,计算出每个网页的权威权重;
6)统计每个网页的出链网页的权威度之和,计算出每个网页的中心权重;
7)将所有包含图片格式文件的网页的中心度除以最高中心度以将其标准化,将所有包含图片格式文件的网页的权威度除以最高权威度以将其标准化;
8)重复第5)步到第7)步20次;
9)返回一张排好序的包含图片格式文件的网页列表,即指向网络图片格式文件地址的URL库,并且URL与网络图片格式文件的直方图建立映射以便精准检索。
附图说明
附图1是网络图片格式文件链接流程图
具体实施方式
这种针对网络图片格式文件的链接方法,包括如下步骤:
1)通过METAFILE的关键词对包含图片格式文件的网页进行查询,找出n个与该查询最为相关的包含图片格式文件的网页集合,其中n是预先设定的参数;
2)向网页集合中添加所有与匹配网页存在着链接关系的包含图片格式文件的网页;
3)移除所有的站内链接;
4)基于被相关网页链接的入链数,为每个网页赋予一个权威权重以及基于链向权威网页的来源网页,赋予一个中心权重;
5)统计每个网页链接的入链数之和,计算出每个网页的权威权重;
6)统计每个网页的出链网页的权威度之和,计算出每个网页的中心权重;
7)将所有包含图片格式文件的网页的中心度除以最高中心度以将其标准化,将所有包含图片格式文件的网页的权威度除以最高权威度以将其标准化;
8)重复第5)步到第7)步20次;
9)返回一张排好序的包含图片格式文件的网页列表,即指向网络图片格式文件地址的URL库,并且URL与网络图片格式文件的直方图建立映射以便精准检索。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海京知信息科技有限公司,未经上海京知信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410160126.5/2.html,转载请声明来源钻瓜专利网。