[发明专利]一种基于信息重组的数据信息提取方法和系统在审
申请号: | 201710464295.1 | 申请日: | 2017-06-19 |
公开(公告)号: | CN107391573A | 公开(公告)日: | 2017-11-24 |
发明(设计)人: | 魏晓林 | 申请(专利权)人: | 上海斐讯数据通信技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 杭州千克知识产权代理有限公司33246 | 代理人: | 周希良,吴辉辉 |
地址: | 201616 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 信息 重组 数据 提取 方法 系统 | ||
1.一种基于信息重组的数据信息提取方法,其特征在于,所述方法包括以下步骤:
S10:获取统一资源定位符对应的结构特征;
S20:提取所述统一资源定位符中的关键字段;
S30:重组所述关键字段得到新的统一资源定位符;
S40:获取所述新的统一资源定位符所对应的网页中携带的信息。
2.根据权利要求1所述的一种基于信息重组的数据信息提取方法,其特征在于,在所述步骤S10之前还包括以下步骤:
S01:提取用户网络日志中统一资源定位符信息字段;
S02:判断所述统一资源定位符信息字段所属的网站平台;
S03:获取该所属网站平台设定的统一资源定位符结构特征。
3.根据权利要求2所述的一种基于信息重组的数据信息提取方法,其特征在于,所述步骤S10采用的获取方法是:通过该统一资源定位符所属网站平台的统一资源定位符结构特征设定来获取对应的结构特征。
4.根据权利要求1所述的一种基于信息重组的数据信息提取方法,其特征在于,所述步骤S20根据统一资源定位符对应的结构特征,利用正则匹配法对所述统一资源定位符信息中的关键字段进行提取。
5.根据权利要求1所述的一种基于信息重组的数据信息提取方法,其特征在于,所述步骤S30中将所述关键字段以其所属网站平台游客状态下的统一资源定位符结构特征进行相同形式的重组。
6.根据权利要求1所述的一种基于信息重组的数据信息提取方法,其特征在于,所述步骤S40中利用网络爬虫技术,获取所述新的统一资源定位符所对应的网页中携带的信息。
7.一种基于信息重组的数据信息提取系统,其特征在于,包括:
特征获取模块,用于获取统一资源定位符对应的结构特征;
字段提取模块,用于根据统一资源定位符对应的结构特征,提取所述统一资源定位符中的关键字段;
重组模块,用于重组所述关键字段得到新的统一资源定位符;
网页信息获取模块,获取所述新的统一资源定位符所对应的网页中携带的信息。
8.根据权利要求7所述的一种基于信息重组的数据信息提取系统,其特征在于,还包括平台特征模块,用于获取用户网络日志中统一资源定位符所属网站平台所设定的统一资源定位符结构特征。
9.根据权利要求7所述的一种基于信息重组的数据信息提取系统,其特征在于,所述字段提取模块包括匹配单元,用于利用正则匹配法对所述统一资源定位符信息中的关键字段进行提取。
10.根据权利要求7所述的一种基于信息重组的数据信息提取系统,其特征在于,还包括信息整理模块,用于将所述网页信息获取模块得到的信息整理成总的信息集并保存。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海斐讯数据通信技术有限公司,未经上海斐讯数据通信技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710464295.1/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置