[发明专利]基于大数据的全过程咨询方法、装置、电子设备及存储介质有效
申请号: | 202110298985.0 | 申请日: | 2021-03-20 |
公开(公告)号: | CN112989195B | 公开(公告)日: | 2023-09-05 |
发明(设计)人: | 丁娟;张庆;张丽彩 | 申请(专利权)人: | 重庆图强工程技术咨询有限公司 |
主分类号: | G06F16/9535 | 分类号: | G06F16/9535;G06F16/958;G06Q10/10;G06Q50/08 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 401120 重*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 数据 全过程 咨询 方法 装置 电子设备 存储 介质 | ||
1.一种基于大数据的全过程咨询方法,其特征在于,包括:
获取目标网站中的目标网页并根据所述目标网页确定选中网页,所述每个目标网站对应多个所述目标网页,所述选中网页为所述目标网页中的至少一个;
获取当前项目组信息,所述项目组信息包含多个当前项目信息,所述当前项目信息包括项目领域信息和项目名称信息;
解析所述选中网页以得到政策名称信息;
将所述政策名称信息与每个所述当前项目信息进行匹配,若匹配成功,则将匹配成功的所述政策名称信息作为选中政策信息;
解析所述选中网页对应的所有第一引用资源的下载地址,所述每个第一引用资源与每个所述选中政策信息对应,所述第一引用资源包括图片、文本、链接、脚本、样式表、网页、插件中的任意一种或多种;
若所述第一引用资源的下载地址被成功解析,则获得第一引用资源的下载地址的下载链接,根据所获得的下载链接下载第一引用资源,所述下载的第一引用资源即为与所述选中政策信息对应的引用信息,反馈所述引用信息,所述引用信息为与所述选中政策信息相对应的政策内容信息;
所述解析所述选中网页以得到政策名称信息,包括:
将所述选中网页对应的页面内容形成图片;根据页面发布内容的特点对所述图片进行分割,形成若干部分;分别对所述若干部分进行识别,得到对应的文字信息;基于所述文字信息,得到政策名称信息;
或者,
将所述选中网页加载到预先构建的phantomjs浏览器平台;在所述phantomjs浏览器平台中,对所述选中网页的页面进行转换,得到转换页面,所述转换页面中包括对象,所述对象包括文本信息;从所述文本信息中得到政策名称信息;
对所述选中网页对应的页面内容进行分析,确定所述选中网页对应的页面内容是否为政策名称;
若是,则查找数据表中是否存在所述政策名称对应的内容;
若存在,则将所述数据表中所述政策名称对应的内容替换为所述选中网页对应的页面内容;
若不存在,则将所述选中网页对应的页面内容直接进行存储;
所述根据所述目标网页确定选中网页,包括:
实时监测目标网站后台服务器是否有管理用户登陆;
若有管理用户登陆,则监测所述目标网站是否有更新;
若有更新,则根据后台服务器发布内容的规则,获取后台服务器更改的发布内容所对应的目标网页,将所述目标网页作为选中网页;
所述选中网页对应的所述目标网站主动上报满足上报触发条件的所述选中网页;
以时间轴为存储顺序存储预设历史时间段内的被上报的所述选中网页,同一目标网页在不同时间点上的所述被上报的选中网页为属于同一列别的选中网页;
将所有所述选中网页根据所述网页标识信息进行分类,所述网页标识信息包括协议部分、域名部分、端口部分、虚拟目录部分、文件名部分、参数部分、锚部分;
将属于同一类别且在时间轴上相邻的两个所述选中网页分别作为第一网页和第二网页;
解析所述第一网页以及解析所述第二网页;
对比解析后的所述第一网页以及解析后的所述第二网页以获得对比结果信息,所述对比结果信息包括相同信息和差异信息;
若上报触发条件为定时触发,则根据第一网页和第二网页的比对结果,形成对比结果信息。
2.根据权利要求1所述的一种基于大数据的全过程咨询方法,其特征在于,所述咨询方法还包括:
解析所述引用信息对应的时间点信息;
建立时间表,将每个所述引用信息对应所述时间点信息存储于所述时间表中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆图强工程技术咨询有限公司,未经重庆图强工程技术咨询有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110298985.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种化工生产用尾气处理设备
- 下一篇:一种蜂王浆及其制备方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置