[发明专利]一种从WEB网站中获取数据的方法、装置及设备在审
申请号: | 201810040122.1 | 申请日: | 2018-01-16 |
公开(公告)号: | CN108268631A | 公开(公告)日: | 2018-07-10 |
发明(设计)人: | 李朝淋;陈先志 | 申请(专利权)人: | 威创集团股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 510670 广东省广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 获取数据 可视化 装置及设备 数据渲染 用户指定 万维网 超文本标记语言 金钱成本 时间成本 数据接口 用户利用 购买 开发 | ||
1.一种从WEB网站中获取数据的方法,其特征在于,包括:
从万维网WEB网站中获取超文本标记语言HTML数据;
从所述HTML数据中获取用户指定的数据;
将所述数据渲染为可视化格式的所述数据;
显示具有可视化格式的所述数据。
2.根据权利要求1所述的方法,其特征在于,所述从所述HTML数据中获取用户指定的数据之后,所述将所述数据渲染为可视化格式的所述数据之前,该方法还包括:
按照预设规则对所述数据进行统计归类;
则将所述数据渲染为可视化格式的所述数据具体为:
将经过统计归类的所述数据渲染为可视化格式的所述数据。
3.根据权利要求2所述的方法,其特征在于,所述按照预设规则对所述数据进行统计归类之后,所述将经过统计归类的所述数据渲染为可视化格式的所述数据之前,该方法还包括:
存储经过统计归类的所述数据;
则所述将经过统计归类的所述数据渲染为可视化格式的所述数据具体为:
将存储的经过统计归类的所述数据渲染为可视化格式的所述数据。
4.根据权利要求1-3所述的方法,其特征在于,所述可视化格式为数据图和/或数据表。
5.一种从WEB网站中获取数据的装置,其特征在于,包括:
WEB抓取模块,用于从WEB网站中获取HTML数据;
HTML数据解释模块,用于从所述HTML数据中获取用户指定的数据;
可视化模块,用于将所述数据渲染为可视化格式的所述数据;
显示模块,用于显示具有可视化格式的所述数据。
6.根据权利要求5所述的装置,其特征在于,该装置还包括用于按照预设规则对所述数据进行统计归类的统计归类模块;
则所述可视化模块具体用于将经过统计归类的所述数据渲染为可视化格式的所述数据。
7.根据权利要求6所述的装置,其特征在于,该装置还包括用于存储经过统计归类的所述数据的存储模块;
则所述可视化模块具体用于将存储的经过统计归类的所述数据渲染为可视化格式的所述数据。
8.根据权利要求5所述的装置,其特征在于,所述WEB抓取模块为WEB抓取框架PythonScrapy。
9.根据权利要求5所述的装置,其特征在于,所述HTML数据解释模块为HTML数据解释器BeautifulSoup。
10.一种从WEB网站中获取数据的设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至4任一项所述从WEB网站中获取数据的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于威创集团股份有限公司,未经威创集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810040122.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种应用模块定位方法及装置,电子设备
- 下一篇:异常情报数据识别机器学习方法