[发明专利]一种支持非结构化数据的采集分析系统和方法在审
| 申请号： | 201811345099.3 | 申请日： | 2018-11-13 |
| 公开（公告）号： | CN109669965A | 公开（公告）日： | 2019-04-23 |
| 发明（设计）人： | 颜文德;徐明;叶祖锋;王华松 | 申请（专利权）人： | 广州欧赛斯信息科技有限公司 |
| 主分类号： | G06F16/2458 | 分类号： | G06F16/2458;G06F16/215;G06F16/22;G06F16/28 |
| 代理公司： | 广州嘉权专利商标事务所有限公司 44205 | 代理人： | 胡辉 |
| 地址： | 510000 广东省广州市高新技术产业开发*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种支持非结构化数据的采集分析系统，包括：数据采集模块，用于获取Web页面上传的数据作为第一数据，对所述第一数据进行校验，得到第二数据，将第二数据存入非结构化数据库中；数据处理模块，用于从非结构化数据库中抽取第二数据，对第二数据进行数据清洗，得到第三数据，然后将第三数据存入结构化数据库中；数据分析模块，用于对非结构化数据库中的数据或者结构化数据库中的数据进行分析处理。本发明采用非结构数据库对原始数据进行存储，然后逐步将原始数据处理为结构化的数据并存储在结构化数据库中，使得本系统可以有助于减轻Web应用的负载压力，提升非结构化数据处理的效率。本发明可以广泛应用于数据处理技术。 | ||
| 搜索关键词： | 非结构化数据库 结构化数据库 采集分析系统 非结构化数据 第一数据 存储 数据采集模块 数据处理技术 数据处理模块 数据分析模块 原始数据处理 结构数据库 非结构化 分析处理 负载压力 数据清洗 原始数据 校验 数据处理 结构化 上传 抽取 应用 | ||
【主权项】：
1.一种支持非结构化数据的采集分析系统，其特征在于：包括：数据采集模块，用于获取Web页面上传的数据作为第一数据，对所述第一数据进行校验，得到第二数据，将第二数据存入非结构化数据库中；数据处理模块，用于从非结构化数据库中抽取第二数据，对第二数据进行数据清洗，得到第三数据，然后将第三数据存入结构化数据库中；数据分析模块，用于对非结构化数据库中的数据或者结构化数据库中的数据进行分析处理。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于广州欧赛斯信息科技有限公司，未经广州欧赛斯信息科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201811345099.3/，转载请声明来源钻瓜专利网。
- 上一篇：模型迭代训练方法及装置
- 下一篇：多级数据分析方法、装置及电子设备
