[发明专利]批量数据处理方法、服务器、系统及存储介质有效
申请号: | 201711323263.6 | 申请日: | 2017-12-07 |
公开(公告)号: | CN107967347B | 公开(公告)日: | 2021-01-22 |
发明(设计)人: | 黎炜 | 申请(专利权)人: | 湖北三新文化传媒有限公司 |
主分类号: | G06F16/90 | 分类号: | G06F16/90 |
代理公司: | 深圳市港湾知识产权代理有限公司 44258 | 代理人: | 微嘉 |
地址: | 430000 湖北省武汉市东湖开发*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 批量 数据处理 方法 服务器 系统 存储 介质 | ||
1.一种批量数据处理方法,其特征在于,所述批量数据处理方法包括以下步骤:
服务器获取批量数据,根据所述批量数据的数据类型将所述批量数据保存至预设数据库;
提取所述预设数据库中的数据,将所述预设数据库中的数据通过本地预存的第一预设规则进行预处理;
将所述预处理后的数据导入预设处理中心,以使所述预设处理中心根据本地预存的第二预设规则对所述预处理后的数据进行分类,并将分类后的数据送入相应的数据库进行分析;
将分析后的数据通过第一预设算法进行计算,并根据计算结果得出所述批量数据的挖掘结果;
所述提取所述预设数据库中的数据,将所述预设数据库中的数据通过本地预存的第一预设规则进行预处理,具体包括:
提取所述预设数据库中的数据,根据所述第一预设规则对所述数据通过第二预设算法进行实时处理。
2.如权利要求1所述的批量数据处理方法,其特征在于,所述服务器获取批量数据,根据所述批量数据的数据类型将所述批量数据保存至预设数据库之后,所述方法还包括:
接收用户查询请求,根据所述查询请求访问所述预设数据库,以使所述预设数据库根据所述用户请求输出相应的查询结果。
3.如权利要求1所述的批量数据处理方法,其特征在于,所述提取所述预设数据库中的数据,将所述预设数据库中的数据通过本地预存的第一预设规则进行预处理之前,所述方法还包括:
获取用户的第一存储指令,提取所述第一存储指令中的第一预设规则,并将所述第一预设规则保存在本地。
4.如权利要求1至3中任一项所述的批量数据处理方法,其特征在于,所述提取所述预设数据库中的数据,将所述预设数据库中的数据通过本地预存的第一预设规则进行预处理之前,所述方法还包括:
获取所述预设数据库中的数据的数据格式,在所述数据格式不满足合法格式时,将不满足合法格式的数据进行过滤,并将过滤后的数据作为所述预设数据库中的数据。
5.如权利要求1至3中任一项所述的批量数据处理方法,其特征在于,所述将分析后的数据通过第一预设算法进行计算,并根据计算结果得出所述批量数据的挖掘结果,具体包括:
获取所述分析后的数据的挖掘类型,根据所述挖掘类型选择相应的挖掘算法进行计算,并根据计算结果得出所述批量数据的挖掘结果。
6.如权利要求1至3中任一项所述的批量数据处理方法,其特征在于,所述获取批量数据之前,所述方法还包括:
获取用户配置指令,根据所述配置指令与多种数据库建立连接。
7.一种服务器,其特征在于,所述服务器包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的批量数据处理程序,所述批量数据处理程序配置为实现如权利要求1至6中任一项所述的批量数据处理方法的步骤。
8.一种批量数据处理系统,其特征在于,所述批量数据处理系统包括:小型数据库、集中式分布数据库以及如权利要求7中所述的服务器。
9.一种存储介质,其特征在于,所述存储介质上存储有批量数据处理程序,所述批量数据处理程序被处理器执行时实现如权利要求1至6中任一项所述的批量数据处理方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湖北三新文化传媒有限公司,未经湖北三新文化传媒有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711323263.6/1.html,转载请声明来源钻瓜专利网。