[发明专利]一种数据处理系统在审
申请号: | 201810108185.6 | 申请日: | 2018-02-02 |
公开(公告)号: | CN108133062A | 公开(公告)日: | 2018-06-08 |
发明(设计)人: | 吴智军;孙晗 | 申请(专利权)人: | 北京火花日志科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F9/54;H04L29/06;H04L29/08 |
代理公司: | 北京创遇知识产权代理有限公司 11577 | 代理人: | 李芙蓉;孙进华 |
地址: | 102488 北京市房山*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 应用接口 队列缓存器 数据校验 主数据库 电连接 规整器 客户端 数据处理系统 数据处理端 数据传输 服务器 信息处理技术 环境要求 | ||
1.一种数据处理系统,其特征在于,所述系统包括:
本地数据处理端;
服务器,包括数据校验规整器、队列缓存器、主数据库、数据单应用接口以及数据批量应用接口,所述数据校验规整器与所述队列缓存器电连接,所述队列缓存器与所述主数据库电连接,所述数据单应用接口以及所述数据批量应用接口分别与所述主数据库电连接;
客户端;
其中,所述本地数据处理端通过HTTP协议或HTTPS协议与所述数据校验规整器进行数据传输;
所述客户端通过HTTP协议或HTTPS协议或WebSocket或WebSocketSecure协议与所述数据单应用接口或数据批量应用接口进行数据传输。
2.根据权利要求1所述的数据处理系统,其特征在于,所述数据校验规整器包括权限校验模块和数据标准化模块;所述数据校验模块用于对从所述本地数据处理端接收的数据进行校验;所述数据标准化模块,用于对从所述本地数据处理端接收的数据进行标准化处理。
3.根据权利要求1所述的数据处理系统,其特征在于,所述队列缓存器用于将接收到的数据排队写入所述主数据库。
4.根据权利要求1所述的数据处理系统,其特征在于,所述主数据库包括快照处理模块,所述快照处理模块用于将自身存储的数据进行快照处理,并将处理结果写入所述队列缓存器中。
5.根据权利要求1所述的数据处理系统,其特征在于,所述主数据库包括异步ETL模块,所述异步ETL模块用于对从所述队列缓存器存储至所述主数据库的数据进行异步ETL处理。
6.根据权利要求1所述的数据处理系统,其特征在于,所述数据处理系统还包括从数据库;
所述从数据库分别与所述数据单应用接口、所述数据批量应用接口以及所述主数据库电连接。
7.根据权利要求1所述的数据处理系统,其特征在于,所述服务器还包括即席查询接口以及历史数据查询接口。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京火花日志科技有限公司,未经北京火花日志科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810108185.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种诈骗群体识别系统
- 下一篇:一种基于大数据的地图地名道路查询装置