[发明专利]一种基于云教学平台的数据库系统在审
申请号: | 201910284982.4 | 申请日: | 2019-04-10 |
公开(公告)号: | CN110135795A | 公开(公告)日: | 2019-08-16 |
发明(设计)人: | 朱旭;崔小龙;赵国炯 | 申请(专利权)人: | 杭州博世数据网络有限公司 |
主分类号: | G06Q10/10 | 分类号: | G06Q10/10;G06Q50/20;G06F16/2455;G06F16/25;G06F16/27 |
代理公司: | 杭州华鼎知识产权代理事务所(普通合伙) 33217 | 代理人: | 项军 |
地址: | 310000 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据粒度 采集 数据库系统 教学平台 分层 数据生命周期 数据采集层 数据库领域 访问端口 快速定位 时间调度 使用数据 数据层级 数据分析 数据共享 数据结构 数据平台 访问层 计算层 元数据 管控 维度 存储 监控 清晰 管理 交换 分析 维护 | ||
1.一种基于云教学平台的数据库系统,其特征在于,包括:
数据采集层,用于采集各业务端的数据;
存储与计算层,用于对采集的数据根据数据粒度进行分层存放,并按照特定数据分析需求进行主题、维度、指标的计算;
管控层:用于采集、计算任务的时间调度、元数据的管理与维护以及数据生命周期的管理;
访问层:用于提供访问端口,进行数据共享与交换。
2.根据权利要求1所述的一种基于云教学平台的数据库系统,其特征在于,所述存储与计算层包括:
数据缓冲层,用于保存数据采集层采集的数据,并根据数据建立对应的外表;
细节层,用于将数据缓冲层抽取的数据,按主题构建事实表与维度表,在事实表上补全维度;
中间层,用于对按主题存放的细节层数据,按照业务指标定义,拆解为最细粒度的指标;
数据集市层,用于按照特定数据分析需求进行主题、维度、指标的计算。
3.根据权利要求2所述的一种基于云教学平台的数据库系统,其特征在于,所述数据缓冲层针对不同数据源采用不同的采集方案。
4.根据权利要求3所述的一种基于云教学平台的数据库系统,其特征在于,所述数据缓冲层包括:
第一采集单元,用于对mysql数据源进行表级的数据抽取;
第二采集单元,用于对埋点日志采用分布式采集数据;
第三采集单元,用于结构化的外部数据采集。
5.根据权利要求4所述的一种基于云教学平台的数据库系统,其特征在于,所述第一采集单元采用sharding技术读取分片库数据。
6.根据权利要求5所述的一种基于云教学平台的数据库系统,其特征在于,所述存储与计算层还包括:
数据监控与调度层,用于数据采集、分层任务的调度并对获取的数据进行监控。
7.根据权利要求6所述的一种基于云教学平台的数据库系统,其特征在于,所述对获取的数据进行监控包括:
判断数据采集、数据处理过程中的数据量和数据内的各个字段信息是否完整;
判断数据记录的格式、字段类型、数据处理前后过程中的数据是否一致以及多源数据集之间的关联信息是否一致;
判断数据记录的内容是否准确、数据各个信息的值域范围是否符合业务设定的规范以及是否存在异常或错误数据;
判断数据采集的时间间隔是否超过设定的时间周期。
8.根据权利要求1所述的一种基于云教学平台的数据库系统,其特征在于,还包括:
共享服务层,用于基于计算后的主题数据,对外提供数据服务接口。
9.根据权利要求1所述的一种基于云教学平台的数据库系统,其特征在于,还包括:
应用层,用于基于共享服务层提供的数据服务接口。
10.根据权利要求1所述的一种基于云教学平台的数据库系统,其特征在于,还包括:
开发运营层,用于基于共享服务层提供的数据服务接口,为分析人员提供即席查询服务。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州博世数据网络有限公司,未经杭州博世数据网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910284982.4/1.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理