[发明专利]一种基于开发流程闭环的BI管理系统

说明书

基于BI开发流程闭环的BI管理系统，权限管理模块，根据不同的项目赋予开发人员不同的权限；权限管理分为组织架构管理、用户组管理、角色管理、用户管理单元；其中组织架构管理单元是对公司不同事业部的管理，用户组管理单元为事业部下的子部门管理单元；不同测试人员可以看到对应的测试界面，在测试界面中完成测试任务；数据源管理模块；ETL开发管理模块，提供ETL开发和调试界面，将开发好的ETL和相关语句上传到ETL开发管理模块的控制系统，然后发布到相关平台，由审核人员审核通过后进行调度，保证数据的更新；开发流程管理模块；流量监控模块和部门项目绩效管理模块。

技术领域

本发明涉及对BI开发流程进行管理系统，尤其涉及一种高效的实现开发流程闭环管理的BI管理系统。

背景技术

很多企业在发展经营的过程中会产生大量的相关数据，这些数据隐藏着巨大的商业价值，而商业智能(BI)就是利用数据库技术、ETL技术、OLAP分析以及数据挖掘技术对企业业务活动产生的数据进行有效的整合，快速准确进行分析并提取有用信息，帮助企业做出明智的业务经营决策的一整套的解决方案。而在这个过程中会出现如下的问题：

1.数据源管理，ETL开发等开发流程碎片化，对流程缺少必要的监控和质量把控。

2.普通开发过程缺少权限管理，即：管理员权限，开发者权限，测试者权限，查看权限等多角色、多用户、多分组权限管理。

3.开发过程缺少流程管理，缺少对不同开发者在开发过程中的各个阶段的管理。

4.缺少外部数据库引入的操作，而在现实开发场景中经常会需要引入外部数据库，以及外部数据库数据的操作。

5.没有对流量进行监控告警。

6.部门项目缺少系统的管理，造成维护成本高、效率低的状况。

如果BI管理系统不能提供完整完善的BI管理流程，那么碎片化的独立开发可能造成项目管理困难，开发效率低下，出错率高、数据安全存在风险等问题。本专利提供一种新型的基于BI开发流程闭环管理的BI管理系统，通过本管理系统，BI开发过程涉及到的收集、管理数据，用户的权限分配，ETL开发与发布，开发流程管理，多数据源管理，监控与告警提，项目管理，开发流程管理，绩效管理等操作都有了保证，能够准确、安全与高效地完成开发。

ETL是数据抽取(Extract)、清洗(Cleaning)、转换(Transform)、装载(Load)的过程。是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗,最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。于是，企业如何通过各种技术手段，并把数据转换为信息、知识，已经成了提高其核心竞争力的主要瓶颈。而ETL则是主要的一个技术手段。

做数据仓库系统，ETL是关键的一环。ETL是数据传递的工具，也是数据整合解决方案。ETL技术用到的工具，常用的有Informatica、Datastage、Beeload、Kettle等。如kettle是一款国外开源的ETL工具，纯java编写，可在Window、Linux、Unix上运行。kettle运行需要机器有JRE环境。

Kettle这个ETL工具集，它允许你管理来自不同数据库的数据，通过提供一个图形化的用户环境来描述你想做什么。

Kettle中有两种脚本文件，transformation和job，transformation完成针对数据的基础转换，job则完成整个工作流的控制。

发明内容

本发明目的是，提出一种基于开发流程闭环的BI管理系统，创建一种高效、安全的BI管理系统，解决BI开发过程可能遇到的各种问题。

本发明的技术方案是，一种基于BI开发流程闭环的BI管理系统，包括：