[发明专利]一种基于大数据技术的数据分析方法管理系统

权利要求书

1.一种基于大数据技术的数据分析方法管理系统，包括大数据安全管理平台，其特征在于：

数据预处理层，所述大数据安全管理平台包括数据预处理层，所述数据预处理层的预处理方法包括数据清理、数据集成、数据变换和数据规约，所述数据预处理层的内容包括数据审核、数据筛选和数据排序；

数据存储层，所述大数据安全管理平台包括数据存储层，所述数据存储层包括大数据存储方式和大数据存储技术路线；

数据分析挖掘层，所述大数据安全管理平台包括数据分析挖掘层，所述数据分析挖掘层包括实施数据分析和历史数据分析，所述数据分析挖掘层的计算分析框架包括批处理框架、流处理框架、交互式计算框架、混合处理框架和图数据处理框架；

数据结果应用层，所述大数据安全管理平台包括数据结果应用层，所述数据结果应用层包括医疗领域、教育领域、商业领域、工农业领域和交通领域。

2.根据权利要求1所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述大数据存储方式包括分布式系统、NoSQL数据库和云数据库。

3.根据权利要求2所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述大数据存储技术路线包括分布式架构、大数据一体机和MPP混合架构。

4.根据权利要求3所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述大数据安全管理平台包括数据生产和获取层。

5.根据权利要求4所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述大数据安全管理平台包括数据源审计层。

6.根据权利要求5所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述大数据安全管理平台包括日志采集层。

7.根据权利要求6所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述大数据安全管理平台的层级从下到上依次为数据生产和获取层、数据源审计层、日志采集层、数据预处理层、数据存储层、数据分析挖掘层和数据结果应用层。

8.根据权利要求7所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述数据源审计层包括软硬件基础设施，所述软硬件基础设施包括服务器、网络设备、安防设备、数据库和中间件。

9.根据权利要求8所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述日志采集层的主要功能是采集信息，包括网络安全日志的分类、过滤、归并和转发，所述数据结果应用层面向用户，提供权限配置、系统维护、策略制定、报表管理和可视化展示。

10.根据权利要求9所述的一种基于大数据技术的数据分析方法管理系统，其特征在于：所述数据清理清除异常数据，所述数据集成结合多组数据源中的数据集中存储，所述数据变换将数据转变成有利于数据分析挖掘的形式，所述数据规约节省数据挖掘分析时间且保证数据完整性，所述数据审核审核数据的准确性，所述数据筛选筛选出符合条件的数据，所述数据排序对数据进行排列。