[发明专利]一种大数据处理平台网络架构

说明书

技术领域

本发明涉及一种大数据处理结构，具体是一种大数据处理平台网络架构。

背景技术

计算机是20世纪人类最伟大的发明之一，随着科技与经济的发展，知识经济时代 呼啸而来，作为知识和信息的处理、传输和存储之载体的计算机，也得到了大力的发展。21 世纪是人类走向信息社会的世纪，是网络的时代，是超高速信息公路建设取得实质性进展 并进入应用的年代。

随着信息技术的高速发展与普及，信息技术对大数据的依赖性越来越高，近年来， 大数据如浪潮般席卷全球，深刻改变了人们的生活、工作和思维方式。世界上越来越多的国 家开始从战略层面认识大数据，在政府治理领域融入大数据思维和技术。我国政府也应顺 应时代发展趋势，充分利用大数据提升国家治理能力，以契合推进国家治理能力现代化的 时代要求。可以说大数据为政府治理能力的提升带来了发展机遇。首先，大数据能推动政府 治理理念和模式的变化。在政府治理领域，通过让海量、动态、多样的数据有效集成为有价 值的信息资源，推动政府转变管理理念和治理模式，进而加快治理体系和治理能力现代化。 其次，大数据能推动政府治理决策精细化和科学化。在大数据时代，数据的价值随着海量积 累而产生质变，能够对经济社会运行规律进行直观呈现，从而降低政府治理偏差概率，提高 政府治理的精细化和科学化。最后，大数据能推动政府治理提高效率和节约成本。利用大数 据，可以使政府治理所依据的数据资料更加全面，不同部门和机构之间的协调更加顺畅，进 而有效提高工作效率，节约治理成本。

政府的大数据处理平台可能存储了各个区、街道的人口、法人、房屋、证件等多种 类型的数据。仅一个区的数据量，目前记录总数就可能达到1亿条左右，未来数据量会不断 增加，并且会引入大量非结构化数据。为了处理快速增加的数据，现有的大数据处理技术也 需要作出相应提高。

发明内容

本发明旨在提供一种大数据处理平台网络架构。

为实现所述目的，本发明提供如下技术方案：

一种大数据处理平台网络架构，包括云处理系统和多个终端电子设备1、2……n，所述 云处理系统包括存储设备、第一服务器和第二服务器，所述存储设备包括多个存储盘1、 2……n,存储设备通过存储资源管理模块分别与第一服务器和第二服务器连接，所述第一 服务器和第二服务器均包括CPU、进程调度芯片、FPGA芯片、文件处理接口、故障处理模块、 文件交互接口和网卡，所述CPU通过进程调度芯片与FPGA芯片连接，所述FPGA芯片通过文件 处理接口与存储资源管理模块连接。

优选地，所述第一服务器和第二服务器的CPU分别连接有故障处理模块、网卡和文 件交互接口。

优选地，所述第一服务器的文件交互接口与第二服务器的文件交互接口连接。

优选地，所述第一服务器和第二服务器的网卡均与交换机连接，所述交换机通过 路由器连接网络。

优选地，所述文件交互接口采用双端口RAM。

优选地，所述终端电子设备1、2……n包括相互连接的处理单元和控制芯片。

优选地，所述存储设备、存储资源管理模块、第一服务器、第二服务器、交换机和路 由器均由电源供电进行工作。

优选地，所述电源为双冗余电源。

与现有技术相比，本发明的有益效果是：

1、本发明设置多个存储盘，并由存储资源管理模块统一进行管理，并与各服务器连接 实现数据存储与处理分析，通过共享存储设备节省了设备成本，服务器间可以进行文件交 互，提高了处理效率，也提高了处理速度。

2、各服务器通过交换机和路由器连接网络，各终端设备可以通过网络实现与服务 器的连接，进一步实现数据的上传与下载，灵活性更高，使用更加便捷。

3、各服务器的CPU通过进程调度芯片和FPGA芯片与存储资源管理模块连接，通过 FPGA芯片和进程调度芯片对存储数据进行预处理，将数据采集、数据过滤和数据处理集中 在一个设备中，大大提高了处理效率，也提高了处理速度，特别适合对数据处理延迟要求高 的行业。

4、所述存储设备、存储资源管理模块、第一服务器、第二服务器、交换机和路由器 统一由电源供电进行工作，电源为双冗余电源，支持交直流供电。

附图说明

图1为本发明的结构示意图；

图2为本发明的终端电子设备的结构图。