[发明专利]一种基于分层数据节点进行数据聚集的方法及系统

说明书

本发明涉及一种基于分层数据节点进行数据聚集的方法及系统，其中方法包括：当发起方通过人脸识别验证时，向按照分层结构设置的多个数据节点中处于第一层的每个数据节点发送数据聚集消息，以使得第一层的每个数据节点进入数据聚集状态；第一层的每个数据节点通过数据采集接口获取原始数据内容；第一层的每个数据节点将去除了无效数据和冗余数据的初级数据内容上传给各自的第二层的数据节点；第二层的每个数据节点将去除了冗余数据的高级数据内容发送给第三层的数据节点，以促使第三层的数据节点对高级数据内容进行安全性检测，从而去除无法公开的数据；第三层的数据节点将去除了无法公开的数据的最终数据内容发送给发起方。

技术领域

本发明涉及数据处理技术领域，并且更为具体地，涉及一种基于分层数据节点进行数据聚集的方法及系统。

背景技术

目前，国家粮食和物资储备局上线的国家粮油统计信息系统，是基于B/S架构模式，面向全国涉粮单位，实现粮食流通相关信息统计工作。

本发明主要是面向省粮食和物资储备局，融合省级粮食和物资管理平台，全面实现省级范围内粮食流通制度的信息化管理，通过数据协同技术手段，打通省级粮油市场监测系统与国家局平台、省级监测点及权威市场信息的数据采集汇聚渠道，利用大数据技术和移动app，进行数据的清洗、处理和应用，在省级粮油市场动态监测月刊、价格监测、供需平衡、决策分析等业务管理方面，开展个性化应用。

目前，在粮油市场监测领域，国家粮食和物资储备局的监测体系是比较完善的，但是在各个省级粮油市场监测管理领域，不能完全满足各省级粮食管理部门的业务需求，尤其是不能覆盖各省级自建监测点的信息化管理，且不能完全根据各省的实际管理需求，进行市场监测数据的采集、展示和决策分析。另外，各省都建设了省级粮食管理平台，如何与粮油市场监测系统融合，避免数据重复填报，是至关重要的。

发明内容

本发明目的在于建立一套省级粮食市场监测数据的采集体系，实现国家局数据、省级数据及市场权威数据的多源数据融合，真正实现大数据的充分应用，完善省级粮食流通信息化管理体系，同时不断深化业务应用，提供移动APP的数据采集和数据查询手段，更快更有效的形成全省范围内的市场监测数据体系；此外，通过多源数据的自动汇集与处理，自动生成省级粮油市场动态监测月刊、供需平衡和其他流通统计表；通过与省级管理平台的融合，为全省粮食安全预警预测和决策分析，提供强有力技术保障。

省级粮油市场监测系统，通过成熟的数据共享接口，将国家粮食和物资储备局“粮油统计直报系统”的粮油行业统计数据同步到省平台，省粮食和物资储备局可通过云服务平台采集本区域内自建监测点的数据，与共享的数据充分融合，形成省级粮食流通大数据体系。

在数据全面汇总和分析的基础上，完成粮油价格监测、供需调查统计、粮油流通统计的业务应用，功能点包括数据上报、数据审核、数据汇总、数据分析、品种管理、属性配置等；同时可提供导出，打印、查询历史数据(按年度及月度)等功能。

省级粮油市场动态监测月刊，可以线上维护编辑月刊模板，月刊内的粮油市场动态数据，除了自动来源于上述国家局平台和自采集的数据外，系统还提供采集对接市场行情数据，如权威的《中国粮食信息网》的每日发布数据。月刊每月自动生成，并提供导出、打印、查询等功能。

系统支持移动APP方式，在移动端上报粮油价格信息、交易量信息及消费数据，提供环比、同比及预测分析等功能。

根据本发明的一个方面，提供一种基于分层数据节点进行数据聚集的方法，所述方法包括：

通过外部接口获取来自发起方的数据聚集请求，对所述数据聚集请求进行解析以获取所述发起方的标识信息、身份信息和生物识别信息；

基于发起方的标识信息在认证数据库中获取预先存储的认证信息，基于认证信息对发起方的身份信息和生物识别信息进行验证，当发起方的身份信息和生物识别信息通过验证时，基于认证信息对发起方进行人脸识别验证；