[发明专利]基于神经网络的大数据分析处理系统在审
申请号: | 202210660802.X | 申请日: | 2022-06-13 |
公开(公告)号: | CN114968721A | 公开(公告)日: | 2022-08-30 |
发明(设计)人: | 朱忠泉;孙成;倪天亮 | 申请(专利权)人: | 元硕信息科技(上海)有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F11/32;G06N3/04;G06N3/08 |
代理公司: | 上海索源知识产权代理有限公司 31431 | 代理人: | 童世梅 |
地址: | 200080 上海市虹*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 神经网络 数据 分析 处理 系统 | ||
本发明属于大数据领域,涉及神经网络技术,用于解决现有的大数据处理系统不具备对同一标签下的不同数据存储节点进行数据存储调节的功能的问题,具体是基于神经网络的大数据分析处理系统,包括分布式存储平台与应用平台,分布式存储平台与应用平台通信连接,所述分布式存储平台通过神经网络技术进行构建,且分布式存储平台还通信连接有稳定分析模块与数据调节模块,所述应用平台通信连接有tit管理模块与预警模块;本发明通过构建的分布式存储平台,在每个分布式存储节点上同时放置结构化、非结构化和半结构化数据,通过分析结果对分析节点的数据存储合理性进行判定,从而保证数据存储节点的工作稳定性与效率值。
技术领域
本发明属于大数据领域,涉及神经网络技术,具体是基于神经网络的大数据分析处理系统。
背景技术
大数据分析是指对规模巨大的数据进行分析,大数据可以概括为5个V,数据量大、速度快、类型多、价值、真实性,大数据作为时下最火热的IT行业的词汇,随之而来的数据仓库、数据安全、数据分析、数据挖掘等等围绕大数据的商业价值的利用逐渐成为行业人士争相追捧的利润焦点,随着大数据时代的来临,大数据分析也应运而生。
现有的大数据处理系统不具备对同一标签下的不同数据存储节点进行数据存储调节的功能,因此数据存储节点的稳定性与效率值均会受到影响,同时也不利于通过数据节点的标签化对大数据平台进行数据预警分析。
针对上述技术问题,本申请提出一种解决方案。
发明内容
本发明的目的在于提供基于神经网络的大数据分析处理系统,用于解决现有的大数据处理系统不具备对同一标签下的不同数据存储节点进行数据存储调节的功能的问题;
本发明需要解决的技术问题为:如何提出一种可以对同一标签下的不同数据存储节点进行数据存储调节的大数据分析处理系统。
本发明的目的可以通过以下技术方案实现:
基于神经网络的大数据分析处理系统,基于神经网络的大数据分析处理系统,包括分布式存储平台与应用平台,分布式存储平台与应用平台通信连接,所述分布式存储平台通过神经网络技术进行构建,且分布式存储平台还通信连接有稳定分析模块与数据调节模块,所述应用平台通信连接有tit管理模块与预警模块;
将分布式存储节点标记为分析节点i,i=1,2,…,n,n为正整数;
所述稳定分析模块用于对分布式存储平台的存储节点稳定性进行检测分析并对分析节点i的数据存储是否合理进行判定,在分析节点i的数据存储不合理时向数据调节模块发送调节信号;
数据调节模块接收到调节信号后对分析节点之间进行数据存储调节使分析节点i的数据存储合理;
所述tit管理模块用于为应用平台生成tit值并对其进行管理并分析得到分布式存储平台的数据等级;
所述预警模块用于通过分布式存储平台的数据等级对应用平台的应用对象进行预警分析。
作为本发明的一种优选实施方式,所述稳定分析模块对分布式存储平台的存储节点稳定性进行检测分析的具体过程包括:获取分析节点i的存储数据的数量并标记为SLi,获取分析节点i的存储数据的内存值并标记为NCi,获取分析节点i的存储数据的调用次并标记为DYi,通过对SLi、NCi以及DYi进行数值计算得到分析节点i的应用系数;将分析节点i的应用系数YYi建立应用集合{YY1,YY2,…,YYn},对分析节点i的应用集合进行方差计算得到应用表现值,将应用表现值与应用表现阈值进行比较并通过比较结果对分析节点i的数据存储是否合理进行判定。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于元硕信息科技(上海)有限公司,未经元硕信息科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210660802.X/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置