[发明专利]一种多通道大数据存储方法及其系统在审
申请号: | 201810510125.7 | 申请日: | 2018-05-24 |
公开(公告)号: | CN108762676A | 公开(公告)日: | 2018-11-06 |
发明(设计)人: | 陈珺 | 申请(专利权)人: | 安徽雷索信息科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 昆明合众智信知识产权事务所 53113 | 代理人: | 杨俊达 |
地址: | 230088 安徽省合肥市*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据信息 字节数 多通道 大数据 存储 传输 采集前端设备 数据比对模块 数据采集模块 数据存储模块 数据分析模块 数据通信模块 采集数据 存储系统 分路传输 计算分析 数据传输 数据存储 分模块 比对 分路 采集 通信 | ||
本发明公开了一种多通道大数据存储方法,该方法包括以下步骤:S1、采集数据信息;S2、计算采集的数据信息的字节数;S3、根据字节数计算结果,对字节数较大的数据信息进行拆分传输;S4、拆分后的数据信息进行分路同时传输,并对分路传输后的数据信息进行多通道同时存储。本发明还公开了一种多通道大数据存储系统,包括MCU处理器、采集前端设备的数据信息的数据采集模块、计算分析数据信息的字节数的数据分析模块、比对字节数和分路传输阈值的数据比对模块、对字节数较大的数据信息进行拆分的数据拆分模块、数据进行通信的数据通信模块和进行数据存储的数据存储模块。本发明的多通道大数据存储方法及其系统,具有高速的数据传输和存储速度。
技术领域
本发明涉及数据传输和存储技术领域,具体是一种多通道大数据存储方法及其系统。
背景技术
随着互联网技术的广泛应用,在科技行业,以及传统行业与互联网行业的结合的大背景下,各个行业的数据的增长呈现指数级,这些数据含有宝贵的价值,而在数据进行显示时需要进行加载处理,所以如何快速对数据信息进行加载显得尤为重要。
现有技术CN107391023A提供了一种多通道数据存储器及其存取方法及装置,其中所述方法包括:确定待存储的第一数据块,所述第一数据块是由第一通道接收到的数据块;确定所述多通道数据存储器的随机存取存储器RAM的第一存储信息,所述多通道数据存储器至少包括第一通道、第二通道以及第一通道和第二通道共享的RAM;根据所述第一存储信息在所述RAM上为所述第一数据块分配第一存储空间;将所述第一数据块写入所述第一存储空间。该技术优点在于通过多通道对数据进行存储,加快了数据存储的速度。但在数据处理过程中,仅通过对数据存储进行多通道处理,对数据处理速度的提升不足以应对当前互联网环境的和用户的需求。
发明内容
本发明的目的在于提供一种多通道大数据存储方法及其系统,以解决上述背景技术中提出的现有数据多通道存储对互联网数据处理速度提升不足的问题。
为实现上述目的,本发明提供如下技术方案:
一种多通道大数据存储方法,该方法包括以下步骤:
S1、采集数据信息;
S2、计算采集的数据信息的字节数;
S3、根据字节数计算结果,对字节数较大的数据信息进行拆分传输;
S4、拆分后的数据信息进行分路同时传输,并对分路传输后的数据信息进行多通道同时存储。
优选的,所述S1包括通过数据采集模块对前端设备的数据信息进行采集。
优选的,所述S2包括通过数据分析模块对数据信息的字节数进行计算,并根据数据比对模块判断数据信息的字节数是否到达分路传输的阈值。
优选的,所述S3包括通过数据拆分模块对字节数较大的数据信息进行拆分。
优选的,所述S4包括通过数据通信模块对数据信息进行传输,并通过数据存储模块对传输后的数据信息进行存储。
一种多通道大数据存储系统,包括:MCU处理器、数据采集模块、数据分析模块、数据比对模块、数据拆分模块、数据通信模块和数据存储模块;
所述MCU处理器作为数据存储系统的控制中心;所述数据采集模块用于采集前端设备的数据信息,所述数据分析模块用于计算分析数据信息的字节数,所述数据比对模块用于比对字节数和分路传输阈值,所述数据拆分模块用于对字节数较大的数据信息进行拆分,所述数据通信模块用于数据进行通信,所述数据存储模块用于进行数据存储;
所述数据采集模块和数据分析模块通讯连接,所述数据分析模块和数据比对模块通讯连接,所述数据比对模块和数据拆分模块通讯,所述数据拆分模块和数据存储模块通讯连接,所述数据存储模块和MCU处理器通讯连接。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于安徽雷索信息科技有限公司,未经安徽雷索信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810510125.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:数据存储方法及系统
- 下一篇:一种存储设备的智能扫描方法及系统