[发明专利]基于内存数据网格的数据处理方法

摘要

本发明公开了基于内存数据网格的数据处理方法，涉及计算机技术领域；为了解决因数据量巨大导致数据处理负载压力过大问题；具体包括如下步骤：确定待处理数据的数据量；将数据库中待处理数据加载至内存数据网格中；建立待处理的数据分组模型，对内存数据结构进行配置，将内存数据网格中的待处理数据划分为若干个数据队列；针对不同类型数据的字符串长度选择对应的数据分组模型；采用列式存储管理方法针对不同的数据类型进行内存管理。本发明可以得到时间稳定度最小时所对应的待处理数据的划分队列的结果，从而对待处理数据实现智能划分，且划分后时间稳定度最小，从而使得数据处理时间短，且每个数据处理节点都比较稳定。