[发明专利]一种数据优化处理系统

权利要求书

1.一种数据优化处理系统，其特征在于，该系统包括：

数据预处理模块，用于从待处理业务数据中选取用于进行优化处理的数据子集；

通信模块，用于对所述数据预处理模块选取的数据子集进行MPS编码，得到MPS数据包，根据预设数据结构解析所述MPS数据包，得到符合优化处理的结构化数据，并将得到的结构化数据传输到计算模块；

计算模块，用于利用智能优化算法对所述结构化数据进行优化处理；

其中，所述数据预处理模块，具体用于建立预设的数据优化处理模型与待处理业务数据之间的对应关系，根据所述对应关系从所述待处理业务数据中选取用于进行优化处理的数据子集；

其中，MPS为用于表达线性优化模型的模型数据存储格式与传输格式；

其中，所述数据优化处理模型由目标函数，约束矩阵和右边项三个部分组成。

2.根据权利要求1所述的系统，其特征在于，所述数据预处理模块，还用于在从待处理业务数据中选取用于进行优化处理的数据子集之前，对所述待处理业务数据进行标准化处理，并根据待处理业务数据对应的业务规则，对标准化处理后的数据进行数据一致性检验。

3.根据权利要求1所述的系统，其特征在于，所述系统还包括：

数据验证模块，用于在所述通信模块对所述数据子集进行MPS编码之前，采用所述智能优化算法的原型算法对所述数据子集进行性能指标验证。

4.根据权利要求1所述的系统，其特征在于，所述通信模块包括：数据划分单元和并行的多个数据传输节点；

数据划分单元，用于根据预设条件对所述数据子集进行划分，得到多个数据块；

每一数据传输节点包括数据编码单元、数据解析单元以及数据传输单元；

数据编码单元，用于对每一数据块进行MPS编码，得到MPS数据包；

数据传输单元，用于传输编码后的MPS数据包；

数据解析单元，用于根据预设数据结构解析每一MPS数据包，得到每一MPS数据包对应的符合优化处理的结构化数据。

5.根据权利要求4所述的系统，其特征在于，所述通信模块还包括：

数据发布单元，用于将各个MPS数据包对应的符合优化处理的结构化数据向所述计算模块发布。

6.根据权利要求4所述的系统，其特征在于，所述预设数据结构为树形计算数据结构；

相应地，所述数据解析单元，具体用于根据数据内容将数据从每一MPS数据包中取出，并存放在对应的树形计算数据结构的相应节点上，得到每一MPS数据包对应的树。

7.根据权利要求4所述的系统，其特征在于，所述MPS数据包中包括所述智能优化算法中目标函数和约束矩阵对应的第一MPS数据和所述智能优化算法中右边项和路径对应的第二MPS数据；

相应地，所述数据解析单元，具体包括：第一解析子单元、第二解析子单元以及匹配单元；

第一解析子单元，用于根据数据内容将数据从第一MPS数据中取出，并存放在对应的树形计算数据结构的相应节点上；

第二解析子单元，用于根据数据内容将数据从第二MPS数据中取出，得到右边项数据和路径信息；

匹配单元，用于遍历所述树形计算数据结构，根据所述路径信息匹配所述右边项数据的节点，并将右边项数据存放在匹配的节点上。

8.根据权利要求1～5任一项所述的系统，其特征在于，所述计算模块包括并行的多个计算节点；

每一所述计算节点，根据预设的任务分配信息从所述结构化数据中提取相应的结构化数据块，并用于利用智能优化算法对提取的结构化数据块进行优化处理。

9.根据权利要求8所述的系统，其特征在于，所述计算模块还包括：

任务调度单元，用于根据各个计算节点的忙闲状态动态调度每一计算节点的任务。