[发明专利]一种数据分析方法及系统

权利要求书

1.一种数据分析方法，其特征在于，所述方法包括：

同时调用数据接收线程以及用于进行数据分析的至少一个计算线程，所述至少一个计算线程中每个计算线程下挂不同的分析规则；

通过所述数据接收线程接收数据；

在通过所述数据接收线程接收到数据后，获取所接收到的数据的属性信息，并根据所述属性信息和预设索引字段构建内存聚簇索引，以使计算线程同时获取所述内存聚簇索引对应的关联数据集中的所有数据，具有同一内存聚簇索引的多条数据在内存空间上聚集在一起形成关联数据集；

通过每个计算线程根据所述内存聚簇索引，获取所接收到的数据的关联数据集，并通过每个计算线程下挂的分析规则对所述关联数据集中的所有数据进行分析，得到分析结果。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：将所接收到的数据存储至内存的数据队列中；

在每个计算线程完成对所述关联数据集的数据分析后，记录本次数据分析的最后一条数据在所述数据队列中的位置。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：在所述关联数据集通过每个计算线程进行第一次数据分析时，将每个计算线程得到的分析结果存储至内存中；

在所述关联数据集通过每个计算线程进行第i次数据分析时，从所述内存中获取所述关联数据集在第i-1次数据分析时得到的分析结果，将所述第i-1次数据分析时得到的分析结果和第i次数据分析时得到的分析结果进行合并，并将合并后的分析结果存储至内存中，其中i为大于1的整数。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：在内存中每存储一条分析结果，将所述分析结果的状态标识为待存储状态；

判断所述内存的待存储队列中是否包括所述分析结果，如果不包括，则将所述分析结果存储至所述内存的待存储队列中；

在调用数据接收线程以及用于进行数据分析的至少一个计算线程的同时，调用存储线程；

通过所述存储线程将所述待存储队列中的分析结果存储至永久存储设备中，并将所述分析结果的状态标识为已存储状态。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：通过预先配置的查询接口接收查询请求；

从所述内存中查找与所述查询请求对应的分析结果，并输出所对应的分析结果；

和/或者

所述方法还包括：通过预先配置的查询接口接收查询请求；

通过数据库驱动程序访问所述永久存储设备，从所述永久存储设备中获取所述查询请求对应的分析结果，并输出所对应的分析结果。

6.一种数据分析系统，其特征在于，所述系统包括：

调用模块，用于同时调用数据接收线程以及用于进行数据分析的至少一个计算线程，所述至少一个计算线程中每个计算线程下挂不同的分析规则；

接收模块，用于通过所述数据接收线程接收数据；

第一获取模块，用于在通过所述数据接收线程接收到数据后，获取所接收到的数据的属性信息；

构建模块，用于根据所述属性信息和预设索引字段构建内存聚簇索引，以使计算线程同时获取所述内存聚簇索引对应的关联数据集中的所有数据，具有同一内存聚簇索引的多条数据在内存空间上聚集在一起形成关联数据集；

第二获取模块，用于通过每个计算线程根据所述内存聚簇索引，获取所接收到的数据的关联数据集；

分析模块，用于通过每个计算线程下挂的分析规则对所述关联数据集中的所有数据进行分析，得到分析结果。

7.根据权利要求6所述的系统，其特征在于，所述系统还包括：第一存储模块，用于将所接收到的数据存储至内存的数据队列中；

记录模块，用于在每个计算线程完成对所述关联数据集的数据分析后，记录本次数据分析的最后一条数据在所述数据队列中的位置。