[发明专利]一种基于Spark和Ignite的分布式实时图构建和查询的方法及系统

权利要求书

1.一种基于Spark和Ignite的分布式实时图构建和查询的方法，其特征在于，包括：

启动Spark实时图构建和图查询任务，从数据库加载待查询图的点和边的字段到Ignite的数据集中，对所述字段进行缓存，并为所述字段创建索引；

将前端发起的请求中的请求参数使用加密算法生成对应的请求参数主题，并监听所述请求参数主题；

将所述请求参数主题放入所述请求参数，发送给请求主题，并监听所述请求主题；

获取数据进行计算，将计算结果发送给所述请求参数主题；

将获取到的结果数据返回给前端。

2.根据权利要求1所述的一种基于Spark和Ignite的分布式实时图构建和查询的方法，其特征在于，所述从数据库加载待查询图的点和边的字段到Ignite的数据集中，具体包括：

从数据库加载待查询图的点和边的字段到IgniteRDD和/或IgniteDataframe。

3.根据权利要求1所述的一种基于Spark和Ignite的分布式实时图构建和查询的方法，其特征在于，所述将前端发起的请求中的请求参数使用加密算法生成对应的请求参数主题，并监听所述请求参数主题，具体包括：

将前端发起的请求中的请求参数使用MD5生成一个请求参数主题，并监听所述请求参数主题。

4.根据权利要求1所述的一种基于Spark和Ignite的分布式实时图构建和查询的方法，其特征在于，所述将所述请求参数主题放入所述请求参数，发送给请求主题，并监听所述请求主题，具体包括：

将所述请求参数主题放入所述请求参数，发送给分布式消息队列中的请求主题，并监听所述请求主题。

5.根据权利要求1-4任一项所述的一种基于Spark和Ignite的分布式实时图构建和查询的方法，其特征在于，所述获取数据进行计算，将计算结果发送给所述请求参数主题，具体包括：

从数据库获取数据进行计算或者使用缓存数据进行计算，将计算结果发送给所述请求参数主题。

6.一种基于Spark和Ignite的分布式实时图构建和查询的系统，其特征在于，包括：

加载模块，用于启动Spark实时图构建和图查询任务，从数据库加载待查询图的点和边的字段到Ignite的数据集中，对所述字段进行缓存，并为所述字段创建索引；

生成模块，用于将前端发起的请求中的请求参数使用加密算法生成对应的请求参数主题，并监听所述请求参数主题；

发送模块，用于将所述请求参数主题放入所述请求参数，发送给请求主题，并监听所述请求主题；

计算模块，用于获取数据进行计算，将计算结果发送给所述请求参数主题；

返回模块，用于将获取到的结果数据返回给前端。

7.根据权利要求6所述的一种基于Spark和Ignite的分布式实时图构建和查询的系统，其特征在于，所述加载模块，具体用于：

从数据库加载待查询图的点和边的字段到IgniteRDD和/或IgniteDataframe。

8.根据权利要求6所述的一种基于Spark和Ignite的分布式实时图构建和查询的系统，其特征在于，所述生成模块，具体用于：

将前端发起的请求中的请求参数使用MD5生成一个请求参数主题，并监听所述请求参数主题。

9.根据权利要求6所述的一种基于Spark和Ignite的分布式实时图构建和查询的系统，其特征在于，所述发送模块，具体用于：

将所述请求参数主题放入所述请求参数，发送给分布式消息队列中的请求主题，并监听所述请求主题。

10.根据权利要求6-9任一项所述的一种基于Spark和Ignite的分布式实时图构建和查询的系统，其特征在于，所述计算模块，具体用于：

从数据库获取数据进行计算或者使用缓存数据进行计算，将计算结果发送给所述请求参数主题。