[发明专利]关系发现的分布式计算方法和系统、计算机可读存储介质在审
申请号: | 201910038592.9 | 申请日: | 2019-01-16 |
公开(公告)号: | CN109857557A | 公开(公告)日: | 2019-06-07 |
发明(设计)人: | 梁秀钦 | 申请(专利权)人: | 北京明略软件系统有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F16/22;G06F16/27;G06Q50/00 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 王康;栗若木 |
地址: | 102218 北京市昌平区东小*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式主机 发现 计算机可读存储介质 分布式计算 任务分配 任务类型 事件发生 事件类型 事件数据 预设 计算效率 隐性关系 申请 | ||
1.一种关系发现的分布式计算方法,其特征在于,包括:
将事件数据分别同步至多台分布式主机;
按照预设的任务分配方式,在所述分布式主机上分别执行一个或多个关系发现的任务,以发现所述事件数据中的隐性关系,所述预设的任务分配方式包括以下至少之一:任务类型、事件类型、事件发生的时间。
2.根据权利要求1所述的方法,其特征在于,所述将事件数据分别同步至多台分布式主机,包括:
将所述事件数据整体分别同步至多台所述分布式主机;或者,
按照以下至少之一:所述事件类型、所述事件发生的时间,选择所述事件数据并将选择的事件数据同步至多台所述分布式主机。
3.根据权利要求1所述的方法,其特征在于,所述任务类型包括以下至少之一:数据编码、构建索引、第一数据同步、关系计算、第二数据同步、关系计算结果查询,其中,所述数据编码是指提取所述事件数据中关系计算所必需的字段并对其进行编码;所述构建索引是指对所述编码后的数据进行分组,同组数据添加相同索引值;所述第一数据同步是指将编码后的事件数据和/或构建索引后的事件数据同步至所述分布式主机;所述第二数据同步是指将所述分布式主机得到的关系计算结果同步至用于提供结果查询的结果主机。
4.根据权利要求1所述的方法,其特征在于,所述方法之前还包括:对所述事件数据进行数据编码和构建索引,其中,所述数据编码是指提取所述事件数据中关系计算所必需的字段并对其进行编码;所述构建索引是指对所述编码后的数据进行分组,同组数据添加相同索引值;
所述任务类型包括以下至少之一:关系计算、第二数据同步、关系计算结果查询,所述第二数据同步是指将所述分布式主机得到的关系计算结果同步至用于提供结果查询的结果主机。
5.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现如权利要求1至4中任一项所述的关系发现的分布式计算方法的步骤。
6.一种关系发现的分布式计算系统,其特征在于,包括处理器及存储器,其中:所述处理器用于执行存储器中存储的程序,以实现如权利要求1至4中任一项所述的关系发现的分布式计算方法的步骤。
7.一种关系发现的分布式计算系统,包括多台分布式主机,其特征在于,还包括数据分发模块和任务执行模块,其中:
数据分发模块,用于将事件数据分别同步至多台分布式主机;
任务执行模块,用于按照预设的任务分配方式,在所述分布式主机上分别执行一个或多个关系发现的任务,以发现所述事件数据中的隐性关系,所述预设的任务分配方式包括以下至少之一:任务类型、事件类型、事件发生的时间。
8.根据权利要求7所述的系统,其特征在于,所述数据分发模块具体用于:
将所述事件数据整体分别同步至多台所述分布式主机;或者,
按照以下至少之一:所述事件类型、所述事件发生的时间,选择所述事件数据并将选择的事件数据同步至多台所述分布式主机。
9.根据权利要求7所述的系统,其特征在于,所述任务类型包括以下至少之一:数据编码、构建索引、第一数据同步、关系计算、第二数据同步、关系计算结果查询,其中,所述数据编码是指提取所述事件数据中关系计算所必需的字段并对其进行编码;所述构建索引是指对所述编码后的数据进行分组,同组数据添加相同索引值;所述第一数据同步是指将编码后的事件数据和/或构建索引后的事件数据同步至所述分布式主机;所述第二数据同步是指将所述分布式主机得到的关系计算结果同步至用于提供结果查询的结果主机。
10.根据权利要求7所述的系统,其特征在于,在将事件数据分别同步至多台分布式主机之前,所述数据分发模块还用于:对所述事件数据进行数据编码和构建索引,其中,所述数据编码是指提取所述事件数据中关系计算所必需的字段并对其进行编码;所述构建索引是指对所述编码后的数据进行分组,同组数据添加相同索引值;
所述任务类型包括以下至少之一:关系计算、第二数据同步、关系计算结果查询,所述第二数据同步是指将所述分布式主机得到的关系计算结果同步至用于提供结果查询的结果主机。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京明略软件系统有限公司,未经北京明略软件系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910038592.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:内存回收方法及装置、存储介质和电子设备
- 下一篇:一种数据流处理方法及系统