[发明专利]一种图数据库统计点边数的方法、系统、设备和存储介质有效
申请号: | 202110422515.0 | 申请日: | 2021-04-20 |
公开(公告)号: | CN112988827B | 公开(公告)日: | 2021-08-17 |
发明(设计)人: | 岳通;叶小萌;王玉珏;刘昱 | 申请(专利权)人: | 杭州欧若数网科技有限公司 |
主分类号: | G06F16/2457 | 分类号: | G06F16/2457;G06F16/2458;G06F16/901 |
代理公司: | 杭州创智卓英知识产权代理事务所(普通合伙) 33324 | 代理人: | 张超 |
地址: | 311100 浙江省杭州市余杭区仓前街道欧美金*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据库 统计 点边数 方法 系统 设备 存储 介质 | ||
本申请涉及一种图数据库统计点边数的方法、系统、设备和存储介质,其中,该方法包括:获取图空间中统计点边数量的任务请求,根据任务请求检查预备队列中的预设预备任务,返回预设预备任务的ID,根据预设预备任务的ID在预设预备任务的系统表写入预设预备任务的信息记录,根据图空间的ID在统计信息的系统表中写入图空间的信息记录,根据图分区所属的Leader节点将预设预备任务进行分组,得到若干预设执行任务,通过存储节点运行预设执行任务。解决了如何减少计算资源的浪费和提高实时统计数据的效率的问题,实现了基于Nebula Graph中job机制和task机制的点边统计任务的高效并行策略。
技术领域
本申请涉及图数据库领域,特别是涉及一种图数据库统计点边数的方法、系统、设备和存储介质。
背景技术
随着大数据和人工智能的迅猛发展,超大规模关系网络逐步在社交推荐、风控、物联网、区块链、安防等领域被广泛使用,分布式图数据库需要处理的数据量成几何状增长。在海量关系数据中实时高效的统计数据量是每个图数据库必须要面对的问题,即如何在数据量大的情况下,如何减少计算资源的浪费和提高实时统计数据的效率成为当下亟需解决的问题。
目前针对相关技术中如何减少计算资源的浪费和提高实时统计数据的效率的问题,尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种图数据库统计点边数的方法、系统、设备和存储介质,以至少解决相关技术中如何减少计算资源的浪费和提高实时统计数据的效率的问题。
第一方面,本申请实施例提供了一种图数据库统计点边数的方法,所述方法包括:
获取图空间中统计点边数量的任务请求,根据所述任务请求通过元数据管理节点检查预备队列中的预设预备任务,返回所述预设预备任务的ID;
根据所述预设预备任务的ID,通过所述元数据管理节点在所述预设预备任务的系统表写入所述预设预备任务的信息记录,根据所述图空间的ID,通过所述元数据管理节点在统计信息的系统表中写入所述图空间的信息记录;
所述图空间包括若干图分区,根据所述图分区所属的Leader节点将所述预设预备任务进行分组,得到若干预设执行任务;
通过所述元数据管理节点将所述预设执行任务发送到存储节点,通过所述存储节点将所述预设执行任务提交到执行队列,通过所述存储节点运行所述预设执行任务。
在其中一些实施例中,根据所述任务请求通过元数据管理节点检查预备队列中的预设预备任务,返回所述预设预备任务的ID包括:
根据所述任务请求通过元数据管理节点检查预备队列中的预设预备任务是否存在;
若存在,则返回所述预设预备任务的ID;
若不存在,则生成预设预备任务,将所述预设预备任务提交到所述预备队列,返回所述预设预备任务的ID。
在其中一些实施例中,通过所述存储节点将所述预设执行任务提交到执行队列,通过所述存储节点运行所述预设执行任务包括:
根据所述预设预备任务的ID和所述预设执行任务的ID,通过所述元数据管理节点在所述预设执行任务的系统表写入所述预设执行任务的信息记录,通过所述存储节点运行所述预设执行任务。
在其中一些实施例中,通过所述存储节点将所述预设执行任务提交到执行队列,通过所述存储节点运行所述预设执行任务包括:
通过所述存储节点将所述预设执行任务提交到执行队列,根据所述图分区生成预设执行子任务,通过所述存储节点运行所述预设执行子任务;
若预设执行任务中的全部预设执行子任务运行成功,则对应的预设执行任务运行成功;
若预设执行任务中的某个预设执行子任务运行失败,则对应的预设执行任务运行失败。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州欧若数网科技有限公司,未经杭州欧若数网科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110422515.0/2.html,转载请声明来源钻瓜专利网。