[发明专利]一种分布式数据库的并发导出数据的方法及系统在审
申请号: | 202210117264.X | 申请日: | 2022-02-08 |
公开(公告)号: | CN114490879A | 公开(公告)日: | 2022-05-13 |
发明(设计)人: | 田祥雨 | 申请(专利权)人: | 山东浪潮科学研究院有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/242;G06F16/21;G06F16/16 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 郗艳荣 |
地址: | 250100 山东省济*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 数据库 并发 导出 数据 方法 系统 | ||
1.一种分布式数据库的并发导出数据的方法,其特征在于:分布式集群中的各个节点同时执行数据库的数据导出任务,每个节点导出各自节点的数据,且分布式集群中的每个节点在执行数据导出任务时将导出数据存储为csv文件,同时各节点并发执行写csv文件操作。
2.根据权利要求1所述的分布式数据库的并发导出数据的方法,其特征在于:所述分布式集群中的各个节点导出的csv文件自动生成文件名,文件名格式为节点号.编号.文件类型,节点号从1开始计数,编号从0开始计数。
3.根据权利要求1所述的分布式数据库的并发导出数据的方法,其特征在于:所述分布式集群中的各个节点导出的每个csv文件保存不超过10万条数据,当导出的表或者query查询数据超过10万条时,自动分割为多个csv文件存储。
4.根据权利要求1所述的分布式数据库的并发导出数据的方法,其特征在于:当所述分布式集群中的节点导出多个csv文件时,各个节点分别同时并发执行写csv文件操作。
5.一种分布式数据库的并发导出数据的系统,其特征在于:包括集群导出任务管理模块,节点导出任务管理模块和导出文件命名模块;
所述集群导出任务管理模块负责管理分布式集群中的各个节点同时执行数据库的数据导出任务;
所述节点导出任务管理模块负责管理各个节点导出各自节点的数据,并发执行写csv文件操作,将导出数据存储为csv文件;
所述导出文件命名模块负责管理csv文件的文件名,实现对导出数据的有效管理。
6.根据权利要求5所述的分布式数据库的并发导出数据的系统,其特征在于:所述导出文件命名模块为csv文件自动生成文件名,文件名格式为节点号.编号.文件类型,节点号从1开始计数,编号从0开始计数。
7.根据权利要求5所述的分布式数据库的并发导出数据的系统,其特征在于:所述节点导出任务管理模块设定各个节点导出的每个csv文件保存不超过10万条数据,当导出的表或者query查询数据超过10万条时,自动分割为多个csv文件存储。
8.根据权利要求5所述的分布式数据库的并发导出数据的系统,其特征在于:当所述分布式集群中的节点导出多个csv文件时,所述集群导出任务管理模块管理各个节点分别同时并发执行写csv文件操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东浪潮科学研究院有限公司,未经山东浪潮科学研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210117264.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:偶联设备及生成偶联物的方法
- 下一篇:一种补锂隔膜、制备方法及锂离子电池