[发明专利]一种源分布式数据库捕获数据的系统及方法有效
申请号: | 201410488046.2 | 申请日: | 2014-09-22 |
公开(公告)号: | CN104239542B | 公开(公告)日: | 2017-11-17 |
发明(设计)人: | 孙志云;郭美思;吴楠 | 申请(专利权)人: | 浪潮(北京)电子信息产业有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京安信方达知识产权代理有限公司11262 | 代理人: | 王丹,李丹 |
地址: | 100085 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 数据库 捕获 数据 系统 方法 | ||
1.一种源分布式数据库捕获数据的方法,包括:
当区域服务器开始保存记录时,将内存缓存中的数据刷新到分布式文件系统的文件里,然后针对所有要保存记录的分布式文件系统的文件创建相应链接的引用文件,并将引用文件存储到标记为本服务器的文件集合中;
所述源分布式数据库是HBase,则各区域服务器执行保存记录的工作流程具体包括:
创建标记本区域服务器的文件夹,所述文件夹即所述文件集合;
判断本区域服务器是否满足保存记录的条件,即查看所有的内存缓存中是否有数据,是则将所述内存缓存中的数据刷新到内存文件中,然后将内存文件的数据存储到所述分布式文件系统的文件中;
针对所有要保存记录的所述分布式文件系统的文件在创建的所述文件夹里建立能链接所述分布式文件系统的文件相应的引用文件;
向主服务模块返回携带存有引用文件的文件夹的成功操作通知。
2.按照权利要求1所述的方法,其特征在于,还包括:
所述区域服务器在收到所述保存记录的请求后通知主服务模块;
主服务模块根据该请求将需要保存记录的信息记录名称通知到相应的区域服务器,并针对相应的区域服务器创建相应的文件集合;
所述区域服务器在成功完成所述保存记录的操作时,将存有所述引用文件的文件集合返回给主服务模块;
主服务模块在收到所述区域服务器返回的文件集合后,将其存储到相应的区域服务器的文件集合中。
3.按照权利要求2所述的方法,其特征在于,
所述区域服务器收到的所述保存记录的请求,是由用户发出的请求,或是由源分布式数据库系统定期自动发出的请求。
4.一种源分布式数据库捕获数据的系统,包括多个区域服务器,其中:
区域服务器,用于在开始保存记录时,将内存缓存中的数据刷新到分布式文件系统的文件里,然后针对所有要保存记录的分布式文件系统的文件创建相应链接的引用文件,并将引用文件存储到标记为本服务器的文件集合中;
所述源分布式数据库是HBase;
所述区域服务器,具体用于创建标记本区域服务器的文件夹,所述文件夹即所述文件集合;判断本区域服务器是否满足保存记录的条件,即查看所有的内存缓存中是否有数据,是则将所述内存缓存中的数据刷新到内存文件中,然后将内存文件的数据存储到所述分布式文件系统的文件中;针对所有要保存记录的所述分布式文件系统的文件在创建的所述文件夹里建立能链接所述分布式文件系统的文件相应的引用文件;向主服务模块返回携带存有引用文件的文件夹的成功操作通知。
5.按照权利要求4所述的系统,其特征在于,还包括通过分布式可靠协调组件与所述多个区域服务器连接的主服务模块,其中:
所述区域服务器在收到保存记录的请求后通知主服务模块;在成功完成保存记录的操作时,将存有所述引用文件的文件集合返回给主服务模块;
主服务模块,用于根据所述请求将需要保存记录的信息记录名称通知到相应的区域服务器,并针对相应的区域服务器创建相应的保存记录的文件集合;在收到所述区域服务器返回的文件集合后,将其中的引用文件存储到相应的区域服务器的文件集合中。
6.按照权利要求5所述的系统,其特征在于,所述区域服务器收到的所述保存记录的请求,是由用户发出的请求,或是由所述源分布式数据库系统定期自动发出的请求。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮(北京)电子信息产业有限公司,未经浪潮(北京)电子信息产业有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410488046.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置