[发明专利]结合RDBMS和Hadoop云存储的两级存储方法无效
申请号: | 201210041311.3 | 申请日: | 2012-02-23 |
公开(公告)号: | CN102646121A | 公开(公告)日: | 2012-08-22 |
发明(设计)人: | 徐正全;刘小俊;潘少明 | 申请(专利权)人: | 武汉大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 武汉科皓知识产权代理事务所(特殊普通合伙) 42222 | 代理人: | 薛玲 |
地址: | 430072 湖*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种结合RDBMS和Hadoop云存储的两级存储方法,其特征在于:前端采用RDBMS系统,后端采用Hadoop云端;前端收集结构化数据的小文件并存储在RDBMS系统的数据库中,当数据库的容量到达一定数量后,将数据库整体作为大文件并写入Hadoop云端存储,同时清空数据库,数据库继续接受新数据的写入。本发明利用轻量级的关系型数据库满足结构化数据的高效写入和大规模并发访问访问需求的同时,RDBMS还使海量小文件自动合并成大文件,避免了开发小文件合并工具的不便;利用Hadoop云存储实现海量大数据库文件的高效存储不仅避免了Hadoop本身的缺陷,而且可以充分利用云存储的优势实现高效存储、管理。只要数据满足结构化的要求就可以使用本发明技术方案高效存储,具有一定的普遍性。 | ||
搜索关键词: | 结合 rdbms hadoop 存储 两级 方法 | ||
【主权项】:
一种结合RDBMS和Hadoop云存储的两级存储方法,其特征在于:前端采用RDBMS系统,后端采用Hadoop云端;前端收集结构化数据的小文件并存储在RDBMS系统的数据库中,当数据库的容量到达一定数量后,将数据库文件整体作为大文件并写入Hadoop云端存储,同时清空数据库,数据库继续接受新数据的写入。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉大学,未经武汉大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201210041311.3/,转载请声明来源钻瓜专利网。