[发明专利]分布式文件系统的版本间映射有效
申请号: | 201580028177.5 | 申请日: | 2015-01-05 |
公开(公告)号: | CN106796500B | 公开(公告)日: | 2020-12-25 |
发明(设计)人: | 托马斯·A·费伦;古纳西兰·拉克希米纳拉亚南;迈克尔·莫雷蒂;乔尔·巴克斯特;拉克什曼·希纳科特拉 | 申请(专利权)人: | 慧与发展有限责任合伙企业 |
主分类号: | G06F9/06 | 分类号: | G06F9/06 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 王茂华 |
地址: | 美国德*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 文件系统 版本 映射 | ||
本文描述了一种向大规模处理框架(LSPF)集群中的LSPF节点提供数据的系统、方法及软件。在一个示例中,一种用于提供数据的方法包括:从LSPF节点接收根据分布式文件系统的版本访问数据的访问请求。该方法还包括:响应于该访问请求,根据该分布式文件系统的不同版本访问针对LSPF节点的数据;以及根据由LSPF节点使用的分布式文件系统的版本将数据呈送给该LSPF节点。
技术领域
本公开内容的诸方面涉及计算硬件和软件技术,尤其涉及分布式文件系统的版本间映射。
背景技术
越来越多的数据密集型分布式应用正在被开发以服务诸如处理通常不能由单个计算机处理的非常大的数据集的各种需要。相反,计算机集群被用于分配诸如组织和访问数据以及执行关于数据的相关操作的各种任务或作业。已经开发了包括Hive、HBase、Hadoop、Amazon S3和CloudStore等的各种应用和框架来与这样的大数据集交互。这些应用和框架通常采用允许更快地访问在集群内启动的计算机的各种分布式文件系统。然而,随着对文件系统和框架的创新,不同版本的框架可能不能访问不同版本的文件系统。
除了分布式应用和框架的进步之外,虚拟化技术已经变得普及并且在数据中心和其他环境中是常见的,其中,在前述数据中心和其他环境中提高使用计算资源的效率是有用的。在虚拟化环境中,一个或更多个虚拟机在底层计算机(或另一虚拟机)上实例化并共享底层计算机的资源。因此,不是使每个计算设备具有单个处理节点,而是集群可以采用每个计算设备多个虚拟机以更有效地分配工作负荷。
发明内容
本文提供了一种向大规模处理框架(LSPF)集群中的LSPF节点提供数据的系统、方法及软件。在一个示例中,一种提供数据的方法包括:从LSPF节点接收根据分布式文件系统的版本访问数据的访问请求。该方法还包括:响应于访问请求,根据分布式文件系统的不同版本访问针对LSPF节点的数据;以及根据由LSPF节点使用的分布式文件系统的版本将数据呈送给LSPF节点。
在另一实例中,一种向LSPF集群中的LSPF节点提供数据的计算机装置包括处理指令,处理指令当由数据服务计算系统执行时指示数据服务计算系统从LSPF节点接收用于根据分布式文件系统的版本访问数据的访问请求。处理指令还指示数据服务计算系统:响应于访问请求,根据分布式文件系统的不同版本访问针对LSPF节点的数据;以及根据由LSPF节点使用的分布式文件系统的版本将数据呈送给LSPF节点。计算机装置还包括一个或更多个非暂态计算机可读介质,一个或更多个非暂态计算机可读介质存储处理指令。
在另一示例中,一种向LSPF集群中的LSPF节点提供数据的系统包括LSPF节点,该LSPF节点被配置成发起用于根据分布式文件系统的版本访问数据的访问请求。该系统还包括数据服务,该数据服务被配置成:识别访问请求;以及响应于访问请求,根据分布式文件系统的不同版本访问针对LSPF节点的数据。数据服务还被配置成根据由LSPF节点使用的分布式文件系统的版本将数据呈送给LSPF节点。
附图说明
参照下面的附图可以更好地理解本公开内容的多个方面。虽然结合附图描述了若干实现方式,但是本公开内容不限于本文所公开的实现方式。相反,意在涵盖所有替代、修改和等同方式。
图1图示出了向大规模处理框架集群中的大规模处理框架节点提供数据的计算环境。
图2图示出了向大规模处理框架集群中的大规模处理框架节点提供数据的方法。
图3图示出了虚拟大规模处理框架集群。
图4图示出了用于向大规模处理框架集群中的大规模处理框架节点提供数据的概况。
图5图示出了用于向虚拟大规模处理框架集群中的大规模处理框架节点提供数据的概况。
图6图示出了用于向大规模处理框架集群中的大规模处理框架节点提供数据的计算系统。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于慧与发展有限责任合伙企业,未经慧与发展有限责任合伙企业许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201580028177.5/2.html,转载请声明来源钻瓜专利网。