[发明专利]异构对象存储集群访问方法、装置、设备及存储介质

说明书

本发明涉及大数据领域，公开了一种异构对象存储集群访问方法、装置、设备及存储介质，该方法包括：接收业务系统发起的文件上传路由查询请求，确定与查询请求匹配的写路由策略；根据写路由策略，确定待上传文件对应的对象存储集群ID并返回至业务系统；接收业务系统基于对象存储集群ID发起的集群信息查询请求；根据对象存储集群ID，确定对应的集群信息并返回至业务系统，以供业务系统通过内置的通用对象存储二方库将文件上传到对应的对象存储集群；接收业务系统成功上传文件后上报的文件对应的路由信息、对象属性、自定义标签和访问记录并存入对应数据库中。本发明实现了异构对象存储集群的灵活访问，提高了异构对象存储集群的访问效率。

技术领域

本发明涉及大数据领域，尤其涉及一种异构对象存储集群访问方法、装置、设备及存储介质。

背景技术

随着互联网时代的到来，各行各业每时每刻都在产生各种数据，为了管理这些数据，一些大的互联网企业或者其他产生大量数据的公司都建立了公共的或者私有的数据中心，异构对象存储以其良好的横向扩展性和存取效率逐渐取代文件系统成为静态海量数据存储的主流。

当前几乎所有的异构对象存储集群软件厂商都对外提供了访问集群的接口，目前市面上主流的云厂商的对象存储服务和开源的对象存储系统仅支持在异构对象存储集群间单向同步对象数据的基本功能，为了更加高效的访问集群，因而不得不去基于这些接口进行二次开发去访问集群，这无形之中就提高了应用的门槛，而且实现过程繁琐不够简便。

发明内容

本发明的主要目的在于解决如何高效访问异构对象存储集群的技术问题。

本发明第一方面提供了一种异构对象存储集群访问方法，所述异构对象存储集群访问方法包括：

接收业务系统发起的对象路由查询请求；

若所述查询请求为文件上传路由查询，则根据所述查询请求携带的请求参数，确定与所述请求参数匹配的写路由策略；

根据所述写路由策略，确定待上传文件对应的对象存储集群ID并返回至所述业务系统；

接收所述业务系统基于所述对象存储集群ID发起的集群信息查询请求；

根据所述对象存储集群ID，确定对应的集群信息并返回至所述业务系统，以供所述业务系统通过内置的通用对象存储二方库将文件上传到对应的对象存储集群；

接收所述业务系统成功上传文件后上报的所述文件对应的路由信息、对象属性、自定义标签和访问记录并存入对应数据库中。

可选的，在本发明第一方面的第一种实现方式中，在所述接收业务系统发起的对象路由查询请求之后，还包括：

若所述查询请求为文件下载路由查询，则根据所述查询请求携带的请求参数，确定待下载文件对应的对象存储集群ID并返回至所述业务系统；

接收所述业务系统基于所述对象存储集群ID发起的集群信息查询请求；

根据所述对象存储集群ID，确定对应的集群信息并返回至所述业务系统，以供所述业务系统通过内置的通用对象存储二方库从对应的对象存储集群下载文件；

接收所述业务系统成功下载文件后上报的所述文件对应的对象属性、自定义标签和访问记录并存入对应数据库中。

可选的，在本发明第一方面的第二种实现方式中，在所述接收业务系统发起的对象路由查询请求之前，还包括：

创建租户的账户信息，并配置所述租户对应的策略数据，所述策略数据包括：写路由策略、数据标注策略及数据迁移策略中的一种或多种。