[发明专利]一种跨集群高可用的实现方法、装置、系统及设备

说明书

本发明公开了一种跨集群高可用的实现方法、装置、系统及设备，属于大数据技术领域。所述方法包括：监控通过数据同步配置的至少两个数据服务集群的集群信息，所述集群信息至少包括集群状态信息和集群地址信息；通过分布式协调服务实时获取所述集群信息；根据所述集群信息进行相应数据服务集群的请求访问。本发明通过对数据同步的至少两个数据服务集群的集群信息进行监控，然后通过分布式协调服务实时获取集群信息，然后根据实时获取的集群信息进行相应数据服务集群的请求访问，解决了现有技术中跨集群方面存在的诸多弊端。

技术领域

本发明涉及大数据技术领域，特别涉及一种跨集群高可用的实现方法、装置、系统及设备。

背景技术

高可用集群，英文原文为High Availability Cluster，简称HA Cluster，简单的说，集群(cluster)就是一组计算机，它们作为一个整体向用户提供一组网络资源。这些单个的计算机系统就是集群的节点(node)。高可用性集群(HA cluster)是指如单系统一样地运行并支持(计算机)持续正常运行的一个主机群。高可用集群是指以减少服务中断时间为目的的服务器集群技术，它通过保护用户的业务程序对外不间断提供的服务，把因软件/硬件/人为造成的故障对业务的影响降低到最小程度。

因此，目前在大数据领域，提供数据实时读写能力的组件，比如HBase和ES等服务，集群内各角色均为高可用设计，多集群之间采用数据同步技术。然而行业内搭建多集群，主要用于读写分离和数据备份使用，但并不具备在多个集群之间自动切换访问和并发访问的能力，具体体现在如下方面：1、切换集群，需要更改客户端配置后重启；2、无法在服务端控制客户端切换集群；3、当客户端请求等待时间过长时，无法同时请求其他集群。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种跨集群高可用的实现方法、装置、系统及设备，解决了现有技术中跨集群方面存在的诸多弊端。所述技术方案如下：

第一方面，提供了一种跨集群高可用的实现方法，所述方法包括：

监控通过数据同步配置的至少两个数据服务集群的集群信息，所述集群信息至少包括集群状态信息和集群地址信息；通过分布式协调服务实时获取所述集群信息；根据所述集群信息进行相应数据服务集群的请求访问。

结合第一方面，在第一种可能的实现方式中，所述监控通过数据同步配置的至少两个数据服务集群的集群信息，包括：定时监控至少两个数据服务集群的集群状态信息；将集群状态发生变更的集群状态信息通知至所述分布式协调服务。

结合第一方面的第一种可能实现方式，在第二种可能实现方式中，所述数据同步配置包括：配置所述至少两个数据服务集群之间的相互复制关系，并将带有源集群ID信息的数据服务请求在所述至少两个数据服务集群之间进行同步。

结合第一方面，在第三种可能实现方式中，所述通过分布式协调服务实时获取所述集群信息，包括：实时监听所述集群信息，并实时对集群状态发生变更的集群状态信息进行相应通知。

结合第一方面及第一方面的第一至三种可能实现方式的任一种，在第四至七种可能实现方式中，所述根据所述集群信息进行相应数据服务集群的请求访问，包括：根据所述集群信息，优先访问集群状态为可用的顺序靠前的集群。

结合第一方面的第四至七种可能实现方式，在第八至十一种可能实现方式中，所述根据所述集群信息，优先访问集群状态为可用的顺序靠前的集群，包括：根据所述集群信息，获取第一个集群地址，判断当前集群状态是否可用，当判断结果为不可用，获取下一个集群地址，跳转至判断当前集群状态是否可用的步骤；当判断结果为可用，请求访问当前集群，进一步判断当前集群处理时间是否超过预设阈值，若未超过，获取集群反馈结果；若超过，并发请求访问下一个可用集群，获取优先返回的集群反馈结果。