[发明专利]一种基于开源技术的数据库高可用实现方法

摘要

一种基于开源技术的数据库高可用实现方法，本发明使用关系型数据库——MySQL与非关系型数据库——Redis结合的方式，将传统数据放入MySQL中，将一部分使用频繁或者I/O量比较大的数据放入非关系型数据库Redis中，并定期将Redis内的数据转存到MySQL内。本发明的有益效果是，实现的技术均为开源技术；（2）、使用此方法实现的数据库性能强于非开源、非免费的数据库；（3）、使用该方法实现的数据库能长时间支持大数据的读写操作，数据实时性高；（4）、该方法实现的数据库规模可弹性控制，并且具有一定的容灾能力。

主权项

一种基于开源技术的数据库高可用实现方法，其特征在于，使用关系型数据库——MySQL与非关系型数据库——Redis结合的方式，将传统数据放入MySQL中，将一部分使用频繁或者I/O量比较大的数据放入非关系型数据库Redis中，并定期将Redis内的数据转存到MySQL内，使得数据能保持完整性；本方法分为三个部分：MySQL数据库、Redis数据库以及控制器部分，每个部分实现功能如下：MySQL数据库：用于存放写入量少、修改操作较少的数据，并将存放Redis数据库内定期迁移的数据和历史记录；提供给持久化数据给应用访问；Redis数据库：存放I/O比较集中、I/O量比较大、数据频繁变动的数据；提供一段时间内的数据给应用访问；控制器：监控MySQL与Redis每个节点的运行情况，当节点出故障时使用相应的措施使整个数据库可以被持续使用；提供一个单一的MySQL或Redis接口供外部应用访问；执行调度功能，定期迁移Redis数据到MySQL数据库内；数据节点负载均衡功能，分发请求，平衡每个数据库节点压力；本方法实现方式为：1).搭建MySQL数据库：使用集群化部署方案，集群内每两个MySQL作为一组，每组采用主从部署方式部署，其中一个MySQL只用于响应写入和修改操作，另外一个MySQL只用于读取操作，两个数据库之前的数据同步由主从方式自动完成,使用amoeba作为控制器，对外提供单个访问地址；2).搭建Redis数据库：使用集群化部署方案，集群内每两个Redis为一组，每组采用主从化部署方式，其中一个Redis用于响应写入操作，另外一个Redis用于响应查询操作；两个Redis之间使用Redis自带同步机制同步数据，使用自主研发的Redis作为控制器，对外提供单个访问地址；3).编写控制器：本发明使用java作为开发语言，实现实时监控MySQL和Redis的每个节点情况，并执行从Redis转存数据到MySQL的操作；具体行为过程为：每隔一段时间给MySQL和Redis的每个节点发送心跳包，当发现其中的主节点断线时，自动将与上述主节点在同一组的从节点转换为主节点继续工作，当原主节点恢复后，将原主节点转为从节点工作，当从节点掉线时，将读取操作也分配到主节点上，当从节点恢复后将读取的操作还原回原来的从节点上；在控制器内设定定时器，定时执行操作将数据从Redis内转移到MySQL数据库内；提供Redis和MySQL的对外接口；编写负载均衡机制，实现分配任务均衡数据库节点压力；4).将搭建好的MySQL访问地址、Redis访问地址、控制器的对外访问接口提供给应用来访问数据；本方法的操作步骤为：1)、启动数据库实例与数据库管理软件,启动数据库负载均衡、读写分离控制器；2)、启动作为大容量、高速的缓存,启动缓存负载均衡、读写分离控制器；3)、启动数据库控制器；4)、启动应用实例；5)、当有大量数据操作时，根据数据变动类型将读写量大或变动频繁的数据先写入缓存写入部分，读写相对少并且变动不频繁的数据写入数据库写入部分；6)、应用实例或其他功能读取数据时直接读取缓存读取部分、数据库读取部分；7)、当规模比较小时：如果缓存写入部分出现故障，控制器自动将读取部分转换为写入、读取部分，不影响应用正常使用；当数据库读、写部分出现故障时，控制器自动切换功能，不影响应用使用；当规模相对较大时，部分节点故障并不影响应用的使用。