[发明专利]一种数据库的远程数据服务系统及任务调度方法有效
申请号: | 201210322629.9 | 申请日: | 2012-09-03 |
公开(公告)号: | CN103677967B | 公开(公告)日: | 2017-03-01 |
发明(设计)人: | 何云飞;阮若夷;钟云;胡旭亮;周光辉 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F9/46 | 分类号: | G06F9/46;G06F17/30 |
代理公司: | 北京润泽恒知识产权代理有限公司11319 | 代理人: | 苏培华 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据库 远程 数据 服务 系统 任务 调度 方法 | ||
技术领域
本申请涉及数据技术,特别是涉及一种数据库的远程数据服务系统,一种远程数据服务系统中的任务调度方法。
背景技术
随着互联网的发展,互联网打破了地域的分割,形成了一个统一的大市场。现有技术中企业发展互联网业务需要有自己的服务器和数据库,但不是所有的企业都能够实现,并且服务器和数据库的维护成本比较高。
若用户自建数据库,特别是对那些非计算机技术相关的企业而言,需要聘请专业人员,了解企业需求的数据库的性能和压力状况,然后购买并搭建硬件系统,并且需要自己编写在该硬件中运行的数据库脚本等,用户自行建立服务器和数据库的周期是非常长的,期间可能面临各种技术问题要解决,建立的方法非常繁琐,并且效率也较低。
同时,自建的服务器和数据库还需要面临后期的维护问题,特别是当企业的业务量逐渐加大后,数据库的压力会随之增加。数据库达到饱和状态,即数据库已优化到极点,无法支持庞大的业务量时,需要升级硬件来解决这个问题。而硬件升级中采购周期,再加上数据迁移的周期通常要耗费时间比较长,这段时间无法确保数据库是否能够支撑业务的执行。并且,升级中要保证业务的执行和数据迁移的稳定等各种技术问题,也是非常繁琐的,同时需要浪费比较多的时间。
因此本领域技术人员迫切解决的一个技术问题是,提出一种数据库的远程数据服务系统及任务调度方法,使得用户可以使用远程数据库,而避免自建数据库造成时间的浪费,且数据稳定性得不到保证的问题。
发明内容
本领域技术人员迫切解决的一个技术问题是,提出一种数据库的远程数据服务系统及任务调度方法,使得用户可以使用远程数据库,而避免自建数据库造成时间的浪费,且数据稳定性得不到保证的问题。
为了解决上述问题,本申请公开了一种数据库的远程数据服务系统,包括:任务调度模块、高可用控制模块、备份模块和在线迁移模块,其中,
所述任务调度模块包括:
接收子模块,用于接收用户通过网络或API接口发送的任务;
互斥检查子模块,用于针对接收的任务,通过检测所述任务针对实例所拥有的互斥锁,确定所述任务是否与当前运行的任务无冲突;
调度子模块,用于针对与当前运行的任务无冲突的任务,调度所述任务到相应的模块进行处理;
所述高可用控制模块包括:
切换子模块,用于接收到任务调度模块调度的执行切换的任务后,发送将IP端口在主存储节点和备存储节点之间进行切换的命令;
所述备份模块包括:
存储子模块,用于接收到任务调度模块调度的执行备份的任务后,根据配置将对应的实例数据分片存储到至少一个存储节点上;
所述在线迁移模块包括:
获取子模块,用于接收到任务调度模块调度的执行迁移的任务后,从备份模块中获取原始存储节点的备份实例数据;
同步子模块,用于目标存储节点上的备份完成后,将原始存储节点和目标存储节点的实例数据进行同步;
通知子模块,用于通知备份模块在目标存储节点上执行对应的备份操作,并发出将IP端口从原始存储节点切换到目标存储节点上的通知。
优选的,所述高可用控制模块,还包括:
轮循子模块,用于间隔一定时间并发轮循各个存储节点上的所有实例;
故障检测子模块,用于轮循中检测存储节点是否存在故障;
所述切换子模块,还用于针对故障的存储节点,采用无故障的存储节点接管故障存储节点的任务。
优选的,所述任务调度模块、高可用控制模块、备份模块和线迁移模块,都是由若干个处理节点构成的集群,所述的每个模块还包括:
节点检测子模块,通过处理节点之间的心跳通信,检测各个处理节点是否正常运行;
节点切换子模块,针对非正常运行的处理节点,切换至正常运行的处理节点,并接管对应所述非正常运行的处理节点的任务。
优选的,所述的系统还包括监控模块,其中,所述监控模块包括:
一致性检测子模块,用于在系统运行过程中检测并清理存储节点和对应模块中不一致的数据;
状态及性能监控子模块,用于收集并监控所有存储节点和实例的状态数据和性能数据;
空间检查子模块,用于当检测到用户的使用空间超出预设范围后,将用户权限修改为只读;
流量统计子模块,用于统计每个存储节点上各个实例的网络流量数据;
故障报警子模块,用于当检测到异常情况时,执行故障报警操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210322629.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种分布式多任务调度管理系统
- 下一篇:一种虚拟机控制系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置