[发明专利]一种基于Mysql分库分表的实时采集方法在审
申请号: | 202110370305.1 | 申请日: | 2021-04-07 |
公开(公告)号: | CN112765184A | 公开(公告)日: | 2021-05-07 |
发明(设计)人: | 田浩兵;张奎;谭巍 | 申请(专利权)人: | 四川新网银行股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/25;G06F16/28 |
代理公司: | 成都智言知识产权代理有限公司 51282 | 代理人: | 濮云杉 |
地址: | 610094 四川省成都市成都*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 mysql 分库分表 实时 采集 方法 | ||
1.一种基于Mysql分库分表的实施采集方法,其特征在于:包括以下步骤:
步骤1:建立配置信息,填写需要采集的数据库IP地址,端口和数据库名,表名;
步骤2:配置表支持分IP,分端口,分库,分表采集;采集程序对与每一个实例通过连接池的方式建立连接;
步骤3:通过监听数据的Binlog日志,实时解析Binlog日志;获取数据库中建表语句的Schema信息,每个字段的数据类型信息存储起来,不同数据类型进入到不同的解析方法类;最后对于同一张表的分库分表,采集后进行汇总输出,同时通过在采集时根据Binlog日志的时间戳,保证数据的严格有序性;
步骤4:在服务器上通过Shell脚本,启动程序;打印配置表中配置的表信息,对分库分表配置信息;通过Shell脚本遍历出来,和程序输出日志中成功采集的表信息进行对比,打印出未成功采集的表名和采集异常的表名。
2.根据权利要求1所述的一种基于Mysql分库分表的实施采集方法,其特征在于:所述步骤1中提到的建立配置信息,其所述配置信息以中括号扩出多IP,多库,多端口,多表展示。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川新网银行股份有限公司,未经四川新网银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110370305.1/1.html,转载请声明来源钻瓜专利网。