[发明专利]解决分布式数据库全局广播的方法在审
申请号: | 202010744740.1 | 申请日: | 2020-07-29 |
公开(公告)号: | CN112084267A | 公开(公告)日: | 2020-12-15 |
发明(设计)人: | 牛晓峰 | 申请(专利权)人: | 北京思特奇信息技术股份有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/27;G06F16/245 |
代理公司: | 北京汇信合知识产权代理有限公司 11335 | 代理人: | 林聪源 |
地址: | 100086 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 解决 分布式 数据库 全局 广播 方法 | ||
本发明公开了一种解决分布式数据库全局广播的方法,包括:利用binlog2sql解析MySQL的binlog;将解析binlog得到的主键和需要解决广播的字段进行拼接,生成对应的关键字值;将关键字值写入分布式缓存中;在执行查询sql语句时,判断是否存在相关字段的广播设置,若不存在,则直接执行查询,若存在,则由分布式缓存中获取关键字值,判断对应字段数据对应的分片,并直接将sql语句发送至分片的数据节点中。通过本发明的技术方案,大大提高了MySQL的执行效率,解决了sql全局广播的问题,有效提升了分布式数据库的性能。
技术领域
本发明涉及分布式数据库技术领域,尤其涉及一种解决分布式数据库全局广播的方法。
背景技术
随着电信运营商去0的不断深入,核心crm等系统使用分布式数据库。
在使用分布式数据库的情况下,某些场景下MySQL存在非分片键与分片键不一致的情况,导致sql进行全局广播,在所有后端节点上执行,分布式数据库的压力较大,执行效率较低,分布式数据库的性能无法有效提升。
发明内容
针对上述问题,本发明提供了一种解决分布式数据库全局广播的方法,利用分布式缓存作为中间存储,提供非分片键与分片键的对应关系,在执行sql语句过程中通过分布式缓存中存储的key value,直接将sql语句发送至对应分片的数据节点,大大提高执行效率,解决sql全局广播的问题,有效提升分布式数据库的性能。
为实现上述目的,本发明提供了一种解决分布式数据库全局广播的方法,包括:利用binlog2sql解析MySQL的binlog;将解析binlog得到的主键和需要解决广播的字段进行拼接,生成对应的关键字值;将所述关键字值写入分布式缓存中;在执行查询sql语句时,判断是否存在相关字段的广播设置,若不存在,则直接执行查询,若存在,则由所述分布式缓存中获取所述关键字值,判断对应字段数据对应的分片,并直接将所述sql语句发送至所述分片的数据节点中。
在上述技术方案中,优选地,所述binlog为row模式下记录的binlog。
在上述技术方案中,优选地,所述binlog2sql对所述binlog进行反解析,得到binlog中的delete操作和update操作信息。
与现有技术相比,本发明的有益效果为:利用分布式缓存作为中间存储,提供非分片键与分片键的对应关系,在执行sql语句过程中通过分布式缓存中存储的key value,直接将sql语句发送至对应分片的数据节点,大大提高了执行效率,解决了sql全局广播的问题,有效提升了分布式数据库的性能。
附图说明
图1为本发明一种实施例公开的解决分布式数据库全局广播的方法的流程示意图;
图2为本发明一种实施例公开的解决分布式数据库全局广播的方法的逻辑示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面结合附图对本发明做进一步的详细描述:
如图1和图2所示,根据本发明提供的一种解决分布式数据库全局广播的方法,包括:利用binlog2sql解析MySQL的binlog;将解析binlog得到的主键和需要解决广播的字段进行拼接,生成对应的关键字值;将关键字值写入分布式缓存中;在执行查询sql语句时,判断是否存在相关字段的广播设置,若不存在,则直接执行查询,若存在,则由分布式缓存中获取关键字值,判断对应字段数据对应的分片,并直接将sql语句发送至分片的数据节点中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京思特奇信息技术股份有限公司,未经北京思特奇信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010744740.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于单壳体燃料舱的总组支撑方法
- 下一篇:一种塔架升降平台的插销装置