[发明专利]一种数据处理方法、装置、设备及计算机可读存储介质有效
申请号: | 202011055653.1 | 申请日: | 2020-09-30 |
公开(公告)号: | CN113297234B | 公开(公告)日: | 2023-03-14 |
发明(设计)人: | 钱龙 | 申请(专利权)人: | 阿里云计算有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/27 |
代理公司: | 北京开阳星知识产权代理有限公司 11710 | 代理人: | 张子青 |
地址: | 310024 浙江省杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种数据处理方法,所述方法包括:
主数据库从客户端接收数据处理请求;
所述主数据库执行所述数据处理请求,并将执行结果作为日志条目;
所述主数据库将所述日志条目存储到所述主数据库的第一数据块中;
所述主数据库根据多个从数据库中每个从数据库的第二数据块的地址信息,将所述日志条目同步到每个从数据库的第二数据块中;
所述主数据库根据多个从数据库中每个从数据库的第二数据块的地址信息,将所述日志条目同步到每个从数据库的第二数据块中之后,所述方法还包括:
所述主数据库向每个从数据库发送持久化指令,所述持久化指令用于对所述从数据库中的所述第二数据块进行持久化处理;
所述主数据库接收从数据库发送的响应信息,所述响应信息包括第三数据块的地址信息,所述第三数据块是所述从数据库中空着的数据块;
所述主数据库将所述从数据库发送的第三数据块的地址信息存储到所述从数据库对应的缓存中。
2.根据权利要求1所述的方法,所述主数据库将所述日志条目存储到所述主数据库的第一数据块中,包括:
所述主数据库从所述主数据库的多个数据块中确定所述第一数据块;
所述主数据库将所述日志条目存储到所述第一数据块中。
3.根据权利要求2所述的方法,所述主数据库将所述日志条目存储到所述第一数据块中之后,所述方法还包括:
所述主数据库将所述第一数据块和所述主数据库中已经存储有其他日志条目的数据块构成链表。
4.根据权利要求1所述的方法,主数据库从客户端接收数据处理请求之前,所述方法还包括:
所述主数据库将本地的数据区划分为多个数据块,所述从数据库用于将所述从数据库的数据区划分为多个数据块;
所述主数据库接收每个从数据库的多个数据块的地址信息;
所述主数据库将每个从数据库的多个数据块的地址信息存储在缓存中。
5.根据权利要求4所述的方法,所述主数据库接收每个从数据库的多个数据块的地址信息,包括:所述主数据库和所述多个从数据库建立远程直接数据存取rdma连接;
所述主数据库接收每个从数据库分别通过rdma发送指令发送的所述从数据库的多个数据块的地址信息。
6.根据权利要求4所述的方法,所述主数据库将每个从数据库的多个数据块的地址信息存储在缓存中,包括:
所述主数据库将同一个从数据库的多个数据块的地址信息存储到同一个缓存中。
7.根据权利要求4所述的方法,所述主数据库将每个从数据库的多个数据块的地址信息存储在缓存中,包括:
所述主数据库将同一个从数据库中大小相同的多个数据块的地址信息存储到同一个缓存中。
8.根据权利要求4-7任一项所述的方法,所述缓存为循环缓冲区;
所述循环缓冲区包括多个子区域,每个子区域用于存储从数据库的一个数据块的地址信息;
所述循环缓冲区的头指针指向所述多个子区域中的第一个子区域;
所述循环缓冲区的尾指针指向所述多个子区域中的最后一个子区域。
9.根据权利要求8所述的方法,所述主数据库根据多个从数据库中每个从数据库的第二数据块的地址信息,将所述日志条目同步到每个从数据库的第二数据块中,包括:
所述主数据库分别从每个从数据库的多个数据块中确定一个第二数据块,所述第二数据块的大小与所述第一数据块的大小相匹配;
所述主数据库根据每个从数据库对应的第二数据块的地址信息,将所述日志条目同步到每个从数据库的第二数据块中。
10.根据权利要求9所述的方法,所述主数据库分别从每个从数据库的多个数据块中确定一个第二数据块,包括:
所述主数据库根据所述第一数据块的大小,确定每个从数据库对应的循环缓冲区;
所述主数据库根据每个从数据库对应的循环缓冲区的头指针,确定每个从数据库的第二数据块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司,未经阿里云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011055653.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:网版的校准方法及装置、计算设备
- 下一篇:数据获取方法及装置