[发明专利]数据处理方法、装置、电子设备和存储介质在审
申请号: | 202010605409.1 | 申请日: | 2020-06-29 |
公开(公告)号: | CN113312231A | 公开(公告)日: | 2021-08-27 |
发明(设计)人: | 王煜骢;酆晓杰 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F16/17;G06F16/182;G06F16/23;G06F9/445;G06F9/50 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 钱秀茹 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 存储 介质 | ||
1.一种数据处理方法,所述方法包括:
依据日志处理信息和流控策略,监控日志处理状态,所述日志处理信息包括已确认的日志信息和已处理的日志信息;
若所述日志处理状态为第一状态,则输出控流信息,以控制日志的接收数量;
对待处理的日志进行处理。
2.根据权利要求1所述的方法,所述已处理的日志信息包括已应用的日志信息;所述依据日志处理信息和流控策略,监控日志处理状态,包括:
基于所述已确认的日志信息和所述已应用的日志信息,确定待应用的日志的第一数量;
在所述第一数量达到第一阈值的情况下,确定所述日志处理状态为第一状态。
3.根据权利要求2所述的方法,所述已处理的日志信息包括已存储的日志信息;所述依据日志处理信息和流控策略,监控日志处理状态,包括:
基于所述已存储的日志信息和所述已确认的日志信息,确定待确认的日志的第二数量;
在所述第二数量达到第二阈值的情况下,确定所述日志处理状态为第一状态。
4.根据权利要求1所述的方法,所述对待处理的日志进行处理,包括以下至少一种步骤:
执行已确认的日志对应的处理;
从缓存队列中获取接收的日志,对接收的日志进行存储。
5.根据权利要求1所述的方法,还包括:
在接收到预设数量的日志存储完毕的指示的情况下,确认日志复制完成,发送成功消息。
6.根据权利要求1所述的方法,还包括:
若所述日志处理状态为第二状态,则接收多条日志,并对接收的多条日志进行处理。
7.根据权利要求6所述的方法,所述对接收的多条日志进行处理,包括以下至少一种步骤:
将接收的多条日志进行存储;
将接收的多条日志批量同步给至少一个从设备。
8.根据权利要求7所述的方法,所述将接收的多条日志批量同步给至少一个从设备,包括:
提供从设备对应的日志同步标识;
依据所述日志同步标识获取多条日志,将所述多条日志同步给对应的从设备;
更新所述从设备的日志同步标识。
9.根据权利要求8所述的方法,还包括:
在接收到失败消息的情况下,调整对应从设备的同步标识。
10.一种数据处理方法,应用于主设备,包括:
依据日志处理信息和流控策略,监控日志处理状态,所述日志处理信息包括已确认的日志信息和已处理的日志信息;
若所述日志处理状态为第一状态,则输出控流信息,以控制对客户端对应日志的接收数量;
对待处理的日志进行处理。
11.根据权利要求10所述的方法,所述已处理的日志信息包括已应用的日志信息;所述依据日志处理信息和流控策略,监控日志处理状态,包括:
基于所述已确认的日志信息和所述已应用的日志信息,确定待应用的日志的第一数量;
在所述第一数量达到第一阈值的情况下,确定所述日志处理状态为第一状态。
12.根据权利要求11所述的方法,所述已处理的日志信息包括已存储的日志信息;所述依据日志处理信息和流控策略,监控日志处理状态,包括:
基于所述已存储的日志信息和所述已确认的日志信息,确定待确认的日志的第二数量;
在所述第二数量达到第二阈值的情况下,确定所述日志处理状态为第一状态。
13.根据权利要求10所述的方法,还包括:
若所述日志处理状态为第二状态,则依据客户端确定多条日志,并对接收的多条日志进行处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010605409.1/1.html,转载请声明来源钻瓜专利网。