[发明专利]基于zookeeper的日志处理方法、装置、计算机设备和存储介质

权利要求书

1.一种基于zookeeper的日志处理方法，其特征在于，所述方法包括：

zookeeper主节点监听失败任务列表从节点，当捕捉到所述失败任务列表从节点接收到服务器列表从节点中的注册服务器提交的失败日志时，查询所述服务器列表从节点中当前负载最低的注册服务器；所述失败日志在所述注册服务器的阻塞队列中写满失败日志，或，超过预设时间阈值时被提交；

所述zookeeper主节点从任务状态列表节点中获取当前负载最低的注册服务器的运行逻辑信号，通过所述运行逻辑信号确定当前负载最低的注册服务器是否处于宕机状态，若当前负载最低的注册服务器处于所述宕机状态，则从剩余的各注册服务器中选择负载最低的注册服务器更新为当前负载最低的注册服务器；

将所述失败日志分配至任务实施列表从节点中与当前负载最低的注册服务器对应的任务子节点中，使得当前负载最低的注册服务器确定所述失败日志属于本地任务时，处理所述失败日志；

所述zookeeper主节点监听任务状态列表从节点，通过监听获取所述任务状态列表从节点接收的处理信息；所述处理信息由所述服务器列表从节点中注册服务器根据处理所述失败日志的处理结果生成和发送；

当所述zookeeper主节点确定所述处理信息为处理失败信息时，返回查询所述服务器列表从节点中当前负载最低的注册服务器的步骤。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

当所述zookeeper主节点确定所述处理信息为处理成功信息时，将所述任务实施列表从节点中的所述失败日志标记为已处理，并从所述失败任务列表从节点中将所述失败日志删除。

3.根据权利要求1所述的方法，其特征在于，所述查询所述服务器列表从节点中当前负载最低的注册服务器，包括：

从所述任务实施列表从节点中的各所述任务子节点中查询所述服务器列表从节点中各所述注册服务器当前的任务量；

将所述任务量最少的所述任务子节点对应的注册服务器作为所述服务器列表从节点当前负载最低的注册服务器。

4.根据权利要求1所述的方法，其特征在于，所述将所述失败日志分配至任务实施列表从节点中与当前负载最低的注册服务器对应的任务子节点中，包括：

根据当前负载最低的注册服务器的名称和/或IP地址生成任务标识，将所述任务标识与所述失败日志关联后分配至任务实施列表从节点与当前负载最低的注册服务器对应的任务子节点中。

5.一种基于zookeeper的日志处理装置，其特征在于，所述装置包括：

服务器列表从节点，用于管理注册服务器；

失败任务列表从节点，用于接收所述服务器列表从节点中的所述注册服务器提交的失败日志；

zookeeper主节点，用于监听所述失败任务列表从节点，当捕捉到所述失败任务列表从节点接收到所述失败日志时，查询所述服务器列表从节点中当前负载最低的注册服务器；所述失败日志在所述注册服务器的阻塞队列中写满失败日志，或，超过预设时间阈值时被提交；以及，从任务状态列表节点中获取当前负载最低的注册服务器的运行逻辑信号，通过所述运行逻辑信号确定当前负载最低的注册服务器是否处于宕机状态，若当前负载最低的注册服务器处于所述宕机状态，则从剩余的各注册服务器中选择负载最低的注册服务器更新为当前负载最低的注册服务器；将所述失败日志分配至任务实施列表从节点中与当前负载最低的注册服务器对应的任务子节点中，使得当前负载最低的注册服务器确定所述失败日志属于本地任务时，处理所述失败日志；监听任务状态列表从节点，通过监听获取所述任务状态列表从节点接收的处理信息；所述处理信息由所述服务器列表从节点中注册服务器根据处理所述失败日志的处理结果生成和发送；当所述zookeeper主节点确定所述处理信息为处理失败信息时，返回查询所述服务器列表从节点中当前负载最低的注册服务器的步骤；

所述任务状态列表从节点，用于接收所述服务器列表从节点中注册服务器根据处理所述失败日志的处理结果生成和发送的处理信息；

所述任务实施列表从节点，用于接收zookeeper主节点分配的失败日志。