[发明专利]任务处理方法、装置、计算机设备和存储介质

说明书

本申请涉及人工智能技术领域，提供一种任务处理方法、装置、计算机设备和存储介质，方法包括：对服务器集群中包含的所有服务器进行异常分析以确定出异常服务器，并将除异常服务器外的服务器标记为正常服务器；从所有正常服务器中确定出目标服务器；通过目标服务器从数据源获取待处理任务；基于缓存工具对所有待处理任务进行去重处理，得到处理后的目标任务；将目标任务存放至预设的消息队列内，通过消息中间件将消息队列内的所有目标任务分配给服务器集群中的各正常服务器。本申请能够保障任务的正常处理，提高任务的处理效率，以及提高任务处理的智能性与准确性。本申请还可以应用于区块链领域，上述目标任务等数据可以存储于区块链上。

技术领域

本申请涉及人工智能技术领域，具体涉及一种任务处理方法、装置、计算机设备和存储介质。

背景技术

现有技术中，在涉及大批量任务处理时，主要是采用单机部署处理的方式。随着业务的发展以及数据规模的不断扩大，单机部署的任务跑批方案存在以下问题：大批量任务执行时采用单台服务器执行，导致任务执行速度较慢，任务执行时间较长、效率低；并且，如果该服务器发生故障，则会影响该服务器下所有任务的执行，且该服务器上所执行的任务也会全部失败，造成了系统资源的浪费，使得任务的正常处理无法得到保障。

发明内容

本申请的主要目的为提供一种任务处理方法、装置、计算机设备和存储介质，旨在解决现有的大批量任务处理方式存在任务执行速度较慢，任务执行时间较长、效率低，并且任务的正常处理无法得到保障的技术问题。

本申请提出一种任务处理方法，所述方法包括步骤：

对预设的服务器集群中包含的所有服务器进行异常分析以确定出所述服务器集群中的异常服务器，并将所述服务器集群中除所述异常服务器外的服务器标记为正常服务器；其中，所述服务器的数量包括多个；

从所有所述正常服务器中确定出一台目标服务器；

通过所述目标服务器从预设的数据源中获取待处理任务；其中，所述待处理任务的数量包括多个；

基于预设的缓存工具对所有所述待处理任务进行去重处理，得到处理后的目标任务；

将所述目标任务存放至预设的消息队列内，通过消息中间件将所述消息队列内的所有所述目标任务分配给所述服务器集群中的各所述正常服务器，以通过各所述正常服务器对接收到的目标任务进行处理。

可选地，所述对预设的服务器集群中包含的所有服务器进行异常分析以确定出所述服务器集群中的异常服务器的步骤，包括：

获取各所述服务器的运行参数，以及获取预设参数阈值；其中，所述预设参数阈值为对应所有所述服务器的一个综合阈值；将每一个所述服务器的运行参数分别与所述预设参数阈值进行数值比较处理，从所有所述服务器中筛选出运行参数满足所述预设参数阈值的第一服务器，并将所有所述服务器中除所述第一服务器外的服务器标记为第二服务器；

获取各所述第二服务器的运行参数，基于各所述第二服务器的运行参数与预设的异常识别模型生成各所述第二服务器的运行异常概率值；

获取预设概率阈值；其中，所述预设概率阈值为对应所有所述服务器的一个综合阈值；

将每一个所述第二服务器的运行异常概率值分别与所述预设概率阈值进行数值比较处理，从所有所述第二服务器中筛选出运行异常概率值小于所述预设概率阈值的第三服务器；

将所述第一服务器与所述第三服务器作为所述异常服务器。

可选地，所述获取各所述第二服务器的运行参数，基于各所述第二服务器的运行参数与预设的异常识别模型生成各所述第二服务器的运行异常概率值的步骤，包括：

计算所有所述第二服务器的运行参数的平均值；以及，

计算所有所述第二服务器的运行参数的方差；