[发明专利]数据的批量处理方法、装置、设备及计算机存储介质

说明书

本发明涉及金融科技(Fintech)技术领域，公开了一种数据的批量处理方法、装置、设备和计算机存储介质，该方法包括：获取大数据平台中不同类型的资源数据对应的批量，确定各批量是否处于就绪状态；若在各所述批量中存在处于就绪状态的就绪批量，且所述就绪批量存在多个，则获取各所述就绪批量的案件数量和获取催收系统的系统资源，并根据各就绪批量的案件数量和催收系统的系统资源确定最优批量；获取催收系统中的可用令牌，基于可用令牌对最优批量进行执行处理，在最优批量处理完成后，继续执行获取大数据平台中不同类型的资源数据对应的批量的步骤，直至各批量处理完成。本发明提高了系统中资源数据批量执行处理的处理效率。

技术领域

本发明涉及金融科技(Fintech)技术领域，尤其涉及数据的批量处理方法、装置、设备及计算机存储介质。

背景技术

随着计算机技术的发展，越来越多的技术应用在金融领域，传统金融业正在逐步向金融科技(Fintech)转变，大数据中的数据处理技术也不例外，但由于金融行业的安全性、实时性要求，也对技术提出的更高的要求。例如目前传统的数据的处理技术是按照固定的未到期提醒规则、逾期处理的准入规则，加工与数据相关的客户名单以及相关的目标数据，系统基于目标数据，并调用策略引擎，由策略引擎根据案件的风险程度，实现分案管理。并且目前系统是以资源数据级进行目标数据处理的，当多个资源数据同时在一个系统处理时，大多是串行处理，无法充分利用系统资源，不能方便高效的控制各资源数据批量执行的顺序、并发。因此，如何提高系统中资源数据批量执行处理的处理效率成为了目前亟待解决的技术问题。

发明内容

本发明的主要目的在于提出一种数据的批量处理方法、装置、设备及计算机存储介质，旨在提高系统中资源数据批量执行处理的处理效率。

为实现上述目的，本发明提供一种数据的批量处理方法，所述数据的批量处理方法包括如下步骤：

获取大数据平台中不同类型的资源数据对应的批量，并确定各所述批量是否处于就绪状态；

若在各所述批量中存在处于就绪状态的就绪批量，且所述就绪批量存在多个，则获取各所述就绪批量的案件数量和获取催收系统的系统资源，并根据所述系统资源和各所述就绪批量的案件数量确定最优批量；

获取所述催收系统中的可用令牌，基于所述可用令牌对所述最优批量进行执行处理，并在所述最优批量处理完成后，继续执行获取大数据中的多个资源数据的批量的步骤，直至各所述批量处理完成。

可选地，获取催收系统的系统资源的步骤包括：

基于各所述批量获取最先完成就绪状态的首位批量，并对所述首位批量进行执行处理，基于所述首位批量的执行处理结果确定所述催收系统的系统资源。

可选地，所述根据所述系统资源和各所述就绪批量的案件数量确定最优批量的步骤，包括：

计算所述系统资源的使用增长率，并确定所述使用增长率是否小于预设的告警阈值，

若小于，则基于各所述就绪批量的案件数量确定最优批量。

可选地，所述计算所述系统资源的使用增长率的步骤，包括：

基于所述首位批量的执行处理结果计算所述系统资源的使用增长量与所述首位批量的案件量增加的正向关系，并根据所述正向关系计算所述系统资源的使用增长率。

可选地，所述基于各所述就绪批量的案件数量确定最优批量的步骤，包括：

根据所述告警阈值计算所述系统资源的可用资源值，并根据所述可用资源值计算所述系统资源的最大可准入的目标案件量；

根据各所述就绪批量的案件数量确定各所述就绪批量对应的案件量级，并基于所述目标案件量在各所述案件量级中确定目标量级；