[发明专利]数据处理方法、装置、设备、系统及介质

说明书

本发明提供一种数据处理方法、装置、设备、系统及介质，涉及大数据领域。在该方法中，服务器中存储着多个下游数据源上报的历史数据，在接收到系统客户端发送的待处理任务之后，根据待处理任务和历史数据，获取出与待处理任务中处理主题，业务类型以及客户维度匹配的数据内容。然后对数据内容中的至少一个维度进行统计，得到至少一个质量指标；其中，每个质量指标用于指示预设时间段内一个维度的数据的变化情况。再向系统客户端返回至少一个质量指标。针对不同任务，进行不同主题，业务类型以及客户维度进行相关指标的汇总处理，提高对数据的利用效率。

技术领域

本发明涉及大数据领域，尤其涉及一种数据处理方法、装置、设备、系统及介质。

背景技术

随着计算机以及互联网技术的发展，银行等金融领域中应用计算机技术的场景也越来越多，在目前银行的客户数据系统中，需要对各个业务线和各个分行的数据进行收集存储。

现有技术中，各个业务线或者分行等通过客户在办理业务时登记的信息收集客户数据，然后再通过与用于进行数据管理的服务器之间的接口将收集到的客户数据进行上报，服务器会收集到的数据进行汇总和存储，并根据后台需要对数据进行展示。

综上所述，由于客户信息采集的来源不同，导致数据质量差异很大，客户数据会有各种各样的问题，例如九要素不全、要素不准、同证件号码客户疑似、同四要素客户疑似等。现有技术中只能对相关数据进行汇总展示，不能对数据中存在的问题进行针对性的处理，导致对数据的利用效率较低。

发明内容

本发明实施例提供一种数据处理方法、装置、设备、系统及介质，用于解决现有技术中只能对相关数据进行汇总展示，不能对数据中存在的问题进行针对性的处理，导致对数据的利用效率较低的问题。

第一方面，本发明实施例提供一种数据处理方法，应用于服务器，所述方法包括：

接收系统客户端发送的待处理任务，所述待处理任务中包括处理主题，业务类型以及客户维度；

根据所述待处理任务和本地存储的历史数据，获取与所述处理主题，所述业务类型以及所述客户维度匹配的数据内容；

对所述数据内容中的至少一个维度进行统计，得到至少一个质量指标；其中，每个质量指标用于指示预设时间段内一个维度的数据的变化情况；

向所述系统客户端返回所述至少一个质量指标。

在一种具体实施方式中，所述方法还包括：

根据预设的问题数据筛选条件，对所述历史数据进行分析处理，获取出每个下游数据源对应的问题数据；

根据每个下游数据源对应的问题数据，向每个下游数据源发送问题数据管控指令，所述问题数据管控指令中包括所述下游数据源对应的问题数据；

其中，所述问题数据筛选条件包括以下条件中的至少一个：

数据的九要素完整；

数据的九要素中存在不准确；

数据中存在相同要素的客户其他信息不一致；

数据中存在相同四要素的客户其他信息不一致。

在一种具体实施方式中，所述方法还包括：

接收至少一个下游数据源在每日的预设时刻上报的当日数据；

针对每个下游数据源，根据所述下游数据源上报的当日数据和所述历史数据，获取所述下游数据源的全量管控客户清单，所述全量管控客户清单中包括所述下游数据源管控的所有客户的数据。

在一种具体实施方式中，所述方法还包括：