[发明专利]一种银行数据湖数据处理方法、装置、系统和介质

说明书

本申请提供了一种银行数据湖数据处理方法、装置、系统和介质，可应用于大数据领域或金融领域。该方法包括：获取银行数据湖待入湖数据，根据银行数据湖待入湖数据的数据标签，判断银行数据湖待入湖数据的类型；当银行数据湖待入湖数据的类型包括交易类数据时，根据银行当前实时交易查找对应的银行数据湖待入湖数据，得到银行数据湖待入湖数据中的实时银行数据湖待入湖交易数据；根据银行当前实时交易对实时银行数据湖待入湖交易数据进行修改，并存储入银行数据湖内。从而可以对待入湖数据进行自动处理，根据数据类型的不同进行科学规划，提高了银行数据湖的数据质量和可用性。

技术领域

本申请涉及计算机技术领域，特别涉及一种银行数据湖数据处理方法、装置、系统和介质。

背景技术

数据湖(Data Lake)是一个以原始格式存储数据的存储库或系统，它按原样存储数据，而无需事先对数据进行结构化处理。与传统的数据架构要求整合、面向主题、固定分层等特点不同，数据湖为银行全员独立参与数据运营和应用创新提供了极大的灵活性。

传统的数据湖由于事先没有科学规划，导致数据质量和可用性越来越差，因此，如何提高数据湖数据的质量，是本领域需要解决的技术问题。

发明内容

有鉴于此，提供该发明内容部分以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。

本申请的目的在于提供一种银行数据湖数据处理方法、装置、系统和介质，可以提高数据湖数据的质量。

为实现上述目的，本申请有如下技术方案：

第一方面，本申请实施例提供了一种银行数据湖数据处理方法，包括：

获取银行数据湖待入湖数据；

根据所述银行数据湖待入湖数据的数据标签，判断所述银行数据湖待入湖数据的类型；

当所述银行数据湖待入湖数据的类型包括交易类数据时，根据银行当前实时交易查找对应的所述银行数据湖待入湖数据，得到所述银行数据湖待入湖数据中的实时银行数据湖待入湖交易数据；

根据所述银行当前实时交易对所述实时银行数据湖待入湖交易数据进行修改，并存储入所述银行数据湖内。

在一种可能的实现方式中，还包括：

当所述银行数据湖待入湖数据的类型包括监控类数据时，根据银行当前实时监控查找对应的所述银行数据湖待入湖数据，得到所述银行数据湖待入湖数据中的实时银行数据湖待入湖监控数据；

将所述实时银行数据湖待入湖监控数据分发给银行监控类应用调用。

在一种可能的实现方式中，还包括：

当所述银行数据湖待入湖数据的类型包括分析类数据时，根据银行分析类应用的启动信号，加载所述银行数据湖待入湖数据中的与所述银行分析类应用对应的银行数据湖待入湖分析数据；

将所述银行数据湖待入湖分析数据发送至所述银行分析类应用调用，并返回所述银行分析类应用调用的结果。

在一种可能的实现方式中，所述根据所述银行数据湖待入湖数据的数据标签，判断所述银行数据湖待入湖数据的类型，包括：

将所述银行数据湖待入湖数据的数据标签与预设标签类型逐一比对，根据比对结果得到所述银行数据湖待入湖数据的类型。

第二方面，本申请实施例提供了一种银行数据湖数据处理装置，包括：

获取单元，用于获取银行数据湖待入湖数据；

判断单元，用于根据所述银行数据湖待入湖数据的数据标签，判断所述银行数据湖待入湖数据的类型；