[发明专利]多源数据整合方法、系统、存储介质和电子装置

说明书

本发明实施例提供了一种多源数据整合方法、系统、存储介质和电子装置，该方法包括：数据整合层接收数据准备层发送的多源原始数据；该数据整合层对该多源原始数据进行数据整合，得到整合后的多源数据；该数据整合层将该整合后的多源数据发送至数据应用层。通过本发明，由于数据整合层接收由数据准备层整理的多个源系统中的原始数据并对经过整理的该原始数据进行数据整合，解决了相关技术中多个业务系统相互隔离，业务系统之间无法有效进行数据整合的问题，进而达到了有效整合多个业务系统的业务数据，从而为之后的数据应用提供有力支持的效果。

技术领域

本发明实施例涉及数据业务技术领域，具体而言，涉及一种多源数据整合方法、系统、存储介质和电子装置。

背景技术

信托公司普惠金融业务进入了快速发展期，伴随着业务的发展，在B2B2C商业模式下积累了来自于不同合作机构的丰富的消费信贷数据，包含客户信息数据、贷款合同数据、还款表现数据，而在大数据、人工智能发展、数据驱动业务的大背景下，信贷数据、决策数据是普惠金融风险控制的过程中进行数据分析、数据挖掘很重要的一部分资产，数据的一致性、完整性决定了普惠金融是否能够在确保业务量增长的同时降低业务坏账率、控制逾期风险，以及普惠金融业务拓展的宽度与广度，从而实现公司盈利。

当前信托普惠金融数据面临如下两方面的问题：第一，信托公司业务支撑系统较多，单一的系统虽然能完成特定的业务，但是多系统的应用使得数据的存储结构存在巨大差异，多个业务系统相互隔离，数据无法共享整合，数据质量良莠不齐，缺乏统一的数据标准及业务视图，无法高效的分析利用数据资产发挥数据业务价值，满足风控数据分析的要求。第二，传统的联机处理业务无法实现准确、实时的分析风控决策数据以及信贷表现的能力，信托风控决策数据的实时分析，以及决策数据与信贷还款表现数据的联动分析，在风控审批策略上线后，对最终逾期率的影响难以评估，使得优化贷前、贷中、贷后风控策略的过程存在一定的困难。

针对相关技术中多个业务系统相互隔离，业务系统之间无法有效进行数据整合的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种多源数据整合方法、系统、存储介质和电子装置，以至少解决相关技术中多个业务系统相互隔离，业务系统之间无法有效进行数据整合的问题。

根据本发明的一个实施例，提供了一种多源数据整合方法，包括：数据整合层接收数据准备层发送的多源原始数据；所述数据整合层对所述多源原始数据进行数据整合，得到整合后的多源数据；所述数据整合层将所述整合后的多源数据发送至数据应用层。

在一个示例性实施例中，在所述数据整合层接收数据准备层发送的多源原始数据之前，还可以包括：所述数据准备层接收多个源系统发送的原始数据，并将所述原始数据发送至数据明细层；所述数据明细层接收所述原始数据，并将所述原始数据整理为所述多源原始数据；所述数据明细层将所述多源原始数据发送至所述数据整合层。

在一个示例性实施例中，所述数据明细层接收所述原始数据，并对所述原始数据至少可以进行以下之一处理，以将所述原始数据整理为所述多源原始数据：将所述原始数据中的空字段转化为同一格式的非空字段；将所述原始数据中除日期字段外其余字段的字段值与在先数据集的字段值相同的数据集删除；将所述原始数据中的全量数据通过与在先数据相减转化为增量数据；将所述原始数据中来自于多个源系统的至少以下种类之一的代码转化为标准代码：学历代码、居住状况、工作所属行业、婚姻状况、贷款种类、贷款状态。

在一个示例性实施例中，所述数据整合层至少可以根据以下编码规则之一形成标识所述原系统的主关键字，对所述多源原始数据进行数据整合：将源系统标识和源系统主键进行整合形成标识所述原系统的主关键字；将源系统标识、对象种类代码和源系统主键进行整合形成标识所述原系统的主关键字，其中，所述对象种类代码为同一对象在不同源系统中的区分代码，所述原系统主键为在所述原系统中预设的主关键字。