[发明专利]多源数据整合方法、系统、存储介质和电子装置有效
申请号: | 202011391624.2 | 申请日: | 2020-12-03 |
公开(公告)号: | CN112182091B | 公开(公告)日: | 2021-04-27 |
发明(设计)人: | 温小芳;毛小利;王鹏;田江;李清和;王玉晓;苏志斌;邓飞 | 申请(专利权)人: | 光大科技有限公司;光大兴陇信托有限责任公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06Q40/02 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 刘旺贵 |
地址: | 100040 北京市石景*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 整合 方法 系统 存储 介质 电子 装置 | ||
1.一种多源数据整合方法,其特征在于,包括:
数据整合层接收数据准备层发送的多源原始数据;
所述数据整合层对所述多源原始数据进行数据整合,得到整合后的多源数据;
所述数据整合层将所述整合后的多源数据发送至数据应用层;
其中,所述数据整合层根据以下编码规则形成标识源系统的主关键字,对所述多源原始数据进行数据整合:将源系统标识、对象种类代码和源系统主键进行整合形成标识所述源系统的主关键字,其中,所述对象种类代码为同一对象在不同源系统中的区分代码,所述源系统主键为在所述源系统中预设的主关键字;
其中,所述数据整合层根据所述多源原始数据中的以下主题域进行数据整合:当事人主题域,协议主题域,事件主题域,其中,所述数据整合层根据所述当事人主题域的以下信息对所述多源原始数据进行数据整合:合作机构信息,当事人信息,当事人画像;所述数据整合层根据所述协议主题域的以下信息对所述多源原始数据进行数据整合:决策信息,申请信息,贷款合同信息,贷款信息;所述数据整合层根据所述事件主题域的以下信息对所述多源原始数据进行数据整合:还款计划,入账流水表,代偿记录表;
其中,在所述数据整合层将所述整合后的多源数据发送至数据应用层之后,还包括:所述数据应用层根据所述整合后的多源数据中的贷款信息转化成合同信息,并依据所述合同信息编制应用层宽表以应用于信托风险控制,其中,所述合同信息至少包括以下之一信息:当前逾期天数、历史逾期天数、提前还款信息、逾期金额。
2.根据权利要求1所述的方法,其特征在于,在所述数据整合层接收数据准备层发送的多源原始数据之前,还包括:
所述数据准备层接收多个源系统发送的原始数据,并将所述原始数据发送至数据明细层;
所述数据明细层接收所述原始数据,并将所述原始数据整理为所述多源原始数据;
所述数据明细层将所述多源原始数据发送至所述数据整合层。
3.根据权利要求2所述的方法,其特征在于,所述数据明细层接收所述原始数据,并对所述原始数据至少进行以下之一处理,以将所述原始数据整理为所述多源原始数据:
将所述原始数据中的空字段转化为同一格式的非空字段;
将所述原始数据中除日期字段外其余字段的字段值与在先数据集的字段值相同的数据集删除;
将所述原始数据中的全量数据通过与在先数据相减转化为增量数据;
将所述原始数据中来自于多个源系统的至少以下种类之一的代码转化为标准代码:学历代码、居住状况、工作所属行业、婚姻状况、贷款种类、贷款状态。
4.根据权利要求1所述的方法,其特征在于,所述数据整合层根据所述当事人主题域对所述多源原始数据进行数据整合,至少包括以下之一:
通过所述当事人信息中的当事人姓名,证件类型,证件号生成客户统一ID;
将源系统标识、合作机构号和客户号进行整合形成当事人编号,其中,所述当事人编号为所述当事人信息中的主关键字。
5.根据权利要求4所述的方法,其特征在于,所述客户号为所述客户统一ID。
6.根据权利要求1所述的方法,其特征在于,所述数据整合层至少根据以下编码方式之一进行数据整合:
按照码值个数和源系统代码字段的长度,采用预定数位进行编码;
整合多个所述源系统的多套码值,并根据所述多套码值的码值层级进行编码;
根据两位系统编码和所述源系统的码值进行编码;
针对同一源系统,引用该源系统的码值进行编码。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于光大科技有限公司;光大兴陇信托有限责任公司,未经光大科技有限公司;光大兴陇信托有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011391624.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置