[发明专利]一种数据处理方法及装置在审
申请号: | 202010026315.9 | 申请日: | 2020-01-10 |
公开(公告)号: | CN111209283A | 公开(公告)日: | 2020-05-29 |
发明(设计)人: | 文海荣;江旻;王大飞 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/23 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 宋正伟 |
地址: | 518027 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
获取与待处理任务关联的各个源数据表;
根据所述各个源数据表中每个源数据所属的参与方,拆分所述各个源数据表,得到各个参与方对应的中间数据表;
从所述各个参与方对应的中间数据表中确定出所述待处理任务对应的待映射的中间数据表,使用所述待处理任务对应的映射模板对所述待映射的中间数据表进行映射,得到所述待处理任务对应的数据文件;所述数据文件用于所述待处理任务对应的参与方解析得到满足所述参与方要求的目标数据表。
2.根据权利要求1所述的方法,其特征在于,所述方法应用于数据处理设备,所述数据处理设备与各个应用服务器连接;
所述获取与所述待处理任务关联的各个源数据表,包括:
获取各个应用服务器上报的业务源数据表;
根据所述各个应用服务器的业务关联性,从所述各个应用服务器中确定出执行所述待处理任务对应的业务的各个目标应用服务器;
将所述各个目标应用服务器上报的业务源数据表作为与所述待处理任务关联的所述各个源数据表。
3.根据权利要求1所述的方法,其特征在于,所述根据所述各个源数据表中每个源数据所属的参与方,拆分所述各个源数据表,得到各个参与方对应的中间数据表,包括:
使用所述各个源数据表中属于同一类型的源数据构建得到所述类型对应的通用中间表;任一类型对应的通用中间表用于存储各个参与方在所述类型下的源数据;
针对于任一参与方,从任一类型对应的通用中间表中拆分出属于所述参与方的源数据,使用所述参与方的源数据构建得到所述参与方在所述类型下的中间数据表。
4.根据权利要求3所述的方法,其特征在于,所述从任一类型对应的通用中间表中拆分出属于所述参与方的源数据,使用所述参与方的源数据构建得到所述参与方在所述类型下的中间数据表,包括:
按顺序拆分所述类型对应的通用中间表中的各个源数据;
其中,在拆分任一源数据时,确定所述源数据所属的参与方,若已存在所述参与方在所述类型下的分区,则将所述源数据放置在所述参与方在所述类型下的分区中,若不存在所述参与方在所述类型下的分区,则先创建所述参与方在所述类型下的分区,再将所述源数据放置在所述参与方在所述类型下的分区中。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述使用所述待处理任务对应的映射模板对所述待映射的中间数据表进行映射,包括:
当所述待映射的中间数据表包括一个时,若所述映射模板中包括字典映射,则从所述待映射的中间数据表中获取所述字典映射的原字段,并将所述原字段映射为所述字典映射的更新字段;若所述映射模板中包括字段映射,则从所述待映射的中间数据表中获取位于所述字段映射的原位置处的字段,将所述字段的位置映射为所述字段映射的更新位置;若所述映射模板中包括类型映射,则从所述待映射的中间数据表中获取所述类型映射的原类型对应的字段,将所述字段的类型映射为所述类型映射的更新类型。
6.根据权利要求1至4中任一项所述的方法,其特征在于,所述使用所述待处理任务对应的映射模板对所述待映射的中间数据表进行映射,包括:
当所述待映射的中间数据表包括两个或两个以上时,先合并各个待映射的中间数据表得到映射视图表,再使用所述待处理任务对应的映射模板对所述映射视图表进行映射;其中,所述映射视图表中包括每个待映射的中间数据表中的数据。
7.一种数据处理装置,其特征在于,所述装置包括:
获取模块,用于获取与待处理任务关联的各个源数据表;
拆分模块,用于根据所述各个源数据表中每个源数据所属的参与方,拆分所述各个源数据表,得到各个参与方对应的中间数据表;
映射模块,用于从所述各个参与方对应的中间数据表中确定出所述待处理任务对应的待映射的中间数据表,使用所述待处理任务对应的映射模板对所述待映射的中间数据表进行映射,得到所述待处理任务对应的数据文件;所述数据文件用于所述待处理任务对应的参与方解析得到满足所述参与方要求的目标数据表。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010026315.9/1.html,转载请声明来源钻瓜专利网。