[发明专利]一种基于XML模板的对象数据清洗转换方法在审
申请号: | 202110263358.3 | 申请日: | 2021-03-18 |
公开(公告)号: | CN112883022A | 公开(公告)日: | 2021-06-01 |
发明(设计)人: | 李奔;李耀;彭磊 | 申请(专利权)人: | 武汉众邦银行股份有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/22;G06F16/84;G06F40/151 |
代理公司: | 成都正煜知识产权代理事务所(普通合伙) 51312 | 代理人: | 李龙 |
地址: | 432200 湖北省武汉市黄陂区盘龙城经济开发区汉*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 xml 模板 对象 数据 清洗 转换 方法 | ||
1.一种基于XML模板的对象数据清洗转换方法,其特征在于,包括以下步骤:
步骤1、通过kafka获取数据总线的包含了其他数据库对表操作信息的json报文;
步骤2、通过XML规则模板的数据源过滤标签,对JSON报文进行数据源过滤,筛选出需要清洗的待清洗数据,待清洗数据包含了表名和字段信息;
步骤3、通过XML规则模板数据清洗规则,对待清洗数据进行清洗,得到待操作的数据信息;
步骤4、在待操作的数据信息中,选择待操作表名和该表中一个或多个字段作为XML源数据业务主键,并定义在XML规则模板中;
步骤5、将XML源数据业务主键与本地数据库的表及字段关联,生成可以对本地数据库对应的表进行插入、删除、更新、查询操作的SQL语句。
2.根据权利要求1所述的一种基于XML模板的对象数据清洗转换方法,其特征在于,数据清洗规则包括:
简单清洗规则:解析接收到的json报文,并对指定的字段复制到对应的值;
复杂清洗规则:解析接收到的json报文,对指定字段做数学运算、类型转换或者逻辑处理后得到对应的值。
自定义清洗规则:解析接收到的json报文,属性扩展自定义函数方法,并得到对应的值。
3.根据权利要求1所述的一种基于XML模板的对象数据清洗转换方法,其特征在于,所述简单清洗规则如下:
声明简单映射关系simple标签,包含映射描述,用于备注当前简单映射关系的desc的属性;
声明请求参数表中字段映射的结果表属性值relation,包含属性:
col:包含声明清洗目标表字段;
relation值:声明请求来源表字段。
4.根据权利要求1所述的一种基于XML模板的对象数据清洗转换方法,其特征在于,所述复杂清洗规则如下:
声明简单映射关系complex标签;
声明请求参数表中字段映射结果表映射关系relation标签,包含属性:
col:声明清洗目标表字段;
声明复杂映射处理规则rel标签,包含属性:
handle:声明处理方式;
ref-type:声明取值类型;
data-Type:声明数值类型或转换方式;
rel标签值:表示清洗的请求参数表字段。
5.根据权利要求1所述的一种基于XML模板的对象数据清洗转换方法,其特征在于,所述自定义清洗规则如下:
<querylndex:声明映射表查询条件,至少有一个or子标签,属性包含如下:desc:映射描述,用于备注当前简单映射关系;
or:声明查询条件映射关系,至少有一个rel子标签,属性包含如下:
rel:声明映射结果表中对应的属性取值字段。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉众邦银行股份有限公司,未经武汉众邦银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110263358.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种高真空线操作系统
- 下一篇:一种便于更换的LNG储罐隔震支座及更换方法