[发明专利]基于配置文件对XML数据进行字段提取及结构化方法在审
申请号: | 201811643489.9 | 申请日: | 2018-12-29 |
公开(公告)号: | CN109885569A | 公开(公告)日: | 2019-06-14 |
发明(设计)人: | 邱实;袁晓艳;裴非;李昊 | 申请(专利权)人: | 天津南大通用数据技术股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/25;G06F16/28 |
代理公司: | 天津滨海科纬知识产权代理有限公司 12211 | 代理人: | 杨慧玲 |
地址: | 300384 天津市滨海新区高新区*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 配置文件 读取 字段提取 结构化 数据存入数据库 关系数据库 数据后处理 处理方式 格式描述 信息提取 自动识别 自动转换 批量化 创建 数据库 | ||
1.基于配置文件对XML数据进行字段提取及结构化方法,其特征在于包括如下步骤:
步骤1,读取配置文件,在数据库中创建表;
步骤2,读取单个的XML文件,根据对应的配置文件进行XML节点定位;
步骤3,对定位的XML节点进行XML数据提取;
步骤4,对提取的XML数据进行数据后处理;
步骤5,将处理后的数据存入数据库中创建的表。
2.根据权利要求1所述的基于配置文件对XML数据进行字段提取及结构化方法,其特征在于:所述配置文件的编写规则包括:数据库表的表示方法、数据字段信息的表示方法、XML节点的定位信息表示方法、XML数据提取的配置信息表示方法、数据后处理的配置信息表示方法;
其编写方法包括:分析XML文件的格式,确定所有待提取的内容,并找到相应的标签路径,根据标签路径编写配置文件,每种数据内容占一行;
并在配置文件中添加待提取数据对应的数据库表中的列名;多个列之间,同名的列进行合并,不同名的列作为多个表字段组成一个关系表;每个配置文件对应关系数据库中的一张表,配置文件中每行对应数据库表中的一个字段。
3.根据权利要求2所述的基于配置文件对XML数据进行字段提取及结构化方法,其特征在于:在步骤3中,将对每个定位节点提取的所有数据进行拼接,得到一个数据结果;将数据结果存入数组,作为一列数据;
每个配置文件对应一个数组,配置文件的每一行对应数组中的一列。
4.根据权利要求3所述的基于配置文件对XML数据进行字段提取及结构化方法,其特征在于:在步骤4中,对提取的XML数据进行数据后处理,包括如下步骤:
步骤41,对步骤3的结果数组,将表中需要拼接的列进行横向拼接,形成新的列,通过配置文件中指定分隔符来实现;
步骤42,将上步中的全部列做join操作,遍历所有列,每列各取出一个元素,这些元素构成的所有组合即join的结果;
步骤43,对上步的结果,将指定的列拆分为多个列,通过识别特定的分隔符对指定列进行拆分。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津南大通用数据技术股份有限公司,未经天津南大通用数据技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811643489.9/1.html,转载请声明来源钻瓜专利网。