[发明专利]可自动识别与配置转换的数据处理方法在审
| 申请号： | 201910965045.5 | 申请日： | 2019-10-11 |
| 公开（公告）号： | CN110704528A | 公开（公告）日： | 2020-01-17 |
| 发明（设计）人： | 马玉平;乐彬;周宁宁 | 申请（专利权）人： | 苏州易博创云网络科技有限公司 |
| 主分类号： | G06F16/25 | 分类号： | G06F16/25 |
| 代理公司： | 32257 苏州市中南伟业知识产权代理事务所(普通合伙) | 代理人： | 杨慧林 |
| 地址： | 215000 江苏省苏州市工*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种可自动识别与配置转换的数据处理方法。本发明一种可自动识别与配置转换的数据处理方法，包括：尝试通过可识别的缺陷自定义数据协议解决格式变化的问题，通过数据解析中间件将数据中的变化转换为可配置的JSON格式文件，将JSON格式文件作为ETL数据处理的输入；以此解决大数据ETL处理过程中源数据格式缺失或变化的引起的不可预测的故障。本发明的有益效果：本发明将基于传统ETL的数据转转工作流提升为基于数据转换协议可配置并自动解析识别的自动化数据转换过程。基于本发明在数据处理场景中可以根据源数据的变化情况任意配置。 | ||
| 搜索关键词： | 数据处理 配置转换 自动识别 源数据 数据解析中间件 自定义数据 自动化数据 格式变化 可配置的 数据转换 转换过程 自动解析 大数据 工作流 可配置 可识别 场景 转换 预测 配置 | ||
【主权项】：
1.一种可自动识别与配置转换的数据处理方法，其特征在于，包括：尝试通过可识别的缺陷自定义数据协议解决格式变化的问题，通过数据解析中间件将数据中的变化转换为可配置的JSON格式文件，将JSON格式文件作为ETL数据处理的输入。以此解决大数据ETL处理过程中源数据格式缺失或变化的引起的不可预测的故障。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于苏州易博创云网络科技有限公司，未经苏州易博创云网络科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910965045.5/，转载请声明来源钻瓜专利网。
