[发明专利]一种可配置的自动化解析方法和装置在审
申请号: | 202210110365.4 | 申请日: | 2022-01-29 |
公开(公告)号: | CN114528041A | 公开(公告)日: | 2022-05-24 |
发明(设计)人: | 杨晓晨 | 申请(专利权)人: | 杭州火树科技有限公司 |
主分类号: | G06F9/445 | 分类号: | G06F9/445;G06F8/41 |
代理公司: | 杭州天勤知识产权代理有限公司 33224 | 代理人: | 曹兆霞 |
地址: | 310013 浙江省杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种可配置的自动化解析方法和装置,包括:将形成数据接入工作流的数据读取步骤、数据解析步骤以及数据写入步骤节点化,形成数据读取节点、数据解析节点以及数据写入节点;提供包括数据读取节点、数据解析节点以及数据写入节点的配置文件;根据数据类型从配置文件中选择适配数据类型和需求的数据读取节点、数据解析节点以及数据写入节点的配置参数;以spark计算引擎为基础,根据选择分别从配置文件中加载数据读取节点、数据解析节点以及数据写入节点的配置参数,并结合数据接入工作流的内在逻辑图参数,实现数据的自动化解析。该方法和装置能够满足各类数据源的快速接入和处理,具有普适性。 | ||
搜索关键词: | 一种 配置 自动化 解析 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州火树科技有限公司,未经杭州火树科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210110365.4/,转载请声明来源钻瓜专利网。