[发明专利]通用数据交换接口及其实现方法在审
申请号: | 201610583768.5 | 申请日: | 2016-07-22 |
公开(公告)号: | CN107402941A | 公开(公告)日: | 2017-11-28 |
发明(设计)人: | 吴新凯;魏凯 | 申请(专利权)人: | 延边众生云计算科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京思元知识产权代理事务所(普通合伙)11598 | 代理人: | 余光军,霍雪梅 |
地址: | 133001 吉林省延边朝*** | 国省代码: | 吉林;22 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 通用 数据 交换 接口 及其 实现 方法 | ||
1.一种通用数据交换接口,其特征在于,包括:
线程池模块,脚本引擎模块,转化规则模块,流程节点模块,质量规则模块,流程执行器模块,数据处理层模块,调度模块,监控模块,权限模块,元数据库与元数据库管理模块以及接口层模块。
2.按照权利要求1所述的通用数据交换接口,其特征在于,所述线程池模块是操作系统自带的多线程功能,能增加新的处理任务,安全重启失败的任务和取消未完成或未开始的任务,并且数据库访问任务,建立的新线程的卡死不会影响主程序稳定,同时部分任务完成后可以灵活释放系统资源;所述脚本引擎模块是用于读取和输入GBK,utf-8其他编码的java文本类。
3.按照权利要求1所述的通用数据交换接口,其特征在于,所述转化规则模块是个文本,用于描述对数据数据库的增、删、改、查的操作以及对获得后的数据要做的组合规则,支持二次编辑,具有随时修改、重复利用的功能,具有脚本分享、协作开发的特性;所述流程节点模块是个文本,用于描述需要的数据库信息,优选的,所述的数据库信息包括账号,密码或地址;
所述质量规则模块是个文本,用于描述数据的质量要求或精度要求。
4.按照权利要求1所述的通用数据交换接口,其特征在于,所述流程执行器模块是一段程序,在需要的时候才会被触发,并是创建新线程的方式,不循环运行,不会发生卡死和过分占用cpu资源。
5.按照权利要求1所述的通用数据交换接口,其特征在于,所述数据处理层模块是一个数据库适配器,封装了各个厂家的jdbc驱动,可自由添加和自由扩展新的数据库支持,灵活扩展,用于和不同的数据库建立连接。
6.按照权利要求1所述的通用数据交换接口,其特征在于,所述调度模块是一个计时器,支持定时运行的功能和运行优先级的配置。
7.按照权利要求1所述的通用数据交换接口,其特征在于,所述监控模块是一个将整个程序进行监控的界面;所述权限模块是一个是否允许用户修改权限的设置;所述元数据库与元数据库管理模块是用java自带的数据库或Derby数据库,用于保存设置和日志,保存着软件本身的配置文件,支持导出和配置分享;所述接口层模块是tcp请求入口,用于向本程序发送命令,执行某动作,获取某数据。
8.应用权利要求1-7所述通用数据交换接口读取数据的方法,包括:
用户通过数据处理流程管理接口与执行引擎连接创建回话id传入查询语句,执行引擎通过读取元数据管理器中获取元数据存取的顺序和规则后,调度执行相应需要运行的作业流程并根据规则去操作其他异构数据库和一些文件,读出原始数据;执行器根据加载的处理规则对原始数据进行包括加载相关脚本、加载相关规则、加载数据格式转换及执行查找在内的加工,将加工完成后的结果返回到执行引擎并最终返回到数据处理流程管理接口。
9.权利要求1-7所述通用数据交换接口的管理配置,包括:
接口层,元数据库,执行引擎和数据处理层。
10.按照权利要求9所述的管理配置,其特征在于,所述接口层用于连接端客户端管理工具和Mysql jdbc客户端;
所述元数据库中保存着软件本身的配置文件,用于保存配置规则,数据处理规则;
所述执行引擎负责按照设定好的规则进行操作,分为调度,监控,权限管理;
所述数据处理层作为适配器兼容多种数据库和非结构化数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于延边众生云计算科技有限公司,未经延边众生云计算科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610583768.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:敏感词检索方法、装置及存储介质
- 下一篇:索引方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置