[发明专利]集群数据库的数据加载方法及装置在审
申请号: | 201510786469.7 | 申请日: | 2015-11-16 |
公开(公告)号: | CN105740305A | 公开(公告)日: | 2016-07-06 |
发明(设计)人: | 赵伟;武新;李东海;王雪松 | 申请(专利权)人: | 天津南大通用数据技术股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 300384 天津市西青区华苑产*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 集群 数据库 数据 加载 方法 装置 | ||
技术领域
本发明属于数据库技术领域,尤其是涉及一种集群数据库的数据加载方法及装置。
背景技术
集群数据库使用大量计算机节点提供高性能、大数据量的数据库服务。集群数据库的加载工具负责高性能地向集群数据库中加载大量数据。通过两台或者多台数据库服务器,提供透明的服务,集群向客户端提供的服务与单机系统向客户端提供的服务,从通讯协议上保持二进制兼容。在进行数据更新时,数据库客户端发出数据更新请求后,要等集群的每个节点全部更新后,才给客户端返回结果。
在加载时,需要读取数据文件,然后将数据文件中包含的数据加载进集群数据库。如果用户需要对数据文件进行批量修改,也需要重新生成数据,并通过集群数据库的加载工具加载代集群数据库中,对于用户来说,这样的操作繁琐且容易发生错误。如果用户希望加载其他数据,就写一份新的数据文件,或者在旧的数据文件的基础之上进行修改,然后再次运行集群数据库的加载工具进行加载。用户希望通过简单的操作,就可以是批量修改数据文件,进而使修改后的数据文件加载到集群数据库中。
发明内容
有鉴于此,本发明实施例提供了一种集群数据库的数据加载方法及装置,以实现用户通过少量操作即可实现批量修改集群数据库中数据的目的。
第一方面,本发明实施例提供了一种集群数据库的数据加载方法,所述方法包括:
接收客户端发送的数据文件;
解析所述数据文件中的数据,判断所述数据中是否包括表达式;
在所述数据中包括表达式时,计算所述表达式的结果;
将所述结果代入数据,并加载所述代入的数据。
进一步的,所述加载所述代入的数据,包括:
将所述代入的数据加载到集群数据库中。
进一步的,在接收客户端发送的数据文件之前,还包括:
加载数据文件工具,用以解析数据文件中的数据。
更进一步的,,在解析所述数据文件中的数据之前,还包括:
解压所述压缩的数据文件。
第二方面,本发明实施例提供了一种集群数据库的数据加载装置,所述装置包括:
数据文件接收模块,用于接收客户端发送的数据文件;
表达式判断模块,用于解析所述数据文件中的数据,判断所述数据中是否包括表达式;
计算模块,用于在所述数据中包括表达式时,计算所述表达式的结果;
数据加载模块,用于将所述结果代入数据,并加载所述代入的数据。
进一步的,所述数据加载模块用于:
将所述代入的数据加载到集群数据库中。
进一步的,所述装置还包括:
文件工具加载模块,用以加载数据文件工具,用以解析数据文件中的数据。
更进一步的,所述装置还包括:
解压模块,用于解压所述压缩的数据文件。
采用本发明实施例所提供的技术方案,通过解析所述数据文件中的数据,判断所述数据中是否包括表达式;在所述数据中包括表达式时,计算所述表达式的结果;将所述结果代入数据,并加载所述代入的数据。实现了在支持在加载过程中对数据文件中包含的表达式进行求值和代入。用户往往不需要修改或重写数据文件,仅可通过相应的条件就可以加载新的数据,提高了数据文件的使用效率,提高了集群数据库加载工具的灵活性,极大改善了数据加载工具的用户使用体验。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例提供的集群数据库的数据加载方法的流程示意图;
图2是本发明第一实施例提供的集群数据库的数据加载方法中集群数据库加载工具的示意图;
图3是本发明第一实施例提供的集群数据库的数据加载方法中支持表达式求值代入的集群数据库加载工具的示意图;
图4是本发明第一实施例提供的集群数据库的数据加载方法中过程示意图;
图5是本发明第一实施例提供的集群数据库的数据加载方法支持表达式求值代入示例图。
图6是本发明第一实施例提供的集群数据库的数据加载装置的结构示意图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津南大通用数据技术股份有限公司,未经天津南大通用数据技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510786469.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:设计等值域图
- 下一篇:一种浏览器的标签页处理方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置