[发明专利]一种数据更新方法及装置

说明书

本发明公开了一种数据更新方法及装置，涉及数据处理技术领域，主要目的在于减少数据更新时间，同时缩短只读数据库不可访问时间，本发明的主要技术方案为：创建预设数据结构的临时表，所述临时表的数据结构与只读数据库中正式表的数据结构相同；当接收到更新的数据时，根据所述更新的数据对应的存储分区以及所述临时表中的数据占用情况将所述更新的数据加载至所述临时表中；判断所述临时表中的数据是否满足预设条件；如果是，则将所述临时表中的数据替换至所述只读数据库的正式表中。本发明主要用于数据的更新。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据更新方法及装置。

背景技术

随着计算机技术的快速发展，数据已经渗透到当今的各个行业以及业务职能领域，而云时代的到来吸引了更多对大数据的关注，在大数据技术中，数据的存储一直是关注的重点，如何有效地在分布式环境中存储海量数据，如何有效地设计分布式数据库以及执行分布式查询都是数据存储需要关注的重点。

数据库的产生很大程度上解决了数据存储的问题，而在分布式环境中多查询少更新的场景下，只读数据库更适合数据的存储，与传统的关系型数据库不同，只读数据库是列式存储，不支持分区内数据的更新操作。

目前，对只读数据库的更新操作通常采用文件替换的方式，将生成的更新后全部数据条目放置到另一个文件中，进而覆盖原先更新的数据文件。然而，在只读数据库更新频率较高的场景下，上述的更新方式每次都会对原先更新的数据文件进行覆盖，使得每次数据更新时间较长，另外每次在数据文件覆盖的过程中，只读数据库是不可访问的，无法进行任何数据操作。

发明内容

有鉴于此，本发明提供一种数据更新方法及装置，主要目的在于减少数据更新时间，同时缩短只读数据库不可访问时间。

为了解决上述问题，本发明主要提供如下技术方案：

一方面，本发明实施例提供了一种数据更新方法，包括：

创建预设数据结构的临时表，所述临时表的数据结构与只读数据库中正式表的数据结构相同；

当接收到更新的数据时，根据所述更新的数据对应的存储分区以及所述临时表中的数据占用情况将所述更新的数据加载至所述临时表中；

判断所述临时表中的数据是否满足预设条件；

如果是，则将所述临时表中的数据替换至所述只读数据库的正式表中。

进一步地，所述根据所述更新的数据对应的存储分区以及所述临时表中的数据占用情况将所述更新的数据加载至所述临时表中包括：

判断所述更新的数据对应的存储分区是否为所述临时表所在的存储分区；

如果是，则将所述更新的数据加载至所述临时表中。

进一步地，所述根据所述更新的数据对应的存储分区以及所述临时表中的数据占用情况将所述更新的数据加载至所述临时表中还包括：

若所述更新的数据对应的存储分区不是所述临时表所在的存储分区，进一步判断所述临时表中的数据占用情况是否为空；

若所述临时表中的数据占用情况为空，调整所述临时表对应的存储分区为所述更新的数据对应的存储分区，之后将所述更新的数据加载至调整存储分区后的临时表中，或者

删除所述临时列表，并在所述更新的数据对应的存储分区新创建临时表，之后将所述更新的数据加载至所述新创建临时表中。

进一步地，所述方法还包括：

若所述临时表中的数据占用情况不为空，则在将所述临时表中的原始数据替换至所述原始数据对应的存储分区中的正式表后，清空所述临时表中的数据，并调整所述临时表对应的存储分区为所述更新的数据对应的存储分区，之后将所述更新的数据加载至调整存储分区后的临时表中，或者