[发明专利]一种数据处理方法、系统及存储介质

说明书

本发明实施例公开了一种数据处理方法、系统及存储介质。该方法包括：主数据库服务器与从数据库服务器并行执行所生成的执行计划树，主数据库服务器执行结束数据筛选节点时，递归结束执行数据筛选节点的子节点，如果数据筛选节点的子节点为通讯节点且通讯节点中包含预设标记，主数据库服务器通知从数据库服务器递归结束执行通讯节点及通讯节点的子节点，之后主数据库服务器继续执行该执行计划树，并将执行结果发送给用户。本发明实施例的主数据库服务器在结束执行数据筛选节点后，如果数据筛选节点的子节点为通讯节点且通讯节点中包含预设标记，则通知从数据库服务器递归结束执行通讯节点及通讯节点的子节点，保证了主、从数据库服务器的同步。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种数据处理方法、系统及存储介质。

背景技术

大规模并行处理(Massively Parallel Processing，MPP)，支持将多个数据库实例组织为一个分布式的并行计算集群系统，对外提供统一的数据库服务。MPP系统中每一个运行的数据库服务器实例称为一个执行节点(Execute Point，EP)，每个EP的作用相同。对于用户会话来说，EP有主从之分，用户会话连接的EP对该用户会话来说为主EP，其余的EP为从EP。主EP根据用户输入的结构化查询语句(Structured Query Language，简称SQL语句)生成对应的执行计划。

主EP和从EP会按照该执行计划并行执行，执行过程中，如果主EP提前执行结束，需要及时通知从EP也结束，否则无法保证主EP和从EP的同步，进而导致无效数据的传送和堆积。

发明内容

本发明实施例提供一种数据处理方法、系统及存储介质，保证主、从数据库服务器的同步执行，减少无效的数据堆积。

第一方面，本发明实施例提供一种数据处理方法，包括：

主数据库服务器与从数据库服务器并行执行所生成的执行计划树，所述执行计划树由所述主数据库服务器解析用户输入的结构化查询语句生成，所述执行计划树中包括通讯节点和数据筛选节点；

所述主数据库服务器执行结束所述数据筛选节点时，递归结束执行所述数据筛选节点的子节点；

如果所述数据筛选节点的子节点为所述通讯节点且所述通讯节点中包含预设标记，则所述主数据库服务器通知所述从数据库服务器递归结束执行所述通讯节点以及通讯节点的子节点；之后，所述主数据库服务器继续执行所述执行计划树，并将执行结果发送给所述用户。

第二方面，本发明实施例还提供一种数据处理系统，包括：主数据库服务器和至少一个从数据库服务器，所述主数据库服务器与各从数据库服务器建立通信连接；

所述主数据库服务器，用于与从数据库服务器并行执行所生成的执行计划树，所述执行计划树由所述主数据库服务器解析用户输入的结构化查询语句生成，所述执行计划树中包括通讯节点和数据筛选节点；

所述主数据库服务器，还用于当执行结束所述数据筛选节点时，递归结束执行所述数据筛选节点的子节点，如果所述数据筛选节点的子节点为所述通讯节点且所述通讯节点中包含预设标记，则通知所述从数据库服务器递归结束执行所述通讯节点以及通讯节点的子节点；之后，继续执行所述执行计划树，并将执行结果发送给所述用户；

所述从数据库服务器，用于与所述主数据库服务器并行执行所述执行计划树，以及根据所述主数据库服务器的通知递归结束执行所述通讯节点以及通讯节点的子节点。

第三方面，本发明实施例还提供了一种存储介质，其上存储有计算机程序，该程序被对应数据库服务器执行时实现如第一方面所述的数据处理方法。