[发明专利]一种数据处理方法及其相关产品

说明书

本申请实施例公开了一种数据处理方法，该方法包括获取针对待计算数据的计算请求，待计算数据为通过第一类二维表和/或第二类二维表保存的数据，第一类二维表和第二类二维表均为行有序的二维表；根据计算请求携带的计算规则，对待计算数据进行计算得到保存在第二类二维表中的计算结果；通过格式转换，将计算结果保存到第一类二维表中输出。通过引入行有序的二维表，可以将不能通过行无序二维表保存的数据保存到大数据处理平台的数据库中，从而大数据处理平台具备了为这类数据提供计算服务的可能，扩展了大数据处理平台的适用范围。本申请实施例还公开了一种数据处理装置、设备、存储介质及计算机程序产品。

技术领域

本申请涉及数据处理领域，特别是涉及一种数据处理方法及其相关产品。

背景技术

大数据处理过程中需要对各种数据进行存储，并可以针对计算需求对存储的数据进行计算，以得到所需的计算结果。

大数据处理平台可以实现大数据的存储和计算服务，通过分布式数据库存储海量数据。大数据处理平台的业务处理范围与平台的数据库所能存储的数据类型有一定关系，数据库所能存储的数据类型越多，平台就能够提供针对更多类型数据的计算服务。

发明内容

有些大数据处理平台的数据库的基本存储格式是二维表，而且存储数据时主要使用的是行无序的二维表，然而，有些类型的数据是无法使用这类二维表进行存储的，例如列数较多的数据，或者矩阵形式的数据等，从而导致了大数据处理平台无法针对这类不能存储的数据进行计算，限制了大数据处理平台的适用范围。

为了解决上述技术问题，本申请提供了一种数据处理方法及相关产品，使得大数据处理平台具备了为这类数据提供计算服务的可能，扩展了大数据处理平台的适用范围。

本申请实施例公开了如下技术方案：

第一方面，本申请实施例公开了一种数据处理方法，该方法包括：

获取针对待计算数据的计算请求，待计算数据为通过第一类二维表和/或第二类二维表保存的数据，第一类二维表和第二类二维表均为行有序的二维表；

根据计算请求携带的计算规则，对待计算数据进行计算得到保存在第二类二维表中的计算结果；

通过格式转换，将计算结果保存到第一类二维表中输出。

可选的，计算请求是由用户发送的。

可选的，待计算数据是由用户上传的。

可选的，在根据计算请求携带的计算规则，对待计算数据进行计算得到保存在第二类二维表中的计算结果之前，还包括：

通过格式转换，将待计算数据保存到第二类二维表中。

可选的，通过格式转换，将计算结果保存到第一类二维表中输出，包括：

获取用户发送的转换请求，转换请求包括第一类二维表的目标格式；

通过格式转换，将计算结果保存到符合目标格式的第一类二维表中输出。

可选的，第一类二维表包括键值表、索引键值表、三元组表和索引三元组表中任意一项或多项的组合；第二类二维表包括有序表、稠密矩阵表和稀疏矩阵表中任意一项或多项的组合。

第二方面，本申请实施例公开了一种数据处理装置，该装置包括：

获取单元、计算单元、输出单元，其中：

获取单元，用于获取针对待计算数据的计算请求，待计算数据为通过第一类二维表和/或第二类二维表保存的数据，第一类二维表和第二类二维表均为行有序的二维表；

计算单元，用于根据计算请求携带的计算规则，对待计算数据进行计算得到保存在第二类二维表中的计算结果；