[发明专利]一种数据汇总方法、装置及终端设备

说明书

本申请适用于数据处理技术领域，提供了一种数据汇总方法、装置及终端设备，所述方法包括：获取业务数据，并确定业务数据中每条数据的有效信息；根据有效信息生成汇总模板；根据汇总模板和预设模板引擎确定业务数据中每条数据对应的业务标识；根据业务标识对业务数据进行汇总处理，得到业务数据表；业务数据表由业务标识相同的各条数据构成。本申请提供的数据汇总方法提高了数据的汇总效率。

技术领域

本申请属于数据处理技术领域，尤其涉及一种数据汇总方法、装置、终端设备及计算机可读存储介质。

背景技术

现有的系统架构(如订单、账单类型的系统)，由于业务交易渠道的多样性，会产生大量的业务数据，并且上述业务数据均零乱存储于数据库或者其他存储单元中，并没有进行统一分类，因此，对海量数据的汇总和汇总处理一直是比较重要的问题。

现有的数据汇总方法，通常是通过结构化查询语言(Structured QueryLanguage,SQL)预先设置好汇总条件，即汇总条件是固定不变的，然后再根据该汇总条件对业务数据进行汇总和汇总。因此，当业务数据需要通过新的汇总条件进行汇总时，往往需要通过编码的方式，预先在系统中实现其对应的处理逻辑。由此可见，现有的数据汇总方法存在适用范围小、操作繁琐且效率低下的问题。

发明内容

本申请实施例提供了一种数据汇总方法、装置、终端设备及计算机可读存储介质，可以解决现有技术存在的适用范围小、操作繁琐且效率低下的问题。

第一方面，本申请实施例提供了一种数据汇总方法，包括：

获取业务数据，并确定所述业务数据中每条数据的有效信息；

根据所述有效信息生成汇总模板；

根据所述汇总模板确定所述业务数据中每条数据对应的业务标识；

根据所述业务标识对所述业务数据进行汇总处理，得到业务数据表；所述业务数据表由所述业务标识相同的各条数据构成。

可选的，所述获取业务数据，并确定所述业务数据中每条数据的有效信息，包括：

根据参数信息确定所述业务数据对应的汇总场景；所述参数信息由用户输入得到；

根据所述汇总场景，以及预设汇总场景与有效信息之间的对应关系，得到所述业务数据的有效信息。

可选的，所述获取业务数据，并确定所述业务数据中每条数据的有效信息，包括：

获取所述业务数据中每条数据的原始信息；

根据预设规则对所述原始信息进行标准化处理，得到所述业务数据的标准信息；

将所述标准信息和预先存储的多个历史有效信息进行一一对比，并根据对比结果得到所述业务数据的有效信息。

可选的，所述将所述标准信息和预先存储的多个历史有效信息进行一一对比，并根据对比结果得到所述业务数据的有效信息，包括：

当检测到所述多个历史有效信息中存在与所述标准信息完全相同的历史有效信息时，确定所述标准信息为所述有效信息；

相应的，所述根据所述有效信息生成汇总模板，包括：

根据预先存储的各个历史有效信息与历史汇总模板之间的对应关系，确定所述有效信息对应的汇总模板。

可选的，所述根据所述汇总模板确定所述业务数据中每条数据对应的业务标识，包括：

根据所述汇总模板和所述预设模板引擎，得到所述每条数据的多个特征信息；

对所述多个特征信息进行组合，得到所述每条数据对应的业务标识。