[发明专利]时序数据处理方法、设备、数据处理设备及介质

说明书

本发明公开了一种时序数据处理方法、设备、数据处理设备及介质。一种时序数据处理方法，包括：接收用户输入，包括进行时序数据分析所需的数据处理配置信息、数据存储配置信息、及数据呈现配置信息；解析数据处理配置信息，并生成至少一个数据处理任务，通过执行至少一个数据处理任务对时序数据进行处理，得到时序数据处理结果；解析数据存储配置信息，并存储时序数据处理结果；及解析数据呈现配置信息，并呈现时序数据分析结果。本发明通过使得用户能够通过简单地配置输入，便可以基于时序数据来生成分析结果，而不需要用户自己编程来开发大数据处理任务，并且也不需要用户自己比较熟悉计算引擎和存储引擎才能生成分析报表。

技术领域

本发明涉及数据处理技术，尤其涉及时序数据处理方法、设备、数据处理设备及介质。

背景技术

随着实时计算的兴起，大众对实时数据进行分析和处理的需求越来越多。由于大部分的实时数据都是时序数据，因此分析的需求也往往集中在基于特定维度的聚合分析上。在本文中，时序数据指时间序列数据。

然而当前，在现有技术中，基于时序数据进行实时分析和处理往往需要先进行技术选型以寻找适用的计算引擎与存储引擎，然后再开发大数据处理任务以将时序数据采集到存储引擎中，然后基于存储引擎的查询特性来定制一套时序数据的分析报表，如图1所示。

由此可见，图1所示的现有技术的时序数据处理方法对于用户的要求较高，比如，需要用户能够编程来开发大数据处理任务，而且需要用户对所选择的计算引擎和存储引擎比较熟悉才能够进行时序数据的实时分析来生成分析报表。

而对于普通用户来说，很难达到上面的这些要求，因此，需要一种简单有效的时序数据处理方法，能够为普通用户所使用。

发明内容

为了解决以上问题之一，本发明提供了一种时序数据处理方法、设备、数据处理设备及介质。

具体地，本发明提出一种端到端的时序数据一站式处理工具，用户可以通过简单地配置输入，便可以从时序数据生成分析结果，而不需要用户自己编程来开发大数据处理任务，并且也不需要用户自己比较熟悉计算引擎和存储引擎才能生成分析报表。

换而言之，在本发明中，普通用户可以基于时序数据的场景，只要预先定义一套数据处理逻辑、数据存储配置和数据呈现配置，便无需其再关心大数据的计算与存储，即可完成数据分析和处理。由此可见，本发明能够大大降低时序数据分析和处理的门槛，并且能够大大提高时序数据分析和处理的效率。

根据本发明的一种实施例，提供一种时序数据处理方法，包括：接收用户输入，所述用户输入包括进行时序数据分析所需的数据处理配置信息、数据存储配置信息、以及数据呈现配置信息；解析所述数据处理配置信息，并基于解析的所述数据处理配置信息来生成至少一个数据处理任务，通过执行所述至少一个数据处理任务对时序数据进行处理，得到时序数据处理结果；解析所述数据存储配置信息，并基于解析的所述数据存储配置信息来存储所述时序数据处理结果；以及解析所述数据呈现配置信息，并基于解析的所述数据呈现配置信息来分析时序数据，呈现时序数据分析结果。

可选地，数据处理配置信息包括用户对于以下的时序数据处理有关的配置信息：时序数据关联处理、时序数据合并处理、时序数据变换处理。

可选地，数据存储配置信息包括用户对于存储维度、度量字段以及时间列有关的配置信息。

可选地，数据呈现配置信息包括数据图表样式、图表上要呈现的数据的类型。

可选地，通过萃取-转置-载入ETL工具来解析所述数据处理配置信息并生成至少一个数据处理任务。

可选地，通过数据库连接池工具来解析所述数据存储配置信息并分析时序数据并呈现。

可选地，上述的时序数据处理方法还包括：响应于用户对所述数据呈现结果的查询操作，得到数据查询结果。