[发明专利]一种数据管理方法和装置

说明书

在本发明实施例公开了一种数据管理方法和装置，所述方法包括：获取数据样本；根据所述数据样本的类型，确定所述数据样本的解析方式；采用所述解析方式解析所述数据样本，获得所述数据样本的解析结果和存储类型；根据所述存储类型，在存储介质中创建对应的存储对象；将所述解析结果存储在所述存储对象中。在本发明实施例中，可根据数据样本的类型确定解析方式，对数据样本进行解析，能够通过解析方式直接对数据样本进行解析，并不需要针对不同的数据样本编写不同的脚本。再者通过解析出存储类型在存储介质中创建存储对象，使解析出的解析结果直接存储在存储对象中，并不需针对不同存储介质编写不同的脚本和配置文件进行存储，提高数据的处理效率。

技术领域

本发明涉及数据存储领域，尤其涉及一种数据管理方法和装置。

背景技术

在先技术中，通常是在数据采集系统中使用Logstash(数据搜索引擎)进行数据的采集，开发人员需要编写相应的脚本和配置文件进行数据的采集、处理和存储。

目前，随着数据来源的不断增加，开发人员需要针对数据的不同格式及不同种类编写不同的脚本和配置文件，同时，当需要将同一数据存储在不同的存储介质中时，开发人员需针对同一数据在不同的存储介质中存储，编写不同的脚本文件和配置文件，上述编写脚本文件及配置文件的过程会使开发人员的工作变的非常繁琐，并且编写难度也会非常大。

发明内容

有鉴于此，本发明实施例提出一种数据管理方法和装置，以解决现有技术中在存储数据时，脚本文件及配置文件编写难度大，工作繁琐的问题。

本发明公开了一种数据存储方法，所述方法包括：

获取数据样本；

根据所述数据样本的类型，确定所述数据样本的解析方式；

采用所述解析方式解析所述数据样本，获得所述数据样本的解析结果和存储类型；

根据所述存储类型，在存储介质中创建对应的存储对象；

将所述解析结果存储在所述存储对象中。

可选的，所述数据样本的类型包括：分隔符类型、json类型和正则表达式类型；所述解析方式与所述数据样本的类型一一对应。

可选的，当所述数据样本的类型为分隔符类型时，所述存储类型为值集合类型；当所述数据样本的类型为json类型时，所述存储类型为键-值集合类型；当所述数据样本的类型为正则表达式类型时，所述存储类型为值集合类型和/或键-值集合类型。

可选的，所述根据所述数据样本的类型，确定所述数据样本的解析方式之后，还包括：

接收用户选择的存储介质，并在所述存储介质中配置所述解析方式；

则所述采用所述解析方式解析所述数据样本，包括：

采用所述存储介质中配置的所述解析方式，解析所述数据样本。

可选的，所述根据所述存储类型，在存储介质中创建对应的存储对象之前，还包括：

在显示界面显示所述解析结果；

当显示的所述解析结果与所述目标显示结果匹配时，执行所述根据所述存储类型，在存储介质中创建对应的存储对象。

可选的，在所述将所述解析结果存储在所述存储对象中之后，还包括：

获取所述数据样本所属的整体数据；

采用所述存储介质中配置的所述解析方式解析所述整体数据，获得所述整体数据的解析结果；

将所述整体数据的解析结果存储在所述存储对象中。

本发明另一方面在于提供一种数据存储装置，所述装置包括：