[发明专利]一种异构数据源的数据存储、检索方法及装置

权利要求书

1.一种异构数据源的数据存储方法，其特征在于，所述方法包括：

接收数据采集指令，所述数据采集指令中包含异构数据源的标识；

基于所述异构数据源的标识，查找到相应的异构数据源，其中，所述异构数据源中内嵌有注解，所述注解用于配置所述异构数据源的数据采集方式；

根据所述异构数据源中内嵌的注解，执行数据采集操作得到目标数据；

利用预置配置文件，将所述目标数据存储到列式存储数据库中。

2.根据权利要求1所述的方法，其特征在于，所述注解中包括所述异构数据源的接口和数据转换格式，所述根据所述异构数据源中内嵌的注解，执行数据采集操作得到目标数据，包括：

从所述注解中获取所述异构数据源的接口和数据转换格式；

根据所述接口从所述异构数据源中采集数据；

根据所述数据转换格式，对采集到的数据进行统一格式转换处理得到目标数据。

3.根据权利要求1所述的方法，其特征在于，所述利用预置配置文件，将所述目标数据存储到列式存储数据库中，包括：

从所述预置配置文件中获取多个预置属性字段、多个存储量阈值和多个存储地址，其中，每个所述存储量阈值关联了不同的存储地址；

从所述多个存储量阈值中获取大于所述目标数据的数据量所对应的存储量阈值，作为目标存储量阈值；

根据所述目标存储量阈值，从所述多个存储地址中确定对应关联的目标存储地址；

根据所述多个预置属性字段，在所述目标存储地址对应的存储空间上创建列式存储数据库；

将所述目标数据存储到所述列式存储数据库中。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

从多个所述预置属性字段中获取目标属性字段；

设置所述目标属性字段对应的数据存储格式，以用于在所述目标属性字段内以所述数据存储格式存储数据信息；和/或，

若所述目标属性字段为多个，则通过对多个所述目标属性字段进行解析，得到所述多个目标属性字段之间存在的关联关系，以用于在将所述目标数据存储到所述列式存储数据库中时，优先向具有所述关联关系的目标属性字段内存储数据信息。

5.根据权利要求4所述的方法，其特征在于，所述将所述目标数据存储到所述列式存储数据库中，包括：

在利用所述多个预置属性字段存储所述目标数据的过程中，按照所述数据存储格式向所述目标属性字段存储相应的目标数据；

若所述目标属性字段为多个，则根据所述多个目标属性字段之间存在的关联关系，向所述多个目标属性字段存储相应的目标数据。

6.一种异构数据源的数据检索方法，其特征在于，应用于如权利要求1至5中任一项所述的异构数据源的数据存储方法所得到的列式存储数据库，所述方法包括：

接收数据检索指令，所述数据检索指令携带检索信息；

通过遍历所述列式存储数据库中的各个属性列，查找与所述检索信息匹配的检索结果。

7.根据权利要求6所述的方法，其特征在于，所述通过遍历所述列式存储数据库中的各个属性列，查找与所述检索信息匹配的检索结果，包括：

从所述检索信息中解析出检索条件和检索关键字；

根据所述检索关键字，逐个遍历所述列式存储数据库内每个属性字段下的属性信息，查找匹配的目标属性信息；

根据所述目标属性信息，确定对应归属的目标属性字段；

在所述目标属性字段下，查找与所述检索条件匹配的检索结果。

8.一种异构数据源的数据存储装置，其特征在于，所述装置包括：

接收单元，用于接收数据采集指令，所述数据采集指令中包含异构数据源的标识；

查找单元，用于基于所述异构数据源的标识，查找到相应的异构数据源，其中，所述异构数据源中内嵌有注解，所述注解用于配置所述异构数据源的数据采集方式；

采集单元，用于根据所述异构数据源中内嵌的注解，执行数据采集操作得到目标数据；

存储单元，用于利用预置配置文件，将所述目标数据存储到列式存储数据库中。