[发明专利]日志数据的存储方法、装置、客户端及服务器

说明书

本说明书实施例提供一种日志数据的存储方法、装置、客户端及服务器，在日志数据的存储方法中，客户端采集原始日志数据。为原始日志数据添加对应的用于构造行键rowkey的关键信息以及动态列名，得到格式化处理后的日志数据。向服务器发送格式化处理后的日志数据。服务器对格式化处理后的日志数据进行解析，以获取上述关键信息以及动态列名。根据关键信息，生成rowkey。根据rowkey以及动态列名，将原始日志数据写入Hbase数据库的对应位置。

技术领域

本说明书一个或多个实施例涉及计算机技术领域，尤其涉及一种日志数据的存储方法、装置、客户端及服务器。

背景技术

传统技术中，服务器通常会采用结构化的方式存储客户端采集到的日志数据，如，将日志数据存储到mysql数据库中。当通过结构化的方式存储日志数据时，具有关联关系的日志数据(简称关联日志)可能会分布在不同数据表的多行记录中。从而业务系统在查询上述关联日志时，需要关联查询数据库的多张数据表，之后再将查询到的多条日志数据进行拼装，以得到上述关联日志。

因此，需要提供一种日志数据的存储方法，以提高日志数据的读取效率。

发明内容

本说明书一个或多个实施例描述了一种日志数据的存储方法、装置、客户端及服务器，可以提高日志数据的读取效率。

第一方面，提供了一种日志数据的存储方法，包括：

服务器获取格式化处理后的日志数据；所述格式化处理包括为原始日志数据添加用于构造行键rowkey的关键信息以及动态列名；

对所述格式化处理后的日志数据进行解析，以获取所述关键信息以及所述动态列名；

根据所述关键信息，生成所述rowkey；

根据所述rowkey以及所述动态列名，将所述原始日志数据写入Hbase数据库的对应位置。

第二方面，提供了一种日志数据的存储方法，包括：

客户端采集原始日志数据；

确定与所述原始日志数据对应的用于构造行键rowkey的关键信息以及动态列名；

根据所述关键信息以及所述动态列名，对所述原始日志数据进行格式化处理；

向服务器发送格式化处理后的日志数据，以使所述服务器对所述格式化处理后的日志数据进行解析，获取所述关键信息以及所述动态列名，并根据所述关键信息，生成所述rowkey；还使所述服务器根据所述rowkey以及所述动态列名，将所述原始日志数据写入Hbase数据库的对应位置。

第三方面，提供了一种日志数据的存储装置，包括：

获取单元，用于获取格式化处理后的日志数据；所述格式化处理包括为原始日志数据添加用于构造行键rowkey的关键信息以及动态列名；

解析单元，用于对所述获取单元获取的所述格式化处理后的日志数据进行解析，以获取所述关键信息以及所述动态列名；

生成单元，用于根据所述关键信息，生成所述rowkey；

写入单元，用于根据所述生成单元生成的所述rowkey以及所述动态列名，将所述原始日志数据写入Hbase数据库的对应位置。

第四方面，提供了一种日志数据的存储装置，包括：

采集单元，用于采集原始日志数据；

确定单元，用于确定与所述采集单元采集的所述原始日志数据对应的用于构造行键rowkey的关键信息以及动态列名；

处理单元，用于根据所述确定单元确定的所述关键信息以及所述动态列名，对所述原始日志数据进行格式化处理；