[发明专利]一种面向云平台的安全监控数据采集与存储方法

权利要求书

1.一种面向云平台的安全监控数据采集与存储方法，其特征在于，所述面向云平台的安全监控数据采集与存储方法包括：

初始化消息队列步骤，依次初始化remote和local消息队列；

载入采集插件步骤，获取采集插件的相关信息；

采集数据步骤，数据采集后端根据已加载的插件信息运行采集插件，获取云平台基础数据；

发送数据步骤，数据采集后端将采集到的数据通过消息队列发送给传输代理；

上述步骤为数据采集步骤，下列步骤为数据存储步骤：

启动传输代理broker，预读TagModel:{Name,Tags}和MetricModel:{Name,Tags,Timestamp,Value}所有文档的时间戳，并将其缓存在内存中；

在缓存中查询TagModel，取得监控指标的Tags；

若缓存命中，则向缓存和数据库中同时插入一条记录；

若缓存未命中，则以Tags和时间戳作为查询条件，在CurrentModel:{Name,Tags,Timestamp,Value}中查询；

若查询到存在相应文档，则更新数据库中相应文档的Value值；

若未查询到存在相应文档，则需要生成一条新的文档，存入数据库。

2.根据权利要求1所述的面向云平台的安全监控数据采集与存储方法，其特征在于，在进行数据存储时，使用统一数据表达方式。

3.根据权利要求2所述的面向云平台的安全监控数据采集与存储方法，其特征在于，所述统一数据表达方式为使用四元组：Name、Tags、Value以及TimeStamp来描述一条监控数据。

4.根据权利要求3所述的面向云平台的安全监控数据采集与存储方法，其特征在于，在进行数据存储时，进行数据去重处理。

5.根据权利要求4所述的面向云平台的安全监控数据采集与存储方法，其特征在于，在进行数据去重处理时，包括如下两个步骤：

基础数据标签分离；

数据压缩。

6.根据权利要求5所述的面向云平台的安全监控数据采集与存储方法，其特征在于，所述基础数据标签分离的步骤包括：将冗余信息集中的Name和Tags字段独立出来作为TagModel，其它模型以TagModel为外键，以实现标签分离机制。

7.根据权利要求5所述的面向云平台的安全监控数据采集与存储方法，其特征在于，所述数据压缩步骤包括：将预定时间内的数据压缩存储到一条文档内以降低时序性所带来的监控指标数据冗余，同时，在MetricModel中增加cur_v和cur_t字段分别表示当前小时内的最新数据和最新时间戳。

8.根据权利要求4所述的面向云平台的安全监控数据采集与存储方法，其特征在于，在进行数据存储时，为需要经常查询的TagModel增加缓存，并为MetricModel缓存当前文档是否存在的状态。