[发明专利]一种可配置化定时采集数据、调度数据、加密传输、可视化的方法

权利要求书

1.一种可配置化定时采集数据、调度数据、加密传输、可视化的方法，其特征在于，应用于多种类型异构型数据源和异构型目标源数据的传输、采集，针对采集数据进行清洗、解析、建模、分析从而生成调度任务，对资源进行调配优化，包括：

核心数据采集引擎采集数据，清洗数据，将数据落入目标数据源；

可视化指挥中心读取经过核心数据采集引擎沉淀的数据源，根据数据进行智能建模、智能分析，生成智能报表；

核心调度引擎同样也会读取经过核心数据采集引擎沉淀的数据源，规则引擎，对已经配置的规则进行解析，生成调度任务，最后再下发给每一个采集端/用户端，此过程通过MySql进行二次数据沉淀、Redis实现热点数据高性能缓存、InfluxDB进行时序数据存储。

2.根据权利要求1所述的可配置化定时采集数据、调度数据、加密传输、可视化的方法，其特征在于，对当前多异质设备进行数据采集，包括：

针对多异质设备数据进行采集，基于不同的系统，甚至不同的编程语言，采用统一的方式采集上报数据；插件式采集实现；

采集后，核心采集引擎会根据清洗规则对采集数据进行入库；

且上报频率、上报内容、清洗规则可配置化，一切基于配置文件驱动；为复杂的业务场景与需求提供了拓展性与灵活性。

3.根据权利要求2所述的可配置化定时采集数据、调度数据、加密传输、可视化的方法，其特征在于，多内容、多规则可配置化，包括：

通过统一的配置中心，对维护多种类、多方式的配置文件，而且统一由配置中心进行加密，

应用端统一访问配置中心，从配置中心拉取并解密配置。

4.根据权利要求1所述的可配置化定时采集数据、调度数据、加密传输、可视化的方法，其特征在于，可视化指挥中心对目标数据源的处理与展示，包括：

针对目标数据源进行智能建模、数据分析；数据分析的结果进行定时沉淀，生成智能报表，从而对调度决策者进行反馈。

5.根据权利要求4所述的可配置化定时采集数据、调度数据、加密传输、可视化的方法，其特征在于，可视化指挥中心中的数据模型提供智能建模、数据规则且都为统一配置，配置的方式为从配置中心拉取。

6.根据权利要求1所述的可配置化定时采集数据、调度数据、加密传输、可视化的方法，其特征在于，核心调度引擎对清洗数据的解析并生成调度任务，包括：

根据规则引擎所配置的规则执行对应解析任务，对解析完成的数据进行再次沉淀，一部分落入MySql关系型数据库，一部分落入时序数据库InfluxDB；

再根据规则引擎中所配置的调度规则，针对调度引擎沉淀的实时数据，生成调度任务；

调度任务执行完毕后，会将调度任务通过加密请求，重新下发/返回给采集端/用户端。

7.根据权利要求6所述的可配置化定时采集数据、调度数据、加密传输、可视化的方法，其特征在于，规则引擎提供了强大的规则配置与任务生成，包括：

通过规则引擎所定义的规则模板配置规则；

通过规则引擎所定义的任务模板定义任务；

通过规则引擎关联规则与任务；

解析规则、生成任务。