[发明专利]一种可视化的ElasticSearch数据采集方法及装置

权利要求书

1.一种可视化的ElasticSearch数据采集方法，应用于与节点服务器通信连接的用户终端，其特征在于，所述方法包括：

创建可视化组件，所述可视化组件包括输入插件、输出插件和调度插件；

通过将所述输入插件、输出插件和调度插件关联，创建任务；

分别对所述输入插件、输出插件和调度插件进行参数配置，得到输入插件配置文件、输出插件配置文件和调度插件配置文件；

配置所述任务的运行节点和任务策略；

加载所述任务策略，获取目标运行节点的节点信息；

依据所述目标运行节点的节点信息将所述任务发送给目标运行节点以便目标运行节点获取并解析所述输入插件配置文件、输出插件配置文件和调度插件配置文件，执行数据采集。

2.根据权利要求1所述的一种可视化的ElasticSearch数据采集方法，其特征在于，所述输入插件配置文件包括数据源信息及查询脚本，所述数据源信息包括数据源数据库的IP及端口信息。

3.根据权利要求2所述的一种可视化的ElasticSearch数据采集方法，其特征在于，所述输出插件配置文件包括数据目标信息，所述数据目标为ElasticSearch服务器，所述数据目标信息包括Elasticsearch服务器的IP、端口、索引名称及类型名称。

4.根据权利要求1所述的一种可视化的ElasticSearch数据采集方法，其特征在于，所述调度插件配置文件包括调度类型、调度时间及关联输入输出。

5.根据权利要求1所述的一种可视化的ElasticSearch数据采集方法，其特征在于，配置所述任务的运行节点包括配置运行节点服务器的名称、IP、端口信息。

6.根据权利要求1所述的一种可视化的ElasticSearch数据采集方法，其特征在于，配置所述任务的任务策略包括配置执行方式、目标运行节点服务器、任务日志级别和调度任务，所述调度任务为将所述任务关联至所述目标运行节点服务器。

7.根据权利要求1所述的一种可视化的ElasticSearch数据采集方法，其特征在于，所述输入插件配置文件和输出插件配置文件均保存为ktr文件，所述调度插件配置文件为kjb文件。

8.根据权利要求3所述的一种可视化的ElasticSearch数据采集方法，其特征在于，所述目标运行节点执行数据采集的具体步骤为：所述目标运行节点解析所述调度插件配置文件，获取所述任务的调度类型、调度时间及关联输入输出信息，目标运行节点根据获取的关联输入输出信息，获取所述输入插件配置文件和输出插件配置文件，通过解析输入插件配置文件和输出插件配置文件获取所述数据源信息和所述数据目标信息，并根据数据源信息和数据目标信息，按照调度类型和调度时间执行数据的采集。

9.一种可视化的ElasticSearch数据采集装置，应用如权利要求1-8任意一项所述的一种可视化的ElasticSearch数据采集方法，其特征在于，所述装置包括：设计器和管理器，所述设计器用于通过可视化组件创建任务，所述管理器用于配置运行节点及分配所述任务的目标运行节点，并将任务发送至所述目标运行节点执行。