[发明专利]业务日志数据的采集方法、装置、设备及可读存储介质

说明书

本发明公开了一种业务日志数据的采集方法，应用于采集系统，该方法包括以下步骤：对接收到的日志数据采集请求进行解析，得到待日志数据采集的目标客户端；按照通用化模板对目标客户端进行网络对接，得到对接完成后的目标通信链路；利用目标通信链路对目标客户端进行日志数据采集，得到原始业务日志数据；利用通用化模板对原始业务日志数据进行数据格式转换，得到预置统一数据格式的目标业务日志数据。应用本发明所提供的业务日志数据的采集方法，实现了对客户端的有效对接，提高了业务日志数据采集的通用性，降低了系统维护难度。本发明还公开了一种业务日志数据的采集装置、设备及存储介质，具有相应技术效果。

技术领域

本发明涉及网络安全技术领域，特别是涉及一种业务日志数据的采集方法、装置、设备及计算机可读存储介质。

背景技术

互联网的使用越来越普遍，互联网不仅成为企业内部的沟通桥梁，也是企业客户端和外部进行各类业务往来的重要管道。为保证客户端数据的安全性，需要对客户端进行监控。

现有技术中对客户端的监控方式主要为两种，一种是通过代理(agent)监控方式，通过在客户端主机上植入代理客户端，监控系统的进程等服务信息。另一种是通过系统日志(syslog)外发系统，将客户端日志外发到一个统一平台，进行集中管理。

但是，上述两种客户端监控方式均存在各自的缺点，首先，代理技术并不能满足安全产品业务数据的监测需求，只能监测一些系统程序的基本状态、流量等外部数据，无法深入到业务层采集客户端的业务日志数据。其次，系统日志外发系统只是日志外发，还需要专门的系统进行统一管理，而且各个业务之间日志格式报文均不一致，需要专门做对接适配，工作量大繁琐，不利于系统整体维护。

综上所述，如何有效地解决现有的客户端监控方式无法深入到业务层采集客户端的业务日志数据，工作量大且繁琐，不利于系统整体维护等问题，是目前本领域技术人员急需解决的问题。

发明内容

本发明的目的是提供一种业务日志数据的采集方法，该方法实现了对客户端的有效对接，提高了业务日志数据采集的通用性，降低了系统维护难度；本发明的另一目的是提供一种业务日志数据的采集装置、设备及计算机可读存储介质。

为解决上述技术问题，本发明提供如下技术方案：

一种业务日志数据的采集方法，应用于采集系统，包括：

对接收到的日志数据采集请求进行解析，得到待日志数据采集的目标客户端；

按照通用化模板对所述目标客户端进行网络对接，得到对接完成后的目标通信链路；

利用所述目标通信链路对所述目标客户端进行日志数据采集，得到原始业务日志数据；

利用所述通用化模板对所述原始业务日志数据进行数据格式转换，得到预置统一数据格式的目标业务日志数据。

在本发明的一种具体实施方式中，按照通用化模板对所述目标客户端进行网络对接，包括：

采集所述目标客户端的组件配置信息和数据流结构；

按照所述通用化模板基于所述组件配置信息和所述数据流结构对所述目标客户端进行网络对接。

在本发明的一种具体实施方式中，按照所述通用化模板基于所述组件配置信息和所述数据流结构对所述目标客户端进行网络对接，包括：

利用预置于所述目标客户端的嵌入式中间服务，按照所述通用化模板基于所述组件配置信息和所述数据流结构对所述目标客户端进行网络对接。

在本发明的一种具体实施方式中，按照所述通用化模板基于所述组件配置信息和所述数据流结构对所述目标客户端进行网络对接，包括：

利用第三方中间件服务，按照所述通用化模板基于所述组件配置信息和所述数据流结构对所述目标客户端进行网络对接。