[发明专利]日志处理方法、日志网关和日志处理系统

说明书

本说明书实施例公开了日志处理方法、日志网关和集群、日志处理系统、电子商务信息的处理方法、电子商务平台、终端设备、以及计算机可读存储介质。所述方法包括：接收配置服务平台通过第一消息中间件推送的配置更新信息；接收应用客户端按照本地存储的日志上报配置信息发送的日志请求，所述日志请求用于上报日志数据；向应用客户端发送对所述日志请求的响应信息，所述响应信息中包含所述配置更新信息，以供所述应用客户端根据所述配置更新信息更新所述日志上报配置信息。本发明的日志处理方案，适用于大流量高并发的日志请求。

技术领域

本说明书涉及网络技术，更具体地，涉及日志处理方法、日志网关、日志网关集群、日志处理系统、电子商务信息的处理方法、电子商务平台、终端设备、以及计算机可读存储介质。

背景技术

在大数据项目中，经常需求处理大流量高并发的数据请求。面向日志服务的大数据项目就更是如此。

日志服务的过程是：应用客户端将运行过程中产生的日志(例如异常、崩溃日志等)上报给日志处理系统，日志处理系统对日志进行分析得到日志分析结果，日志分析结果可被用于多种用途，例如用于查找应用客户端的崩溃原因、评估服务器端的负载、健康状况，分析用户的行为等等。

在这一过程中，应用客户端向日志处理系统上报日志的过程，也就是应用客户端向日志处理系统提交日志请求的过程，具有大流量高并发的特点。首先，日志报文本身的数据量比较大，远大于一般的Web请求的数据量。并且，日志请求具有更高的并发性，例如，日志处理系统可能面对多种应用，对多种应用提供日志分析服务，一种应用又可能被安装在上亿台终端设备中，导致日志处理系统需要同时并行处理海量的日志请求。日志处理系统需要处理的日常日流量可以达到TB(Trillionbyte，万亿字节)甚至PB(Petabyte，千万亿字节)级别。

此外，在一些特定的商业场景下，例如春节期间的车票查询场景下，电子商品平台也会面临大流量高并发的数据请求。

因此，有必要提供对于大流量高并发数据请求的处理方案，能够很好地应对大流量高并发的数据请求。

发明内容

本说明书实施例提供数据请求处理方案，适用于大流量高并发的数据请求场景。

根据本发明实施例的第一方面，提供了一种日志处理方法，所述方法包括：

接收配置服务平台通过第一消息中间件推送的配置更新信息；

接收应用客户端按照本地存储的日志上报配置信息发送的日志请求，所述日志请求用于上报日志数据；

向应用客户端发送对所述日志请求的响应信息，所述响应信息中包含所述配置更新信息，以供所述应用客户端根据所述配置更新信息更新所述日志上报配置信息。

本发明实施例的第一方面提供的日志处理方法，可以由日志网关实施。

根据本发明实施例的第二方面，提供了一种日志处理方法，所述方法包括：

按照本地存储的日志上报配置信息向日志网关发送日志请求，所述日志请求用于上报日志数据；

接收日志网关返回的响应信息，所述响应信息中包含配置更新信息；

根据所述配置变更信息更新所述日志上报配置信息。

本发明实施例的第二方面提供的日志处理方法，可以由应用客户端实施。

根据本发明实施例的第三方面，提供了一种日志处理方法，包括以下步骤：

日志网关接收配置服务平台通过第一消息中间件推送的配置更新信息；

应用客户端按照本地存储的日志上报配置信息向日志网关发送日志请求，所述日志请求用于上报日志数据；