[发明专利]链路聚合调用信息的处理方法及装置

说明书

本发明提供了链路聚合调用信息的处理方法及装置，方法包括：获取调用信息的键值和明细信息；将调用信息的键值缓存至caffeine缓存；将调用信息的键值和明细信息缓存至redis缓存；基于时间策略确定从caffeine缓存中驱逐的键值；根据确定的驱逐的键值从所述redis缓存中获取该键值对应的明细信息进行调用信息的链路聚合处理。本发明利用caffeine缓存、redis缓存提供基于多级缓存的分布式链路聚合的实现方式，从海量无序调用信息中获取单笔交易的相对完整调用信息，还可根据内存容量调整过期时间。无需对单台高配置服务器便可对海量调用日志进行并行分析，降低了链路聚合的成本和难度。

技术领域

本发明涉及数据处理技术，具体的讲是一种链路聚合调用信息的处理方法及装置。

背景技术

微服务时代，业务场景按照领域模型进行了拆分，往往一个完整的业务流程需要经过多个服务间消息通信才最终闭环。

大规模分布式集群虽然承载了更大规模的并发量，但是调用链路更加错综复杂。特别是大中台的建设，服务的复用与组合构成了各式各样的业务交易。单笔交易可能流经多台服务器的多个服务，服务调用信息上报到消息中间件的时间可能不同，消息中间件的分区规则更会导致调用信息乱序。拥有完整的调用信息才可以进行链路的拓扑聚合，需要对调用信息进行处理以便更好的进行链路聚合处理。

发明内容

为了在海量无序的调用日志下，收集单笔交易过去一段时间的调用信息，提高后续链路聚合拓扑聚合的成功率，本发明实施例提供了一种链路聚合调用信息的处理方法，包括：

获取调用信息的键值和明细信息；

将所述调用信息的键值缓存至caffeine缓存；

将所述调用信息的键值和明细信息缓存至redis缓存；

基于时间策略确定从caffeine缓存中驱逐的键值；

根据确定的驱逐的键值从所述redis缓存中获取该键值对应的明细信息进行调用信息的链路聚合处理。

本发明实施例中，所述的调用信息的键值包括：调用信息的交易特征值；

所述的明细信息包括：调用的节点信息、耗时信息及结果信息。

本发明实施例中，所述的获取调用信息的键值和明细信息包括：

确定调用信息的交易特征值的哈希值；

将相同哈希值的调用信息存储至同一路由节点；

从同一路由节点中获取调用信息的键值和明细信息。

本发明实施例中，所述的从同一路由节点中获取调用信息的键值和明细信息包括：

利用kafka消息传递系统从节点获取调用信息的键值和明细信息。

本发明实施例中，所述的基于时间策略确定从caffeine缓存中驱逐的键值包括：

获取caffeine缓存中的调用信息的键值中的时间戳；

根据所述时间戳确定存储时长；

确定所述存储时长不小于预设时长则将调用信息的键值从caffeine缓存中驱逐。

同时，本发明还提供一种链路聚合调用信息的处理装置，包括：

获取模块，用于获取调用信息的键值和明细信息；

caffeine缓存模块，用于将所述调用信息的键值缓存至caffeine缓存；

redis缓存模块，用于将所述调用信息的键值和明细信息缓存至redis缓存；