[发明专利]确定与特定业务相关的关联日志的方法和装置

说明书

技术领域

本申请涉及数据处理领域，更具体地涉及一种确定与特定业务相关的关联日志的方法和装置。

背景技术

在互联网应用中，每天都产生海量的数据，其中包括产生的海量日志，单个业务的日志分散在各台服务器上，每台服务器上不同业务的日志都混在一起而位于同一个日志文件里。在这种对于日志文件没有办法按照业务而将日志分离出来的情况下，无法快速有效地对业务出错原因进行排查。并且也无法将特定业务相关的日志进行历史记录的比对。例如，系统A的维护者，在集成测试过程中，发现调用系统B抛出未知异常，只能去寻求系统B的维护者的帮助。随后系统B发现异常是由系统C传递而来的，便又需要再去找系统C的维护者；最终发现异常是由系统D引起。于是线程上所有相关人员都被涉及，沟通成本巨大。现有方法由于采用人工的方式查找业务出错原因，效率很低，实施难度很大，往往一般的开发测试人员不具备这种能力。同时，即使熟悉的调查问题人员，要整理出业务执行路径的历史变化，也是非常困难的。

因此，需要一种数据处理的方法，通过该方法，可以从海量日志数据中确定与特定业务相关的关联日志，也即是说，从海量日志数据中将与特定业务相关的关联日志分离出来，从而能够快递有效地对业务出错原因进行排查，而且可以对比历史记录，查看业务路径的变化情况等等。

发明内容

因此，本申请的目的在于提供一种确定与特定业务相关的关联日志的方法和装置，以克服上述缺陷。根据本申请一个方面的实施例，提供一种确定与特定业务相关的关联日志的方法和装置。

根据本申请一个方面的实施例，提供一种确定与特定业务相关的关联日志的方法。该方法可以包括如下步骤：在特定业务被执行期间产生与该特定业务相关的一个或多个链路，其中，所述特定业务具有一个或多个业务关键属性；在针对与特定业务相关的每一个链路中，在被调用的一个或多个系统中相应地生成一个或多个日志，其中，与相同链路相关的日志具有相同的标识，并且在每个链路中，至少一个日志包含所述一个或多个业务关键属性中的至少一个业务关键属性；以及基于所述标识并且基于每个链路中的至少一个日志所包含的业务关键属性，通过预定算法确定与所述特定业务相关的所有链路的关联日志。

根据本申请的实施例，在该方法中所述预定算法可以是贪婪算法。

根据本申请的实施例，在该方法中，在被调用的一个或多个系统中生成一个或多个日志的步骤进一步可以包括：针对每一个链路，在发起首次调用的系统中生成所述与链路相关的所述标识。

根据本申请的实施例，在该方法中，在被调用的一个或多个系统中生成一个或多个日志的步骤可以进一步包括：针对每一个链路，将在该链路的发起首次调用的系统中所生成的所述标识向下一个被调用的系统传送。

根据本申请的实施例，在该方法中，产生与该特定业务相关的一个或多个链路可以进一步包括：同步地或异步地产生与该特定业务相关的一个或多个链路。

根据本申请的实施例，该方法可以进一步包括：对与所述特定业务相关的所有链路的关联日志进行进一步处理。

根据本申请的另一个方面的实施例，提供一种确定与特定业务相关的关联日志的装置。该装置可以包括：一个或多个链路产生模块，用于在特定业务被执行期间产生与该特定业务相关的一个或多个链路，其中，所述特定业务具有一个或多个业务关键属性；一个或多个日志生成模块，用于在针对与特定业务相关的每一个链路中，在被调用的一个或多个系统中相应地生成一个或多个日志，其中，与相同链路相关的日志具有相同的标识，并且在每个链路中，至少一个日志包含所述一个或多个业务关键属性中的至少一个业务关键属性；以及关联日志确定模块，用于基于所述标识并且基于每个链路中的至少一个日志所包含的业务关键属性，通过预定算法确定与所述特定业务相关的所有链路的关联日志。

根据本申请的实施例，该装置可以进一步包括：标识生成模块，用于在每个链路首次调用的系统中生成日志的时候生成所述与链路相关的所述标识。

根据本申请的实施例，该装置可以进一步包括：执行模块，用于对与所述特定业务相关的所有链路的关联日志进行进一步处理。

与现有技术相比，根据本申请的技术方案，通过与特定业务相关的链路上的日志所带的链路标识以及特定业务的业务关键属性，从而确定与特定业务相关的关联日志，进而优化了海量日志的数据处理并从而能够实现与业务相关的关联日志的管理和利用。

附图说明