[发明专利]在电信领域中测试日志的自动评估

说明书

本发明涉及在电信领域中测试日志的自动评估。根据本发明的方法的一方面，提供了概率模型(166)，该概率模型将测试日志中的事件(506，A0‑A3)与可能的原因(504，H0‑H3)关联。基于概率模型(166)和搜索结果，计算原因(504)的概率值。基于所计算的概率值，输出可能的原因的参照值。

技术领域

本发明涉及用于测试电信设备的测试日志的自动评估的方法、相应的计算机程序产品和计算机系统。

背景技术

在技术通信系统中，用于实施人和/或机器之间的数据通信和/或语音通信的信令信息在参与的设备之间被交换。因此，例如，在移动无线电部门中，信令消息通过用户设备(UE，“user equipment”，例如，智能手机)和网络节点(例如，基站)之间的空中接口被交换。

在提供新设备、新软件版本和新特征等之前，必须测试通过相关接口的无误消息交换。因此，必须实施功能测试、以及系统测试，该系统测试包括负载和应力测试、回归测试等。通常，这些测试以自动的方式实施，例如，专用测试设备(TE，“Test Equipment”)可以以批处理模式与被测装置(DUT，“Device under Test”)交换消息。自动测试可以运行较短的时间段，例如，数分钟，或者会需要以约一小时、数小时或甚至数天设置的相当长的时间。

在测试期间，通过一个或多个接口的消息交换被记录(通常通过TE)且被存储在测试日志或测试协议中。在完成测试之后，测试日志可以以文件(例如，文本文件)的形式存在。通常，该日志包含事件的时间次序，即，该日志包括时间戳的列表，其中，消息被分配到各个时间戳。消息的数据可以包括所选择的细节，例如，给定的消息内容，例如，参数的存在和/或参数的值、较低的消息-日志层的嵌入消息等。

通常，在测试日志中列举事件，且仅这些事件可用于问题的识别和它们的原因的确定。

在测试实验室现场可以实施测试日志的评估。然而，因为其复杂性，评估通常在稍后的时间实施，因此在测试实验室的外部实施。一方面，该评估包括错误情形的识别，其包括识别错误情形存在于第一位置中，以及，另一方面，该评估包括对于已知错误情形的原因的搜索。在简单的情况下，错误的存在和其原因可以基于消息或消息次序清楚地推断。例如，在DUT中的软件错误可以影响消息的给定参数值；如果从日志中这是明显的，则可以识别用于DUT或者部件的重启的原因。

然而，通常，错误情形或者事件在原则上可以归因于不同的原因。在这样的情况下，难以以具体术语推断关于错误实际存在的原因，且这会需要日志的更宽泛的评估。

UE(例如，智能手机)的测试可以作为一个示例，其中，UE例如在RLL(“无线电链路层”)上已经成功地与移动无线电网络同步。从测试日志明显看出，UE突然尝试与网络再次同步；例如，UE突然启动新的随机访问过程。该消息的出现实际上总是表明此处明显存在问题，然而，对于该行为的一系列不同的原因是可以想到的，例如，错误可以存在于UE中，但是还可以涉及UE对测试条件的反应，例如，在无线电网络中模拟的功率损耗，例如，作为网络中的错误或UE在网络内的移动例如以实现切换等的结果。在这种情况下，不容易确定是否存在错误情形，以及，如果存在错误情形，则不容易确定该错误可以归因的具体原因。

如示例中的含糊(错误)的情形表示来自例如在电信部门中的自动测试的日志的评估中的基本问题。

日志的搜索和评估可以通过测试员来实施。然而，由于现代通信系统的复杂性和对应的信令量，即使仅数分钟的测试持续时间，测试日志也可包含非常多的数据，使得测试人员的分析是非常耗时的。此外，由于数据量，不能确定：如期望的所有的错误情形已经被识别。错误情形还可能已经被不正确地评估，这是因为仅识别错误的间接影响或者后续影响而不是识别潜在的错误。