[发明专利]一种实现大数据冲击的自动化测试的方法和系统

说明书

技术领域

本发明涉及一种大数据冲击的自动化测试的方法和系统。

背景技术

当前的TMN(电信管理网)中往往存在的故障不是基本功能故障，而是能否承收大数据的冲击，能否在这种冲击下可以正常的工作和正确处理相关的异常是网管软件的一个重要的性能指标，但是由于实验室的设备和资源的限制，往往造成测试过程的瓶颈，特别是告警风暴的测试，更是比较困难，从目前的实验室测试过程来看，对于大数据冲击的测试往往局限在简单的批量数据发送，然后对比发送的数据条数或随机选择几个记录进行比较，对于前台模拟程序(或者真实前台)发送的数据到后台接收到的数据是否正确的比较，很难一一对比。另外其中有太多的人工干预过程，比如上报数据的设置，后台数据查询等等。

以当前CDMA的告警测试为例，目前一个基站控制器(BSC)满配置时，同时要处理上千个节点的告警数据上报，在网运行的BSC、数以百计的BTS上所有的上万块单板(数十万个硬件单元)、数百种软件模块，甚至设备周边环境都是故障管理的监测对象。因此对于告警模块的测试，更重要的是能够确保告警模块是否能够及时、安全的处理这些大数据流的冲击，而在实验室由于设备和现场资源缺乏的原因，不能真实模拟这样的大数据量的环境，往往采用的办法就是通过模拟程序来模拟各种海量告警数据并同时发送到后台服务器，然后通过手工点击后台界面观察告警数据。这种方式的缺点有两个，第一，测试过程断链，由于每一次发送告警都需要手工查询，然后再进行下一次的告警数据发送，不能保证发送数据的连续性，因此不能真实的模拟告警风暴；第二，测试的结果存在假象，由于是人工查询接收到的告警数据，由于每一批数据都可能是成千上万条记录，因此测试人员不可能逐条进行匹配比较，往往都是查询一下接收到的记录条数和发送的条数是否一致的方式来判断，这种测试难以保证接收到的告警数据的正确性。

发明内容

本发明要解决的技术问题是提出一种在大数据冲击下可以保证测试过程的连续性，以及保证测试结果正确性的自动化测试的方法和系统。

为了解决上述技术问题，本发明提供了一种实现大数据冲击的自动化测试的方法，所述方法包括以下步骤：

步骤101，产生模拟测试数据并将其返回给控制装置以及将数据上报到被测系统；

步骤102，判断是否需要再次构造下一批模拟测试数据，如果需要构造下一批模拟测试数据，则执行步骤101，否则执行步骤103；

步骤103，控制装置根据发送的模拟测试数据和其它信息构造一个指令并发送给客户端测试工具，所述信息包括客户端测试工具需要执行的脚本id，需要进行匹配的测试数据类型，以及最大延时时间和网元信息；

步骤104，客户端测试工具根据指令装载对应的脚本；

步骤105，在执行过程中如果发生异常则进入步骤109，否则执行步骤106；

步骤106，客户端测试工具把从被测系统获取到的数据和从控制装置发送来的数据传递给匹配过程；

步骤107，如果在控制装置发送来的数据中没有找到与从被测系统获取的数据对应的数据则继续匹配，直到找到对应的数据或超时；

步骤108，如果匹配超时则进入步骤109，如果没有异常或异常处理完成，则继续执行步骤110；

步骤109，对测试过程中出现异常或匹配失败进行异常处理；

步骤110，判定被测系统的客户端执行是否结束以及执行结果是否正确，如果已经完成则返回一次侦听结束，所有侦听结束且不再发送数据则进入到结果汇总处理单元；

步骤111，结果汇总形成一个汇总报告，完成后结束本次的上报数据冲击测试过程。

进一步，上述方法还可以具有以下特点：所述步骤101中，将模拟测试数据返回给控制装置的同时，发送一个数据清单。

进一步，上述方法还可以具有以下特点：所述数据清单用于模拟告警数据，包括内容有构造的告警数据、告警级别、所在网元位置以及发送时间。

进一步，上述方法还可以具有以下特点：所述步骤102中，采用异步并行执行方式。

进一步，上述方法还可以具有以下特点：所述步骤103中，所述指令指明客户端测试工具需要执行的脚本id，需要进行匹配的测试数据类型，以及最大延时时间和网元信息。