[发明专利]用于数据流系统的压力测试方法和装置在审
申请号: | 201710425004.8 | 申请日: | 2017-06-06 |
公开(公告)号: | CN109002385A | 公开(公告)日: | 2018-12-14 |
发明(设计)人: | 雷强;刘业辉;王彦明 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100080 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 压力测试 数据流 数据流系统 方法和装置 延迟 数据流处理 解析 指令 响应 申请 | ||
本申请公开了用于数据流系统的压力测试方法和装置。该方法的一具体实施方式包括:响应于接收到压力测试指令,对待处理数据流进行解析,生成压力测试数据流;将该待处理数据流和该压力测试数据流从作为入口的数据流处理节点输入至数据流系统;周期性地确定该数据流系统处理所输入的数据流中的数据的延迟时间,并基于所确定的延迟时间,确定压力测试是否通过。该实施方式提高了压力测试的灵活性。
技术领域
本申请涉及计算机技术领域,具体涉及互联网技术领域,尤其涉及用于数据流系统的压力测试方法和装置。
背景技术
压力测试(Stress Test),是指通过模拟实际应用的软硬件环境及用户使用过程的系统负荷,长时间或超大负荷地运行测试软件,来测试被测系统的性能、可靠性、稳定性等。
随着互联网技术的发展,利用流式计算方式对数据进行处理越来越普遍。通常,在流式计算任务上线前,需要对其进行压力测试。然而,现有的方式需要使系统停止处理数据,待数据积压到一定程度后,再使系统处理数据,以实现压力测试。这种方式无法对线上任务进行压力测试,因而存在着灵活性较低的问题。
发明内容
本申请实施例的目的在于提出一种改进的用于数据流系统的压力测试方法和装置,来解决以上背景技术部分提到的技术问题。
第一方面,本申请实施例提供了一种用于数据流系统的压力测试方法,数据流系统包括用于对数据流进行处理的数据流处理节点集合,数据流从数据流处理节点集合中的、作为入口的数据流处理节点流入并在流经数据流处理节点集合中的至少一个数据流处理节点之后流出数据流系统,该方法包括:响应于接收到压力测试指令,对待处理数据流进行解析,生成压力测试数据流;将待处理数据流和压力测试数据流从作为入口的数据流处理节点输入至数据流系统;周期性地确定数据流系统处理所输入的数据流中的数据的延迟时间,并基于所确定的延迟时间,确定压力测试是否通过。
在一些实施例中,响应于接收到压力测试指令,对待处理数据流进行解析,生成压力测试数据流,包括:响应于接收到压力测试指令,提取与待处理数据流中的每一个待处理数据相匹配的属性信息,其中,属性信息包括日期、客户端标识和用户标识;基于所提取的属性信息,生成压力测试数据流。
在一些实施例中,基于所提取的属性信息,生成压力测试数据流,包括:对于待处理数据流中的每一个待处理数据,对所提取的与该待处理数据相匹配的属性信息进行多次更改,以生成数量为第一预设数量的压力测试数据,并将所生成的压力测试数据汇总为压力测试数据流。
在一些实施例中,基于所提取的属性信息,生成压力测试数据流,包括:确定待处理数据流中的、预设时长内的待处理数据的数量,将所确定的数量作为第一数量,确定第二预设数量与第一数量的差值;将差值与第一数量的比值确定为第二数量,对于待处理数据流中的每一个待处理数据,对所提取的与该待处理数据相匹配的属性信息进行多次更改,以生成数量为第二数量的压力测试数据,并将所生成的压力测试数据汇总为压力测试数据流。
在一些实施例中,作为入口的数据流处理节点包括作为入口的第一数据流处理节点和第二数据流处理节点;以及将待处理数据流和压力测试数据流从作为入口的数据流处理节点输入至数据流系统,包括:将待处理数据流从第一数据流处理节点输入至数据流系统,并将压力测试数据流从第二数据流处理节点输入至数据流系统。
在一些实施例中,基于所确定的延迟时间,确定压力测试是否通过,包括:响应于确定延迟时间小于预设延迟时间阈值,确定压力测试通过;响应于确定延迟时间不小于预设延迟时间阈值,确定压力测试未通过。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710425004.8/2.html,转载请声明来源钻瓜专利网。