[发明专利]数据开发任务测试方法、装置、计算机设备和存储介质

说明书

本申请涉及一种数据开发任务测试方法、装置、计算机设备和存储介质。所述方法包括：生成任务发布包；所述任务发布包包含有开发数据；将所述任务发布包部署至测试环境，以及，确定与所述开发数据对应的测试资源；所述测试资源包括：存储资源和计算资源；调用所述测试资源，对所述开发数据进行测试；当测试成功时，将所述任务发布包部署至生产环境，完成上线操作。采用本方法能够实现对数据开发任务的自动化测试，降低对运维人员的要求，若出现运行故障，便于进行回滚操作，查找原因。

技术领域

本申请涉及测试技术领域，特别是涉及一种数据开发任务测试方法、装置、计算机设备和存储介质。

背景技术

随着大数据时代的到来，信息技术不断更新，电力企业建立的信息化系统数据日积月累，对数据开发、数据应用、数据运维及探索带来了挑战。目前为满足不同业务部门的数据开发、数据应用、数据运维需求，首先针对各业务系统中使用的数据技术，选择此产品官方推荐的数据开发脚本执行和部署的方法。比如greenplum是使用pgadmin导出greenplum的函数和表的执行脚本，再人为部署到测试和生成环境；hive是人为维护hive的建表语句和脚本，再部署的时候，更改环境变量，将建表语句和脚本提交到测试环境和生成环境执行部署。

然而，线下人为操作去部署测试的方法对运维人员的要求很高，并且如果部署步骤出现了差错，还可能导致数据丢失，数据质量达不到要求等问题的出现，对生产应用的稳定性造成严重的影响。

因此，当前的开发任务测试方法存在效率较低、数据质量得不到保证的问题。

发明内容

基于此，有必要针对上述测试方法存在效率较低、数据质量得不到保证的技术问题，提供一种数据开发任务测试方法、装置、计算机设备和存储介质。

一种数据开发任务测试方法，所述方法包括：

生成任务发布包；所述任务发布包包含有开发数据；

将所述任务发布包部署至测试环境，以及，确定与所述开发数据对应的测试资源；所述测试资源包括：存储资源和计算资源；

调用所述测试资源，对所述开发数据进行测试；

当测试成功时，将所述任务发布包部署至生产环境，完成上线操作。

在其中一个实施例中，所述生成任务发布包之前，还包括：

接收数据开发任务的打包请求；

响应于所述打包请求，获取所述数据开发任务的开发数据；所述开发数据包括建表脚本和开发脚本；

将所述开发数据转换成标准发布文件，并打包生成所述任务发布包。

在其中一个实施例中，所述确定与所述开发数据对应的测试资源，包括：

从所述开发数据中获取测试资源地址；

根据所述测试资源地址从测试环境数据库中获取对应的所述测试资源。

在其中一个实施例中，所述将所述任务发布包部署至测试环境之后，还包括：

对所述任务发布包进行解压，得到解压后开发数据；

将所述解压后开发数据进行封装，生成测试用例；

执行所述测试用例，生成测试报告；所述测试报告包括所述测试用例的执行结果。

在其中一个实施例中，所述将所述任务发布包部署至生产环境，包括：

接收任务上线指令；

响应于所述任务上线指令，调用生产环境部署服务，执行任务发布脚本，完成所述数据开发任务的上线操作。

一种数据开发任务测试装置，所述装置包括：