[发明专利]数据处理方法、装置及计算机可读存储介质

说明书

本申请公开了一种数据处理方法、装置及计算机可读存储介质。该数据处理方法包括获取业务数据流，并获取用于处理业务数据流的Flink SQL任务；获取Flink SQL任务中的业务配置参数，并将业务配置参数写入至数据库中；将数据库与业务数据流进行维表关联，生成处理数据。本申请可在应用Flink SQL处理数据时将更改或新增的业务配置参数保存在可与Flink SQL进行维表关联的数据库中，以使Flink SQL在无需重新启动的情况下实时使用业务配置参数。

技术领域

本申请涉及计算机技术领域，特别的涉及一种数据处理方法、装置及计算机可读存储介质。

背景技术

随着软件程序功能的日益复杂，程序的配置也越来越多，如各种数据库配置、应用配置、服务器配置等，但是往往在实际使用过程中如果能够支持动态配置的话，应用就会显得更加灵活可控。

现有的动态配置方式一般包括两种，其一是在启动或者停止程序的过程中，通过启停脚本，传递配置参数到程序中，实现对配置参数的使用，以达到动态配置的效果，但这种方式需要多次重新启动程序。其二是通过配置管理中心工具实时获取更新的配置参数，并直接将更新的配置参数加载于正在运行的程序中，这种方式虽然不需要停止程序，但在应用Flink SQL处理数据时无法加载配置参数，进而导致无法动态更新配置参数。

发明内容

本申请实施例提供了一种数据处理方法、装置及计算机可读存储介质，可在应用Flink SQL处理数据时使用业务动态配置参数。

第一方面，本申请实施例提供了一种数据处理方法，包括：

获取业务数据流，并获取用于处理业务数据流的Flink SQL任务；

获取Flink SQL任务中的业务配置参数，并将业务配置参数写入至数据库中；

将数据库与业务数据流进行维表关联，生成处理数据。

第二方面，本申请实施例提供了一种数据处理装置，包括：

获取模块，用于获取业务数据流，并获取用于处理业务数据流的Flink SQL任务；

第一处理模块，用于获取Flink SQL任务中的业务配置参数，并将业务配置参数写入至数据库中；

第二处理模块，用于将数据库与业务数据流进行维表关联，生成处理数据。

第三方面，本申请实施例又提供了一种数据处理装置，包括处理器、存储器以及通信接口；

处理器与存储器、通信接口相连；

存储器，用于存储可执行程序代码；

处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，以用于执行本申请实施例第一方面实现方式提供的数据处理方法。

第四方面，本申请实施例提供了一种计算机可读存储介质，计算机存储介质存储有计算机程序，计算机程序包括程序指令，程序指令当被处理器执行时，可实现本申请实施例第一方面实现方式提供的数据处理方法。

第五方面，本申请实施例提供了一种计算机程序产品，当该计算机程序产品在数据处理装置上运行时，使得该数据处理装置执行本申请实施例第一方面实现方式提供的数据处理方法。

在本申请实施例中，通过获取业务数据流，并获取用于处理业务数据流的FlinkSQL任务，然后获取Flink SQL任务中的业务配置参数，并将业务配置参数写入至数据库中，进而将数据库与业务数据流进行维表关联，生成处理数据。可在应用Flink SQL处理数据时将更改或新增的业务配置参数保存在可与Flink SQL进行维表关联的数据库中，以使FlinkSQL在无需重新启动的情况下实时加载业务配置参数。

附图说明