[发明专利]数据处理方法、装置、系统及计算机可读存储介质

说明书

本发明公开了一种数据处理方法、装置、系统及计算机可读存储介质，所述数据处理方法包括：检测拖动至工作空间的源节点，其中，所述源节点为具备数据处理功能的节点，所述工作空间用于设置数据处理规则；根据所述源节点的数据源类型，确定对应的处理类型选择页面；当检测到基于所述处理类型选择页面触发的交互操作时，根据所述交互操作确定数据处理类型；根据所述数据处理类型确定数据处理规则，以使基于所述数据处理规则对所述数据源类型对应的数据进行处理。本发明提高了数据处理功能的开发效率，并降低了数据处理功能的开发复杂度。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据处理方法、装置、系统及计算机可读存储介质。

背景技术

随着互联网的迅速发展，社交数据、电商数据、人类基因数据等数据量大的数据充斥在网络中。而如何从海量的数据中进行数据的汇聚、清洗、统计等数据处理，以分析该海量数据的数据结构和关联关系等。

通常，对于海量的数据而言需要通过计算机软件进行处理。而对于数据分析师而言，比较熟悉业务流程和数据处理流程，对于计算机软件的开发工程师而言，比较熟悉如何与计算机指令交互。因此，开发工程师需要开发给数据分析师一种数据处理工具，以使数据分析师可通过简单的界面操作对数据进行处理，例如通过拖拉拽、零代码编程的方式，以使数据分析师可设置相应的数据处理规则。

目前，存在的处理流程框架大多为重量级框架，例如activity(工作流)框架，该activity更侧重于流程本身，而每一步的节点本身功能体现较少，只是表明了流程处理的方向和节点的基本信息，并且，重量级框架二次开发较为困难，降低了开发效率。同时，由于数据源类型多样，例如mysql、oracle、sqlserver等，不同的数据源有不同的处理方式，导致需要针对不同数据源进行多次开发，降低了开发效率。因此，如何提高数据处理功能的开发效率、如何降低数据处理功能的开发复杂度，是目前亟需解决的问题。

发明内容

本发明的主要目的在于提供一种数据处理方法、装置、系统及计算机可读存储介质，旨在提高数据处理功能的开发效率，并降低数据处理功能的开发复杂度。

为实现上述目的，本发明提供一种数据处理方法，所述数据处理方法包括以下步骤：

检测拖动至工作空间的源节点，其中，所述源节点为具备数据处理功能的节点，所述工作空间用于设置数据处理规则；

根据所述源节点的数据源类型，确定对应的处理类型选择页面；

当检测到基于所述处理类型选择页面触发的交互操作时，根据所述交互操作确定数据处理类型；

根据所述数据处理类型确定数据处理规则，以使基于所述数据处理规则对所述数据源类型对应的数据进行处理。

可选地，所述根据所述源节点的数据源类型，确定对应的处理类型选择页面的步骤包括：

获取所述源节点的数据源类型，其中，所述数据源类型在所述源节点开发时确定；

根据所述数据源类型，确定操作权限；

根据所述操作权限，显示对应的处理类型选择页面。

可选地，所述当检测到基于所述处理类型选择页面触发的交互操作时，根据所述交互操作确定数据处理类型的步骤之后，还包括：

根据所述数据处理类型确定参数设置页面，以使基于所述参数设置页面设置所述数据处理类型对应的操作参数；

其中，所述根据所述数据处理类型确定数据处理规则的步骤包括：

根据已设置操作参数的数据处理类型确定数据处理规则。

可选地，所述根据所述数据处理类型确定数据处理规则的步骤之前，还包括：