[发明专利]一种数据处理系统及方法

说明书

本发明提供一种数据处理系统及方法，该数据处理系统包括：接口模块，用于接收用户在数据集界面上的第一输入操作，得到待处理数据集；推断模块，用于推断所述待处理数据集的类型信息；第一确定模块，用于基于所述待处理数据集的类型信息，确定目标数据处理策略；处理模块，用于利用所述目标数据处理策略，对所述待处理数据集进行数据处理。根据本发明的实施例，可以简化数据处理过程，并可以提高数据准备的适用性。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据处理系统及数据处理方法。

背景技术

大数据挖掘和分析的成功往往取决于数据准备。目前对于数据准备，常采用人工直接对相应数据进行处理。然而，由于人工处理的局限性等原因，造成现有数据准备方式的适用性较差、效率较低。

发明内容

本发明实施例提供一种数据处理系统及方法，以解决现有数据准备方式的适用性较差、效率较低的问题。

为了解决上述技术问题，本发明是这样实现的：

第一方面，本发明实施例提供了一种数据处理系统，包括：

接口模块，用于接收用户在数据集界面上的第一输入操作，得到待处理数据集；

推断模块，用于推断所述待处理数据集的类型信息；

第一确定模块，用于基于所述待处理数据集的类型信息，确定目标数据处理策略；

处理模块，用于利用所述目标数据处理策略，对所述待处理数据集进行数据处理。

可选的，所述系统还包括：

第二确定模块，用于从所述待处理数据集中确定目标数据集；

所述第一确定模块具体用于：基于所述待处理数据集的类型信息，确定针对所述目标数据集的所述目标数据处理策略。

可选的，所述第一确定模块包括：

第一推荐单元，用于基于所述待处理数据集的类型信息，针对所述目标数据集推荐多个数据处理策略；

第一确定单元，用于将多个数据处理策略中的最优策略确定为所述目标数据处理策略。

可选的，所述接口模块还用于：接收用户在策略界面上的第二输入操作；

所述第一确定模块包括：

第二推荐单元，用于基于所述待处理数据集的类型信息，针对所述目标数据集推荐多个数据处理策略；

第二确定单元，用于响应于所述第二输入操作，将用户从所述多个数据处理策略中选择的策略确定为所述目标数据处理策略；或者，响应于所述第二输入操作，将第二策略确定为所述目标数据处理策略，其中，所述第二策略是用户对所述多个数据处理策略中的第一策略进行调整后得到。

可选的，所述接口模块还用于：接收用户在策略界面上的第二输入操作；

所述第一确定模块具体用于：响应于所述第二输入操作，将用户基于所述待处理数据集的类型信息定义的针对所述目标数据集的第三策略确定为所述目标数据处理策略。

可选的，所述系统还包括：

显示模块，用于显示以下至少一项：所述待处理数据集的类型信息、推荐的数据处理策略中的字段信息、推荐的数据处理策略中的数据血缘关系。

可选的，所述类型信息包括以下至少一项：

所述待处理数据集中每一数据集的业务类型；

所述待处理数据集中每一列数据的数据基础类型和/或业务类型。

可选的，所述推断模块具体用于：