[发明专利]一种数据处理方法和数据处理系统

权利要求书

1.一种数据处理方法，其特征在于，所述方法包括：

接收至少两个特征指标计算请求；

根据各个所述特征指标计算请求的信息对所述至少两个特征指标计算请求进行合并，得到合并后的目标特征指标计算请求；

根据所述合并后的目标特征指标计算请求，生成特征指标计算任务；

执行所述特征指标计算任务；

所述执行所述特征指标计算任务的步骤包括：

基于所述各个特征指标搜索预设的指标计算图状结构，得到搜索结果；

根据所述搜索结果确定所述各个特征指标共同的计算单元；

根据确定出的所述计算单元，确定所述各个特征指标的关联关系；

根据所述关联关系获取各个所述特征指标的执行方式；

基于所述执行方式执行所述特征指标计算任务；

其中，所述预设的指标计算图状结构包括预设特征指标对应的计算单元之间的拓扑关系。

2.根据权利要求1所述的数据处理方法，其特征在于，所述特征指标计算请求的信息包括待计算的特征指标信息和/或计算所述特征指标使用的数据集信息。

3.根据权利要求2所述的数据处理方法，其特征在于，所述根据各个所述特征指标计算请求的信息对所述少两个特征指标计算请求进行合并，得到合并后的目标特征指标计算请求的步骤包括：

根据每个所述特征指标请求对应的所述数据集信息，确定使用同一数据集的第一特征指标计算请求集合；

将所述第一特征指标计算请求集合中的特征指标请求进行合并，得到合并后的目标特征指标计算请求。

4.根据权利要求3所述的数据处理方法，其特征在于，所述将所述第一特征指标计算请求集合中的特征指标请求进行合并，得到合并后的目标特征指标计算请求的步骤包括：

获取所述第一特征指标计算请求集合中待计算的特征指标的业务类型；

确定所述特征指标的业务类型相同的第二特征指标计算请求集合；

将所述第二特征指标计算请求集合中的特征指标请求进行合并，得到合并后的目标特征指标计算请求。

5.根据权利要求4所述的数据处理方法，其特征在于，所述业务类型包括以下至少一项：数据集基本信息、质量特征、分布情况和相关性分析。

6.根据权利要求1所述的数据处理方法，其特征在于，根据所述关联关系获取各个所述特征指标的执行方式的步骤包括：

基于所述搜索结果获得所述各个特征指标的各个计算单元之间的执行顺序；

根据所述各个计算单元之间的执行顺序确定各个特征指标的执行方式。

7.根据权利要求6所述的数据处理方法，其特征在于，所述各个所述特征指标的执行方式包括串行执行和/或并行执行。

8.根据权利要求1-7任一项所述的数据处理方法，其特征在于，所述执行所述特征指标计算任务的步骤包括：

确定所述特征指标计算任务中各个特征指标的计算逻辑是否相同；

若所述特征指标的计算逻辑相同，将所述各个特征指标对应的计算单元进行合并；

基于合并后的计算单元，执行所述特征指标计算任务。

9.根据权利要求1所述的数据处理方法，其特征在于，所述方法还包括：

获取新增特征指标；

基于所述新增特征指标的计算逻辑更新所述预设的指标计算图状结构。