[发明专利]数据加工方法与装置

权利要求书

1.一种数据加工方法，其特征在于，包括：

建立流式加工任务链；所述流式加工任务链包括至少两个加工组件，以及，所述至少两个加工组件的执行顺序；

按照所述执行顺序调用所述至少两个加工组件；

其中，被调用的加工组件至少用于执行如下操作：

对输入表中的至少一个字段进行数据加工处理，生成相应的输出字段作为中间字段；所述至少一个字段中的任一字段为目标字段；

为所述输出字段进行命名，得到所述输出字段的字段名；所述输出字段的字段名包括：所述被调用的加工组件的组件名信息以及随机码。

2.如权利要求1所述的方法，其特征在于，

所述加工组件的配置信息包括：第一映射关系；

所述第一映射关系包括：第一目标字段名与第二目标字段名之间的映射关系；所述第一目标字段名为所述目标字段的字段名；所述第二目标字段名为所述输出字段的字段名；所述第一映射关系在建立所述流式加工任务链时生成；

所述为所述输出字段进行命名包括：

根据所述第一映射关系，对所述输出字段进行命名，得到所述第二目标字段名；

或者，所述为所述输出字段进行命名包括：

基于所述第一目标字段名，对所述输出字段进行命名，得到所述第二目标字段名。

3.如权利要求2所述的方法，其特征在于，

第n个被调用的加工组件的第二目标字段名通过如下方式确定：

若所述第一目标字段名与所述第n个被调用的加工组件的组件名信息的长度和大于预设长度，进行缩短处理，以令得到的第二目标字段名的长度不大于所述预设长度。

4.如权利要求3所述的方法，其特征在于，

所述第一目标字段名中包括至少一个加工组件的组件名信息；所述组件名信息包括组件名缩写或组件名全名；

所述缩短处理包括：

若所述第一目标字段名中包括组件名全名，根据预设的缩写表将所述组件名全名替换为相应的组件名缩写，得到临时字段名；所述缩写表包括组件名缩写与组件名全名之间的对应关系；

计算所述临时字段名与所述第n个被调用的加工组件的组件名缩写的长度和；

若计算得到的长度和不大于所述预设长度，将所述临时字段名确定为所述第二目标字段名；

若计算得到的长度和大于所述预设长度，将所述临时字段名中m长度的信息，替换为所述第n个被调用的加工组件的组件名缩写；所述第n个被调用的加工组件的组件名缩写的长度小于等于m；

或者，

所述缩短处理包括：

将所述第一目标字段名中m长度的信息，替换为所述第n个被调用的加工组件的组件名缩写。

5.如权利要求2所述的方法，其特征在于，

最后一个被执行的加工组件的配置信息中包括第二映射关系；

所述第二映射关系包括：中间字段与结果表中的字段的映射关系；

最后一个被执行的加工组件还用于执行如下操作：

根据所述第二映射关系，将所述中间字段中的数据映射至所述结果表的相应字段中。

6.如权利要求5所述的方法，其特征在于，还包括：

若所述流式加工任务链发生更新，根据更新后的流式加工任务链中的执行顺序，更新所述第二映射关系；并且，在存在第一映射关系时，根据更新后的流式加工任务链中的执行顺序，更新所述第一映射关系。

7.如权利要求1所述的方法，其特征在于，所述随机码由所述流式加工任务链中的一个或多个加工组件生成。