[发明专利]数据处理方法和装置

摘要

本申请提供了一种数据处理方法和装置，该方法包括：获得待处理的多个数据处理任务及每个数据处理任务的历史处理时长信息；依据数据处理任务中各工序所需的工序时长，确定多个数据处理任务的最优处理顺序；按照最优处理顺序，在依次处理多个数据处理任务的过程中，对于当前处理的任意一个数据处理任务，依次处理数据处理任务的多种工序；在依次处理数据处理任务的多种工序的过程中，如数据处理任务中任一种工序完成处理，则将该种工序所占用的工序处理资源分配给数据处理任务之后下一数据处理任务的该种工序，以基于该种工序对应的工序处理资源处理下一数据处理任务的该种工序。本申请的方案可以提高大批量数据文件处理的处理效率。