[发明专利]一种实现不同数据源之间数据处理的方法及装置

摘要

本发明提供一种实现不同数据源之间数据处理的方法及装置。所述方法包括解析用户发出的数据处理命令，其中所述数据处理命令中所涉及的数据包括第一数据源和第二数据源中的数据；根据所述数据处理命令进行任务分解，分解后的所述数据处理命令包括对所述第一数据源中的数据操作的第一命令、对所述第二数据源中的数据操作的第二命令以及对所述第一数据源中的数据和所述第二数据源中的数据组合操作的第三命令；向所述第一数据源下发执行所述第一命令，向所述第二数据源下发执行所述第二命令，并根据所述第一命令和所述第二命令的执行结果，执行所述第三命令。本发明所述方法和装置能够实现不同数据源之间的透明访问，提高数据处理的效率。

主权项

一种实现不同数据源之间数据处理的方法，其特征在于，所述方法包括：解析用户发出的数据处理命令，其中所述数据处理命令中所涉及的数据包括第一数据源和第二数据源中的数据；根据所述数据处理命令进行任务分解，分解后的所述数据处理命令包括对所述第一数据源中的数据操作的第一命令、对所述第二数据源中的数据操作的第二命令以及对所述第一数据源中的数据和所述第二数据源中的数据组合操作的第三命令；向所述第一数据源下发执行所述第一命令，向所述第二数据源下发执行所述第二命令，并根据所述第一命令和所述第二命令的执行结果，执行所述第三命令；其中，在向所述第一数据源下发执行所述第一命令，向所述第二数据源下发执行所述第二命令之前，还包括：根据预先记录的所述第一数据源和所述第二数据源的数据内容信息，比较所述第一命令和所述第二命令所涉及任务信息处理量；其中所述数据内容信息中记录有第一数据源和第二数据源的内容信息和位置信息；若所述第一命令所涉及的任务信息处理量大于所述第二命令所涉及的任务信息处理量，则将所述第二命令所涉及数据转发至所述第一数据源，在所述第一数据源执行所述第一命令、所述第二命令和所述第三命令，并返回所述第三命令的执行结果；若所述第一命令所涉及的任务信息处理量小于所述第二命令所涉及的任务信息处理量，则将所述第一命令所涉及数据转发至所述第二数据源，在所述第二数据源执行所述第一命令、所述第二命令和所述第三命令，并返回所述第三命令的执行结果；若所述第一命令所涉及的任务信息处理量与所述第二命令所涉及的任务信息处理量相当，则向所述第一数据源下发执行所述第一命令，向所述第二数据源下发执行所述第二命令，并返回执行所述第一命令获得的第一数据结果和执行所述第二命令获得的第二数据结果，根据所述第一数据结果和所述第二数据结果执行所述第三命令；其中所述第一数据源为云计算平台，所述第二数据源为数据仓库。