[发明专利]一种数据表关联方法和装置

摘要

本发明提供一种数据表关联方法和装置，其中方法应用于对第一数据表和第二数据表进行关联；其中，所述第一数据表中包括能够造成数据倾斜的倾斜数据以及所述倾斜数据之外的非倾斜数据，该方法包括由第一数据表中提取倾斜数据放入第一数据分表，并将非倾斜数据放入第二数据分表；由第二数据表中提取匹配关联第一数据分表的数据，放入第三数据分表；将第一数据分表和第三数据分表进行mapjoin得到第一关联表，将第二数据分表和第二数据表进行关联，得到第二关联表；将第一关联表和第二关联表进行组合，得到关联结果表，关联结果表为第一数据表和第二数据表关联的结果。本发明提高了数据表关联的效率。

主权项

一种数据表关联方法，其特征在于，所述方法应用于对第一数据表和第二数据表进行关联；其中，所述第一数据表中包括：能够造成数据倾斜的倾斜数据以及所述倾斜数据之外的非倾斜数据，所述方法包括：由所述第一数据表中提取所述倾斜数据放入第一数据分表，并将所述非倾斜数据放入第二数据分表；由所述第二数据表中提取匹配关联所述第一数据分表的数据，放入第三数据分表；将所述第一数据分表和第三数据分表进行mapjoin得到第一关联表，将所述第二数据分表和所述第二数据表进行join，得到第二关联表；将所述第一关联表和第二关联表进行组合，得到关联结果表，所述关联结果表为所述第一数据表和第二数据表关联的结果。