Sqoop切分數據的思想概況

Sqoop通過--split-by指定切分的字段，--m設置mapper的數量。通過這兩個參數分解生成m個where子句，進行分段查詢。因此sqoop的split可以理解為where子句的切分。 第一步，獲取切分字段的MIN()和MAX() 為了根據mapper的個數切分table ...