Hadoop的小作業模式, 數據量小非常節約時間,測試使用Uber,數據量超過塊大小就會自動啟用了。
要啟動ubertask,reduce數得是1。
參數設置:
mapreduce.job.ubertask.enable
mapreduce.job.ubertask.maxbytes //塊大小
Hadoop的小作業模式, 數據量小非常節約時間,測試使用Uber,數據量超過塊大小就會自動啟用了。
要啟動ubertask,reduce數得是1。
參數設置:
mapreduce.job.ubertask.enable
mapreduce.job.ubertask.maxbytes //塊大小
本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。