【NCDC數據】獲取 hadoop權威指南3中的NCDC數據

   
   
   
           

    
    
    
            
vi getNcdcBigData.sh
   
   
   
           

內容如下：

   
   
   
           

    
    
    
            
#!/bin/bash
    
    
    
            
for i in {1901..2014}
    
    
    
            
do
    
    
    
            
cd /home/xxxx/hapood/ncdc
    
    
    
            
wget --execute robots=off -r -np -nH --cut-dirs=4 -R index.html* ftp://ftp.ncdc.noaa.gov/pub/data/gsod/$i/
    
    
    
            
done
   
   
   
           

---

來自為知筆記(Wiz)