sqoop 1.99.7 安裝及配置


一  下載sqoop 1.99.7

  http://mirror.bit.edu.cn/apache/sqoop/1.99.7/

二 解壓安裝文件

  

三 配置Sqoop 環境變量

  

  

  

最后把mysql的驅動jar文件復制到extera這個目錄下。

四 配置Hadoop代理訪問

因為sqoop訪問Hadoop的MapReduce使用的是代理的方式,必須在Hadoop中配置所接受的proxy用戶和組。找到Hadoop的core-site.xml配置文件(本例是$HADOOP_HOME/etc/hadoop/core-site.xml):

 

<property>
  <name>hadoop.proxyuser.$SERVER_USER.hosts</name> <value>*</value> </property> <property> <name>hadoop.proxyuser.$SERVER_USER.groups</name> <value>*</value> </property>

五 Sqoop服務器配置
sqoop.properties文件配置比較多,這里按需要配置,我寫下我配置的項,其他都使用默認值:

org.apache.sqoop.submission.engine.mapreduce.configuration.directory=/home/hadoop/hadoop2.6/etc/hadoop  

org.apache.sqoop.security.authentication.type=SIMPLE  

  org.apache.sqoop.security.authentication.handler=org.apache.sqoop.security.authentication.SimpleAuthenticationHandler  

  org.apache.sqoop.security.authentication.anonymous=true 

(6)驗證配置是否有效

使用bin中的sqoop2-tool工具進行驗證:

 七 開啟服務器

  

 

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM