Yarn 的日志聚集功能配置使用

需要  hadoop 的安裝目錄/etc/hadoop/yarn-site.xml 中進行配置

 

配置內容

  <property>
        <name>yarn.log-aggregation-enable</name>
        <value>true</value>
     </property>

     <property>
        <name>yarn.log-aggregation.retain-seconds</name>
        <value>640800</value>
     </property>

 

配置好了之后 需要重新啟動  nodemanager resourcemanager historyserver 才可以生效

 

重新啟動之后，在Hadoop上面使用yarn  運行wordcount程序

命令:

bin/yarn jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.0.jar wordcount /user/zuoyan/mapreduce/wordcount/input/ /user/zuoyan/mapreduce/wordcount/output2

 

打開Hadoop的任務管理界面的日志信息

就可以看到，日志已經可以打印出來了

 

使用這種的好處   省去了以后去找日志信息查看的麻煩問題，能夠比較直觀的查看到錯誤信息！

這樣Yarn的日志聚集功能就已經配置好了!