需要 hadoop 的安装目录/etc/hadoop/yarn-site.xml 中进行配置
配置内容
<property> <name>yarn.log-aggregation-enable</name> <value>true</value> </property> <property> <name>yarn.log-aggregation.retain-seconds</name> <value>640800</value> </property>
配置好了之后 需要重新启动 nodemanager resourcemanager historyserver 才可以生效
重新启动之后,在Hadoop上面使用yarn 运行wordcount程序
命令:
bin/yarn jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.0.jar wordcount /user/zuoyan/mapreduce/wordcount/input/ /user/zuoyan/mapreduce/wordcount/output2
打开Hadoop的任务管理界面的日志信息
就可以看到,日志已经可以打印出来了
使用这种的好处 省去了以后去找日志信息查看的麻烦问题,能够比较直观的查看到错误信息!
这样Yarn的日志聚集功能就已经配置好了!