zoukankan      html  css  js  c++  java
  • Hadoop2.0之开启日志

    配置

    • 修改 mapred-site.xml
    <property>
    	<name>mapreduce.jobhistory.address</name>
    	<value>slave1:10020</value>
    </property>
    <property>
    	<name>mapreduce.jobhistory.webapp.address</name>
    	<value>slave1:19888</value>
    </property>
    
    • 修改yarn-site.xml
    <property>
    	<name>yarn.log-aggregation-enable</name>
    	<value>true</value>
    </property>
    <property>
    	<name>yarn.log-aggregation.retain-seconds</name>
    	<value>259200</value>
    </property>
    <property>
        <name>yarn.log.server.url</name>
        <value>http://slave1:19888/jobhistory/logs</value>
    </property>
    
    • 重启 yarn

    • 启动 jobhistory server
      (配置在哪台,就在哪台机器启动)

    [root@slave1 sbin]# ./mr-jobhistory-daemon.sh start historyserver
    
    • 停止 jobhistory server
    [root@slave1 sbin]# ./mr-jobhistory-daemon.sh stop historyserver
    

    参考资料

    【0】Hadoop - failed redirect for container
    https://issues.apache.org/jira/browse/YARN-4037

  • 相关阅读:
    枚举
    枚举
    比特币中的密码学原理
    贪心
    dp
    二分
    mac解决matplotlib中文乱码
    Keras使用多个GPU并行
    pyspark使用-dataframe操作
    箱线图
  • 原文地址:https://www.cnblogs.com/wadeyu/p/9696065.html
Copyright © 2011-2022 走看看