zoukankan      html  css  js  c++  java
  • hadoop__WebUI只显示一个datanode

    问题:

    hadoop集群不管怎么启动在hadoop管理界面都看到只有一个datanode

    原因:

    我hadoop集群搭建了三台机器,一台master,2台slave,slave1,slave2。slave1中间出了问题,被我删除之后,又从slave2复制了一台重新命名为slave1(这是在hadoop格式化之后复制的,VERSION的信息就一起过去了),

    导致datanode的VERSION里面有2个id是一样的,datanodeUuid和storageID,因此在master:50070上死活只看到一个datanode。

    解决方法:

    手动删除slave1的VERSION文件,路径是/usr/local/src/hadoop-2.6.1/tmp/dfs/data/current/VERSION
    删除之后,重启hdfs集群。在slave1上jps一下,发现又报另外一个错误:

    rror occurred during initialization of VM
    java.lang.Error: Properties init: Could not determine current working directory.
            at java.lang.System.initProperties(Native Method)
            at java.lang.System.initializeSystemClass(System.java:1119)

    这个问题的是JVM的原因,执行命令source /etc/profile,java -version正常出现版本信息就可以了。

    再次Jps,刷新webUI,所有的datanode正常显示。

     

  • 相关阅读:
    [zz]Mesos的分析4 支持Hadoop任务级调度
    代理设计模式
    spring初始化
    SpringAOP的切点的声明格式
    SpringAOP的介绍
    SpringIOC创建对象的单例和多例模式
    动态代理
    SpringIOC的自动注入
    SpringAOP的注解方式实现
    cglib动态代理实现流程
  • 原文地址:https://www.cnblogs.com/lucas-zhao/p/11909406.html
Copyright © 2011-2022 走看看