zoukankan      html  css  js  c++  java
  • 格式化、问题ubuntu 12.10下搭建 hadoop 1.0.4 单机和伪分布模式by小雨

    PS:今天上午,非常郁闷,有很多简单基础的问题搞得我有些迷茫,哎,代码几天不写就忘。目前又不当COO,还是得用心记代码哦!

        主要内容来自 

        

    Ubuntu上搭建Hadoop境环(单机模式+伪分布模式)

        http://www.linuxidc.com/Linux/2013-01/77681.htm

        这篇文章经已讲得很细详,这里我只写在搭建过程当中碰到的问题。

        在伪分布模式搭建过程当中:

        建新data目录时

        ~/hadoop$ mkdir hdfs/data

        要把data的权限设成755

        ~/hadoop$ sudo chmod 755 hdfs/data

        否则在格式化HDFS时会犯错,在log可以观察到

        org.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory in dfs.data.dir: Incorrect permission for /home/hadoop/hadoop-1.0.4/hdfs/data, expected: rwxr-xr-x, while actual: rwxrwxr-x
    2013-04-14 15:14:36,077 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: All directories in dfs.data.dir are invalid.

        

        格式化HDFS后动启

        hadoop@ubuntu:~/hadoop-1.0.4/bin$ start-all.sh

        用jps命令查看

        hadoop@ubuntu:~/hadoop-1.0.4$ jps
    14963 SecondaryNameNode
    15052 JobTracker
    15269 TaskTracker
    14548 NameNode
    14756 DataNode
    15319 Jps


        如果都列出来,说明搭建功成,漏一个都是有问题的,可能登不上 http://localhost:50060

        或者 http://localhost:50070 表现

        Configured Capacity     :     0 KB
    DFS Used    :    0 KB
    Non DFS Used    :    0 KB
    DFS Remaining    :    0 KB
    DFS Used%    :    100 %
    DFS Remaining%    :    0 %
    Live Nodes     :    0
    Dead Nodes     :    0

        

        

        

    文章结束给大家分享下程序员的一些笑话语录: 爱情观
      爱情就是死循环,一旦执行就陷进去了。
      爱上一个人,就是内存泄露--你永远释放不了。
      真正爱上一个人的时候,那就是常量限定,永远不会改变。
      女朋友就是私有变量,只有我这个类才能调用。
      情人就是指针用的时候一定要注意,要不然就带来巨大的灾难。

  • 相关阅读:
    汇编学习笔记(25)
    在QT C++中调用 Python并将软件打包发布(裸机可运行)
    集合类
    解决python matplotlib 中文字体的显示乱码-Windows系统;RuntimeWarning: Glyph
    元数据库设计
    解决方案sln工程csproj
    托管代码和非托管代码的区别
    IIS安装和使用URL重写工具-URL Rewrite
    SSL证书及使用
    rpc和rpcwithcert两个虚拟目录
  • 原文地址:https://www.cnblogs.com/jiangu66/p/3026009.html
Copyright © 2011-2022 走看看