zoukankan      html  css  js  c++  java
  • hadoop版本选择和伪分布式安装的问题

    首先,自己在搭建遇到的问题是50070的端口号,无法访问,排查了一下才知道配置参数细节上的问题。首先从主机上着手,排查得知:主机里面没有name node,了解知道core-site.xml的配置有问题:

    错误配置误点:

     另外需要配置:secondnamenode

    我们只需要在hdfs-site.xml配置即可:

     value:3表示你的集群机器有多少,这里表示有3台,也可以设置一台为单机。

    这个Hadoop2 指的是你 辅助机器 (seconnamenode)要放在哪个上面,配置参数直接复制就可以,上图方便参考,

     <!-- 指定HDFS副本的数量 -->
    <property>
    <name>dfs.replication</name>
    <value>3</value>
    </property>
    <property>
    <name>dfs.namenode.secondary.http-address</name>
    <value>hadoop2:50090</value>
    </property>
    <!--获取文件夹写入权限-->
    <property>
    <name>dfs.permissions.enabled</name>
    <value>false</value>
    </property>
     
    配置完后,保存并退出,然后进行
     格式化一下,命令是:hdfs namenode -format
    接着使用以下命令:
    stop-dfs.sh
    start-dfs.sh
    关闭防火墙
     再访问IP:50070
    再访问IP:8088

     基本没啥问题!

  • 相关阅读:
    nginx 特定目录禁止php执行
    linux awk命令详解
    漫谈大型网站架构
    ThinkPHP 自动验证实例
    使用jquery时一些小技巧的总结
    fputcsv 导出CSV、Excel DownLoad
    文件操作总结
    rc.local 开机自启脚本无法启动
    Windows pycharm Terminal使用Anaconda 的Prompt
    解决hash冲突方法
  • 原文地址:https://www.cnblogs.com/studygithub5208868/p/11444318.html
Copyright © 2011-2022 走看看