zoukankan      html  css  js  c++  java
  • (初学者)安装hadoop集群注意事项

    1.关闭防火墙

    2.所有的hadoop操作都是hadoop用户下面的,同时需要用hadoop用户登录之后,对于其他的机器的hadoop用户可以免密登录

    3.hadoop用户在root组下面,不是附加组!

    4.配置hadoop-env 中的Java_home 是因为hadoop只运行时需要ssh 启动 其他的机器,ssh启动其他机器上的hadoop时,在会话中时没有加载到机器上的javahome的(shh手动启动其他机器上也是不行的,必须将source /etc/profile;写在启动haoop命令前面 ),所以需要配置层绝对路径

    5.在yarn-site.xml文件中要制定yarn.resourcemanager.hostname在那台机器上(现在是没有指定,但是没有指定的时候默认是0.0.0.0<来自hadoopAPI>)

    6.hadoop-daemon.sh start namenode 只启动namenode,

    只要启动namenode就可以通过http://mini2:50070去页面查看(minni2是namenode节点的主机)

    7../sbin/hadoop-daemon.sh start datanode 启动一台机器上的datanode 在页面上就能看到活着的节点是1,挂掉的节点是0

  • 相关阅读:
    SC || Git 相关知识
    SC || Chapter 1
    SC || 解决在git中上传过大文件的问题(如何将提交过的彻底删除
    SC || 那些CheckStyle中的错误们
    纯c实现字符串切割
    c++实现字符串切割
    频域滤波
    空间域滤波
    卷积的理解
    频域分析相关概念
  • 原文地址:https://www.cnblogs.com/rocky-AGE-24/p/6866231.html
Copyright © 2011-2022 走看看