zoukankan      html  css  js  c++  java
  • Hadoop 集群安装(从节点安装配置)

    1、Java环境配置
    view plain copy
    sudo mv /tmp/java /opt/
    jdk安装完配置环境变量,编辑/etc/profile:

    view plain copy
    sudo vim /etc/profile
    在文件末尾,添加如下内容:

    view plain copy
    export JAVA_HOME=/opt/java/
    export PATH=(JAVA_HOME/bin:)PATH
    刷新环境变量:

    view plain copy
    source /etc/profile
    利用java查看版本号命令验证是否安装成功:

    view plain copy
    java -version
    2、修改hosts文件
    编辑/etc/hosts文件:

    view plain copy
    sudo vim /etc/hosts
    添加本机IP地址对应本机映射名和其它节点IP地址对应映射名:

    view plain copy
    0.0.0.0 master
    0.0.0.0 slave1
    0.0.0.0 slave2
    节点IP地址即”内网管理地址“

    3、创建公钥
    在zhangyu用户下创建公钥:

    view plain copy
    ssh-keygen
    出现如下内容:

    Enter file in which to save the key (/home/zhangyu/.ssh/id_rsa):

    直接使用默认选项,回车即可,出现如下内容:

    Enter passphrase (empty for no passphrase):

    直接回车,出现内容:

    Enter same passphrase again:

    直接回车,创建完成。

    拷贝公钥,过程中需要输入用户密码:"zhangyu"

    view plain copy
    ssh-copy-id master
    view plain copy
    ssh-copy-id slave1
    view plain copy
    ssh-copy-id slave2
    命令执行过程中需要输入“yes”和密码“zhangyu”。

    拷贝完可以测试连接。

    4、Hadoop环境配置
    view plain copy
    sudo mv /tmp/hadoop /opt/
    hadoop安装完配置环境变量,编辑/etc/profile:

    view plain copy
    sudo vim /etc/profile

    在文件末尾添加如下内容:

    view plain copy
    export HADOOP_HOME=/opt/hadoop/
    export PATH=(HADOOP_HOME/bin:)PATH
    刷新环境变量:

    view plain copy
    source /etc/profile
    利用hadoop查看版本号命令验证是否安装成功:

    view plain copy
    hadoop version
    5、创建数据文件夹:
    view plain copy
    sudo mkdir /data
    所有者修改为当前用户:

    view plain copy
    sudo chown -R zhangyu.zhangyu /data
    至此,从节点1配置完成。

  • 相关阅读:
    尽可能的降低重复劳动——模板策略
    一个CSS上中下三行三列结构的Div布局
    程序员那些悲催的事儿
    给NSString增加Java风格的方法
    DIV和table页面布局的区别和联系
    cocos2d播放雪花
    时间复杂度和空间复杂度2 数据结构和算法04
    OD使用教程4 调试篇04|解密系列
    OD使用教程5 调试篇05|解密系列
    PE结构简图
  • 原文地址:https://www.cnblogs.com/juking/p/10261899.html
Copyright © 2011-2022 走看看