zoukankan      html  css  js  c++  java
  • hadoop免登录

    参考:http://wenku.baidu.com/link?url=n4PT7AhGnV7N8KevSEAMcCVGEaYqTuKmNodCQsUnR7qtAnWM0WDs8pFYLOpCUu9R9wE3VXzpmbEvur4hsv4ySOS7LDI4G3tuHvV4bgMeoCS

    1.安装jdk:修改文件执行权限 :chmod a+x(或u+x) jdk-6u37-linux-x64.bin, 安装:./jdk-6u37-linux-x64.bin
    2.编辑 vi ~/.bash_profile ,增加内容(或vi /etc/profile)

    # set java env(或environment)
    export JAVA_HOME=/home/spark/opt/java/jdk1.6.0_37


    export CLASSPATH=.:$JAVA_HOME/jre/lib:$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar

    PATH=$PATH:$HOME/bin:$JAVA_HOME/bin

    export PATH
    (或
    #set java environment export JAVA_HOME=/usr/java/jdk1.6.0_26 export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar export PATH=$PATH:$JAVA_HOME/bin export JAVA_HOME CLASSPATH PATH
    )
    保存并source ~/.bash_profile
    (或source /etc/profile
    为java建立符号链接,具体如下操作如下 cd /usr/bin //切换目录 ln -s -f /usr/java/jdk1.6.0_26/jre/bin/java //建立符号连接 ln -s -f /usr/java/jdk1.6.0_26/bin/javac //建立符号连接

    3.测试:java -version(jre/lib的rt.pack lib下的tool.pack 使用bin目录下自带的unpack200解压)
    07:
    {要在哪个节点免密码登录}
    1.ssh -keygen -t dsa -P '' -f ~/.ssh/id_dsa //生成秘钥
    2.cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys //建立本地的免密码登录(从hadoop的官网拷贝)
    4.cat ~/id_dsa.pub >> .ssh/authorized_keys //吧公钥的内容追加重定向到.ssh/authorized_keys
    //在namenode上
    3.scp id_dsa.pub root@(node3):~//把公钥拷到要免密码登录的节点

    把NameNode上的hadooop拷到datanode (hadoop所在目录 如果免密码登录设置成功 就不需要输密码)scp -r ~/hadoop-1.2.1.tar.gz root@node2(主机名):~/
    解压:tar -zxvf hadoop-1.2.1.tar.gz
    ln -sf /root/hadoop-1.2.1 /home/hadoop-1.2//创建软链

    把nede1(NameNode)的所有配置文件拷贝到DataNode:保证配置文件一模一样
    conf目录下:scp ./* root@node2:/home/hadoop-1.2/conf/

    格式化:hadoop的bin目录下:./hadoop namenode -format
    启动./start -dfs.sh
    如果失败:
    vi hadoop-env.sh(把安装jdk之后配置的java—home拷贝到给conf下的该文件中)
    service iptables stop
  • 相关阅读:
    Mybatis插件开发入门,运行原理,例子
    ActiveMQ是什么,为什么使用MQ
    sql优化
    用户注册流程
    JMS入门Demo
    运维自动化之Ansible
    ceph安装部署
    ceph工作原理
    linux进程
    任务计划
  • 原文地址:https://www.cnblogs.com/lovenannan/p/9576945.html
Copyright © 2011-2022 走看看