zoukankan      html  css  js  c++  java
  • datanode扩容步骤

    新扩容机器规划:

    hostname ip 进程
    slave3 10.183.225.167 datanode,nodemange

    1. 修改/etc/hosts

    增加新扩容机器的hostname

    10.183.225.167 slave3
    

    2. 将/etc/hosts同步到其他服务器

    scp /etc/hosts slave3:/etc/
    

    3. 将hadoop拷贝至slave3

    scp -r /xxx/soft/hadoop-2.7.3 slave3:/xxx/soft/
    

    4. 将jsvc拷贝至slave3(安全模式datanode需要通过jsvc启动)

    scp -r /xxx/soft/commons-daemon-1.0.15-src slave3:/xxx/soft/
    

    5. kadmin添加pricipal

    kadmin.local
    addpric -randkey root/slave3@JENKIN.COM
    addpric -randkey host/slave3@JENKIN.COM
    
    xst -norandkey -k /var/kerberos/krb5kdc/keytab/root.keytab root/slave3@JENKIN.COM host/slave3@JENKIN.COM
    

    6. 测试principal  

    kinit -k -t /var/kerberos/krb5kdc/keytab/root.keytab root/slave3@JENKIN.COM

    7. 将keytab同步其他服务器

    scp /var/kerberos/krb5kdc/keytab/root.keytab slave3:/var/kerberos/krb5kdc/keytab/
    scp /var/kerberos/krb5kdc/keytab/root.keytab master2:/var/kerberos/krb5kdc/keytab/
    scp /var/kerberos/krb5kdc/keytab/root.keytab slave2:/var/kerberos/krb5kdc/keytab/
    

    8. 启动datanode

    ./sbin/start-secure-dns.sh
    

    9. 启动nodemanage

    ./sbin/yarn-daemon.sh start nodemanager
    

    10. 验证

    [root@slave3 ~]# hadoop fs -put ./installweb-fix.sh hdfs://ns/
    [root@slave3 ~]# hadoop fs -ls /
    Found 2 items
    -rw-r--r--   2 root supergroup       1366 2017-09-07 00:48 /README.txt
    -rw-r--r--   2 root supergroup        445 2017-09-08 11:28 /installweb-fix.sh
    

      

      

      

      

      

      

      

      

  • 相关阅读:
    C# Win7系统下为应用程序取得管理员权限
    bootstrap 列函数
    bootstrap table offset 参数问题
    java 调用webservcie ,自己亲测可用
    sqlserver 生成数据字典
    css 色彩大全网址
    C#遍历指定文件夹中的所有文件和子文件夹
    ajax 跨域调用webservice 使用jsonp解决方法
    XML 类型数据转化为表
    SQL SERVER 查询未提交的事务
  • 原文地址:https://www.cnblogs.com/kisf/p/7492584.html
Copyright © 2011-2022 走看看