zoukankan      html  css  js  c++  java
  • CDH 集群环境Master节点IP变更

        因为集群中的节点服务器都是通过DHCP自动分配IP,原则上重启了IP也不会变更,因为在启动的时候已经为Mac地址固定分配了一个IP地址,除非Mac地址变更。巧合的是,昨天早上扫地大妈把某Master的节点服务器因为擦桌子而把网线给扯掉了,等我发现该节点连接不上的时候,重新插上网线之后结果Ip变了。想了很多中的方式,将所有节点的Ip设置为手动配置,但是手动配置IP,该节点就无法与其他节点通信,网络连接失败,更不能连接Internet。百思不得其解。

       无奈只能再此将Master节点按照自动分配的IP进行了。

        1、首先得修改各个节点的hosts文件,将原来Master节点的IP更改为新的IP地址,注意所有的节点都必须更新。

        2、然后在Master节点关闭SCM Server, Agent 服务,

              /opt/cm-5.0.0/etc/init.d/cloudera-scm-server stop  

              /opt/cm-5.0.0/etc/init.d/cloudera-scm-agent stop

        在其他Salve节点也分别执行:  /opt/cm-5.0.0/etc/init.d/cloudera-scm-agent stop

          3、然后在Master启动SCM Server , 所有节点在分别启动SCM Agent 

           /opt/cm-5.0.0/etc/init.d/cloudera-scm-server start

         /opt/cm-5.0.0/etc/init.d/cloudera-scm-agent start

      4、最后登录Cloudera Manage管理页面,查看是否能够重新检测到各主机的CDH版本,如果无法检测,则需要在页面的又上角点击一个图标进入Parcel页面,重新进行分配!

    20150914补充

        5、在官网下载最新的CDH5 安装包:

        CDH-5.4.5-1.cdh5.4.5.p0.7-el6.parcel

        CDH-5.4.5-1.cdh5.4.5.p0.7-el6.parcel.sha1 ,将sha1后缀修改为sha

        manifest.json

        到主节点master 目录/opt/cloudera/parcel-repo/中。

         6、因公司环境是采用代理环境上网的,在安装集群的时候需要做些服务器网络上的配置。

        修改/etc/yum.conf文件,使得yum能够通过代理进行网络连接

        proxy=xxx:port
        proxy_username=xxname
        proxy_password=xxpassword

           修改/etc/profile设置shell客户端代理上网

        export http_proxy="http://username:password@xxx.com:port"
        export https_proxy="http://username:password@xxx.com:port"
        export ftp_proxy="http://username:password@xxx.com:port"

        最重要的是别忘记,服务器间访问不使用代理,否则主节点的pacel包无法分配到各个子节点上!
        export no_proxy="localhost,127.0.0.1,192.168.122.*,master,slave01,slave02,slave03,slave04,slave05,slave06"

      

  • 相关阅读:
    Codeforces 46D Parking Lot
    矩阵快速幂
    Codeforces 295A Greg and Array
    hihocoder 1154 Spring Outing
    51NOD 1400 序列分解
    最短路之Dijkstra算法
    连通性1 求无向图的low值
    用数组实现临接表
    hihocoder 1181 欧拉路.二
    TCP多线程聊天室
  • 原文地址:https://www.cnblogs.com/tmeily/p/4597335.html
Copyright © 2011-2022 走看看