zoukankan      html  css  js  c++  java
  • CDH 集群环境Master节点IP变更

        因为集群中的节点服务器都是通过DHCP自动分配IP,原则上重启了IP也不会变更,因为在启动的时候已经为Mac地址固定分配了一个IP地址,除非Mac地址变更。巧合的是,昨天早上扫地大妈把某Master的节点服务器因为擦桌子而把网线给扯掉了,等我发现该节点连接不上的时候,重新插上网线之后结果Ip变了。想了很多中的方式,将所有节点的Ip设置为手动配置,但是手动配置IP,该节点就无法与其他节点通信,网络连接失败,更不能连接Internet。百思不得其解。

       无奈只能再此将Master节点按照自动分配的IP进行了。

        1、首先得修改各个节点的hosts文件,将原来Master节点的IP更改为新的IP地址,注意所有的节点都必须更新。

        2、然后在Master节点关闭SCM Server, Agent 服务,

              /opt/cm-5.0.0/etc/init.d/cloudera-scm-server stop  

              /opt/cm-5.0.0/etc/init.d/cloudera-scm-agent stop

        在其他Salve节点也分别执行:  /opt/cm-5.0.0/etc/init.d/cloudera-scm-agent stop

          3、然后在Master启动SCM Server , 所有节点在分别启动SCM Agent 

           /opt/cm-5.0.0/etc/init.d/cloudera-scm-server start

         /opt/cm-5.0.0/etc/init.d/cloudera-scm-agent start

      4、最后登录Cloudera Manage管理页面,查看是否能够重新检测到各主机的CDH版本,如果无法检测,则需要在页面的又上角点击一个图标进入Parcel页面,重新进行分配!

    20150914补充

        5、在官网下载最新的CDH5 安装包:

        CDH-5.4.5-1.cdh5.4.5.p0.7-el6.parcel

        CDH-5.4.5-1.cdh5.4.5.p0.7-el6.parcel.sha1 ,将sha1后缀修改为sha

        manifest.json

        到主节点master 目录/opt/cloudera/parcel-repo/中。

         6、因公司环境是采用代理环境上网的,在安装集群的时候需要做些服务器网络上的配置。

        修改/etc/yum.conf文件,使得yum能够通过代理进行网络连接

        proxy=xxx:port
        proxy_username=xxname
        proxy_password=xxpassword

           修改/etc/profile设置shell客户端代理上网

        export http_proxy="http://username:password@xxx.com:port"
        export https_proxy="http://username:password@xxx.com:port"
        export ftp_proxy="http://username:password@xxx.com:port"

        最重要的是别忘记,服务器间访问不使用代理,否则主节点的pacel包无法分配到各个子节点上!
        export no_proxy="localhost,127.0.0.1,192.168.122.*,master,slave01,slave02,slave03,slave04,slave05,slave06"

      

  • 相关阅读:
    2015南阳CCPC G
    2015南阳CCPC D
    2015南阳CCPC C
    2015南阳CCPC A
    Codeforces Round #327 (Div. 2) E. Three States bfs
    Codeforces Round #327 (Div. 2) B. Rebranding 模拟
    Codeforces Round #327 (Div. 2)C. Median Smoothing 构造
    SEO那些事:一句代码一键分享网站
    用原型链的方式写一个类和子类
    用原型链的方式写一个类和子类
  • 原文地址:https://www.cnblogs.com/tmeily/p/4597335.html
Copyright © 2011-2022 走看看