zoukankan      html  css  js  c++  java
  • ZooKeeper分布式集群安装

      我特意选择了稳定版......

      奇数意思是说奇数和偶数对故障的容忍度是一致的....所以建议配置奇数个,并不是必须奇数...

    一、master节点上安装配置

    1、下载并解压ZooKeeper-3.4.6.tar.gz

    tar -zxvf zookeeper-3.4.6.tar.gz

      这里路径为 /home/fesh/zookeeper-3.4.6

    2、设置the Java heap size  (个人感觉一般不需要配置)

      保守地use a maximum heap size of 3GB for a 4GB machine

    3、$ZOOKEEPER_HOME/conf/zoo.cfg

    cp zoo_sample.cfg zoo.cfg

       新建此配置文件,并设置内容

    复制代码
    # The number of milliseconds of each tick
    tickTime=2000
    # The number of ticks that the initial 
    # synchronization phase can take
    initLimit=10
    # The number of ticks that can pass between 
    # sending a request and getting an acknowledgement
    syncLimit=5
    # the directory where the snapshot is stored.
    # do not use /tmp for storage, /tmp here is just 
    # example sakes.
    dataDir=/home/fesh/data/zookeeper
    # the port at which the clients will connect
    clientPort=2181

     server.1=master:2888:3888
     server.2=slave1:2888:3888
     server.3=slave2:2888:3888

    复制代码

    4、/home/fesh/data/zookeeper/myid

      在节点配置的dataDir指定的目录下面,创建一个myid文件,里面内容为一个数字,用来标识当前主机,$ZOOKEEPER_HOME/conf/zoo.cfg文件中配置的server.X,则myid文件中就输入这个数字X。(即在每个节点上新建并设置文件myid,其内容与zoo.cfg中的id相对应)这里master节点为 1

    mkdir -p /home/fesh/data/zookeeper
    cd /home/fesh/data/zookeeper
    touch myid
    echo "1" > myid

    5、设置日志

    conf/log4j.properties

    # Define some default values that can be overridden by system properties
    zookeeper.root.logger=INFO, CONSOLE

    改为

    # Define some default values that can be overridden by system properties  
    zookeeper.root.logger=INFO, ROLLINGFILE

    #
    # Add ROLLINGFILE to rootLogger to get log file output
    #    Log DEBUG level and above messages to a log file
    log4j.appender.ROLLINGFILE=org.apache.log4j.RollingFileAppender

    改为---每天一个log日志文件,而不是在同一个log文件中递增日志

    #
    # Add ROLLINGFILE to rootLogger to get log file output
    #    Log DEBUG level and above messages to a log file
    log4j.appender.ROLLINGFILE=org.apache.log4j.DailyRollingFileAppender

    bin/zkEvn.sh

    复制代码
    if [ "x${ZOO_LOG_DIR}" = "x" ]
    then
        ZOO_LOG_DIR="."
    fi
    
    if [ "x${ZOO_LOG4J_PROP}" = "x" ]
    then
        ZOO_LOG4J_PROP="INFO,CONSOLE"
    fi
    复制代码

    改为

    复制代码
    if [ "x${ZOO_LOG_DIR}" = "x" ]
    then
        ZOO_LOG_DIR="$ZOOBINDIR/../logs"
    fi
    
    if [ "x${ZOO_LOG4J_PROP}" = "x" ]
    then
        ZOO_LOG4J_PROP="INFO,ROLLINGFILE"
    fi
    复制代码

    二、从master节点分发文件到其他节点

    1、在master节点的/home/fesh/目录下

    scp -r zookeeper-3.4.6 slave1:~/
    scp -r zookeeper-3.4.6 slave2:~/
    scp -r data slave1:~/
    scp -r data slave2:~/

    2、在slave1节点的/home/fesh/目录下

    vi ./data/zookeeper/myid

    修改为 2

    3、在slave2节点的/home/fesh/目录下

    vi ./data/zookeeper/myid

    修改为 3

    三、其他配置

    1、在每个节点配置/etc/hosts (并保证每个节点/etc/hostname中分别为master、slave1、slave2) 主机 -IP地址映射

    192.168.145.129    master
    192.168.145.130    slave1
    192.168.145.131    slave2

    2、在每个节点配置环境变量/etc/profile

    #Set ZOOKEEPER_HOME ENVIRONMENT
    export ZOOKEEPER_HOME=/home/fesh/zookeeper-3.4.6
    export PATH=$PATH:$ZOOKEEPER_HOME/bin

    四、启动

     在每个节点上$ZOOKEEPER_HOME目录下,运行 (这里的启动顺序为 master >  slave1 >  slave2 )

    bin/zkServer.sh start

    并用命令查看启动状态

    bin/zkServer.sh status

    master节点

    slave1节点

    slave2节点

     

    (注:之前我配置正确的,但是一直都是,每个节点上都启动了,但就是互相连接不上,最后发现好像是防火墙的原因,啊啊啊!一定要先把防火墙关了!  sudo ufw disable )

    五、结束语

    5.1 日志报错

      查看$ZOOKEEPER_HOME/zookeeper.out 日志,会发现开始会报错,但当leader选出来之后 就没有问题了。

      我启动的顺序是slave-01>slave-02>slave-03,由于ZooKeeper集群启动的时候,每个结点都试图去连接集群中的其它结点,先启动的肯定连不上后面还没启动的,所以上面日志前面部分的异常是可以忽略的。通过后面部分可以看到,集群在选出一个Leader后,最后稳定了。

      其他结点可能也出现类似问题,属于正常。

    5.2 时钟同步

      zookeeper等需要其他机器和master时间同步。

  • 相关阅读:
    品味性能之道<六>:图形化SQL分析工具
    品味性能之道<五>:SQL分析工具
    品味性能之道<四>:管理重于技术
    品味性能之道<三>:方法论
    品味性能之道<二>:性能工程师可以具备的专业素养
    品味性能之道<一>:性能测试思维与误区
    网络协议学习笔记
    Java内存泄露监控工具:JVM监控工具介绍
    Loadrunner脚本回放无法准确定位欲删除元素
    C++ 虚函数
  • 原文地址:https://www.cnblogs.com/hxsyl/p/6113251.html
Copyright © 2011-2022 走看看