zoukankan      html  css  js  c++  java
  • 搭建redis集群

    集群三种模式
    1. 主从
    2. Sentinel
    3. Cluster
    
    主从模式介绍
    主从模式是三种模式中最简单的,在主从复制中,数据库分为两类:主数据库(master)和从数据库(slave)。
    
    其中主从复制有如下特点:
    主数据库可以进行读写操作,当读写操作导致数据变化时会自动将数据同步给从数据库
    
    从数据库一般都是只读的,并且接收主数据库同步过来的数据
    
    一个master可以拥有多个slave,但是一个slave只能对应一个master
    
    slave挂了不影响其他slave的读和master的读和写,重新启动后会将数据从master同步过来
    
    master挂了以后,不影响slave的读,但redis不再提供写服务,master重启后redis将重新对外提供写服务
    
    master挂了以后,不会在slave节点中重新选一个master
    
    工作机制:
    
    当slave启动后,主动向master发送SYNC命令。master接收到SYNC命令后在后台保存快照(RDB持久化)和缓存保存快照这段时间的命令
    然后将保存的快照文件和缓存的命令发送给slave。slave接收到快照文件和命令后加载快照文件和缓存的执行命令。
    
    复制初始化后,master每次接收到的写命令都会同步发送给slave,保证主从数据一致性。
    搭建主从模式
    wget http://download.redis.io/releases/redis-5.0.4.tar.gz
    
    tar zxf redis-5.0.4.tar.gz && mv redis-5.0.4/ /usr/local/redis
    
    cd /usr/local/redis && make && make install
    
    192.168.100.101
    mkdir -p /data/redis
    
    vim /usr/local/redis/redis.conf
    
    bind 192.168.100.101               #监听ip,多个ip用空格分隔
    daemonize yes               #允许后台启动
    logfile "/usr/local/redis/redis.log"                #日志路径
    dir /data/redis                 #数据库备份文件存放目录
    masterauth 123456               #slave连接master密码,master可省略
    requirepass 123456              #设置master连接密码,slave可省略
    
    appendonly yes                  #在/data/redis/目录生成appendonly.aof文件,将每一次写操作请求都追加到appendonly.aof 文件中
    
    echo 'vm.overcommit_memory=1' >> /etc/sysctl.conf
    
    sysctl -p
    
    192.168.100.102
    # mkdir -p /data/redis
    
    # vim /usr/local/redis/redis.conf
    
    bind 192.168.100.102
    daemonize yes
    logfile "/usr/local/redis/redis.log"
    dir /data/redis
    replicaof 192.168.100.101 6379
    masterauth 123456
    requirepass 123456
    appendonly yes
    
    echo 'vm.overcommit_memory=1' >> /etc/sysctl.conf
    sysctl -p
    
    
    192.168.100.103
    # mkdir -p /data/redis
    
    # vim /usr/local/redis/redis.conf
    
    bind 192.168.100.103
    daemonize yes
    logfile "/usr/local/redis/redis.log"
    dir /data/redis
    replicaof 192.168.100.101 6379
    masterauth 123456
    requirepass 123456
    appendonly yes
    
    echo 'vm.overcommit_memory=1' >> /etc/sysctl.conf
    
    sysctl -p
    
    启动redis
    redis-cli -h 192.168.100.101 -a 123456
    192.168.100.101:6379> info replication
    Sentinel模式
    Sentinel模式介绍
    sentinel中文含义为哨兵,它的作用就是监控redis集群的运行状况,特点如下:
    sentinel模式是建立在主从模式的基础上,如果只有一个Redis节点,sentinel就没有任何意义
    
    当master挂了以后,sentinel会在slave中选择一个做为master,并修改它们的配置文件,其他slave的配置文件也会被修改,比如slaveof属性会指向新的master
    
    当master重新启动后,它将不再是master而是做为slave接收新的master的同步数据
    
    sentinel因为也是一个进程有挂掉的可能,所以sentinel也会启动多个形成一个sentinel集群
    
    多sentinel配置的时候,sentinel之间也会自动监控
    
    当主从模式配置密码时,sentinel也会同步将配置信息修改到配置文件中,不需要担心
    
    一个sentinel或sentinel集群可以管理多个主从Redis,多个sentinel也可以监控同一个redis
    
    sentinel最好不要和Redis部署在同一台机器,不然Redis的服务器挂了以后,sentinel也挂了
    
    工作机制:
    每个sentinel以每秒钟一次的频率向它所知的master,slave以及其他sentinel实例发送一个 PING 命令 
    
    如果一个实例距离最后一次有效回复 PING 命令的时间超过 down-after-milliseconds 选项所指定的值, 则这个实例会被sentinel标记为主观下线。 
    
    如果一个master被标记为主观下线,则正在监视这个master的所有sentinel要以每秒一次的频率确认master的确进入了主观下线状态
    
    当有足够数量的sentinel(大于等于配置文件指定的值)在指定的时间范围内确认master的确进入了主观下线状态, 则master会被标记为客观下线 
    
    在一般情况下, 每个sentinel会以每 10 秒一次的频率向它已知的所有master,slave发送 INFO 命令 
    
    当master被sentinel标记为客观下线时,sentinel向下线的master的所有slave发送 INFO 命令的频率会从 10 秒一次改为 1 秒一次 
    
    若没有足够数量的sentinel同意master已经下线,master的客观下线状态就会被移除;
    若master重新向sentinel的 PING 命令返回有效回复,master的主观下线状态就会被移除
    
    使用sentinel模式的时候,客户端就不要直接连接Redis,而是连接sentinel的ip和port,由sentinel来提供具体的可提供服务的Redis实现,这样当master节点挂掉以后,sentinel就会感知并将新的master节点提供给使用者
    
    192.168.100.101
    vim /usr/local/redis/sentinel.conf
    
    daemonize yes
    logfile "/usr/local/redis/sentinel.log"
    dir "/usr/local/redis/sentinel"                 #sentinel工作目录
    sentinel monitor mymaster 192.168.100.101 6379 2                 #判断master失效至少需要2个sentinel同意,建议设置为n/2+1,n为sentinel个数
    sentinel auth-pass mymaster 123456
    sentinel down-after-milliseconds mymaster 30000                 #判断master主观下线时间,默认30s
    
    sentinel auth-pass mymaster 123456需要配置在sentinel monitor mymaster 192.168.100.101 6379 2下面,否则启动报错: 
    Cluster模式
    Cluster模式介绍
    sentinel模式基本可以满足一般生产的需求,具备高可用性。但是当数据量过大到一台服务器存放不下的情况时,主从模式或sentinel模式就不能满足需求了,这个时候需要对存储的数据进行分片,将数据存储到多个Redis实例中。cluster模式的出现就是为了解决单机Redis容量有限的问题,将Redis的数据根据一定的规则分配到多台机器。
    
    cluster可以说是sentinel和主从模式的结合体,通过cluster可以实现主从和master重选功能,所以如果配置两个副本三个分片的话,就需要六个Redis实例。因为Redis的数据是根据一定规则分配到cluster的不同机器的,当数据量过大时,可以新增机器进行扩容。
    
    使用集群,只需要将redis配置文件中的cluster-enable配置打开即可。每个集群中至少需要三个主数据库才能正常运行,新增节点非常方便。
    
    cluster集群特点:
    多个redis节点网络互联,数据共享
    
    所有的节点都是一主一从(也可以是一主多从),其中从不提供服务,仅作为备用
    
    不支持同时处理多个key(如MSET/MGET),因为redis需要把key均匀分布在各个节点上,
    并发量很高的情况下同时创建key-value会降低性能并导致不可预测的行为
    
    支持在线增加、删除节点
    
    客户端可以连接任何一个主节点进行读写
    三台机器,分别开启两个redis服务(端口)
    
    192.168.100.101             端口:7001,7002
    
    192.168.100.102              端口:7003,7004
    
    192.168.100.103              端口:7005,7006
    
    192.168.100.101
    mkdir /usr/local/redis/cluster
    
    cp /usr/local/redis/redis.conf /usr/local/redis/cluster/redis_7001.conf
    
    cp /usr/local/redis/redis.conf /usr/local/redis/cluster/redis_7002.conf
    
    chown -R redis:redis /usr/local/redis
    
    mkdir -p /data/redis/cluster/{redis_7001,redis_7002} && chown -R redis:redis /data/redis
    
    vim /usr/local/redis/cluster/redis_7001.conf
    
    bind 192.168.100.101
    port 7001
    daemonize yes
    pidfile "/var/run/redis_7001.pid"
    logfile "/usr/local/redis/cluster/redis_7001.log"
    dir "/data/redis/cluster/redis_7001"
    #replicaof 192.168.100.101 6379
    masterauth 123456
    requirepass 123456
    appendonly yes
    cluster-enabled yes
    cluster-config-file nodes_7001.conf
    cluster-node-timeout 15000
    
    # vim /usr/local/redis/cluster/redis_7002.conf
    
    bind 192.168.100.101
    port 7002
    daemonize yes
    pidfile "/var/run/redis_7002.pid"
    logfile "/usr/local/redis/cluster/redis_7002.log"
    dir "/data/redis/cluster/redis_7002"
    #replicaof 192.168.100.101 6379
    masterauth "123456"
    requirepass "123456"
    appendonly yes
    cluster-enabled yes
    cluster-config-file nodes_7002.conf
    cluster-node-timeout 15000
    
    其它两台机器配置与192.168.100.101一致,此处省略
    redis-cli -a 123456 --cluster create 192.168.100.101:7001 192.168.100.101:7002 192.168.100.102:7003 192.168.100.102:7004 192.168.100.103:7005 192.168.100.103:7006 --cluster-replicas 1
    
    ls /data/redis/cluster/redis_7001/
    appendonly.aof  dump.rdb  nodes-7001.conf
    
    redis-cli -c -h 192.168.100.101 -p 7001 -a 123456
    192.168.100.101:7001> CLUSTER INFO
    192.168.100.101:7001> CLUSTER NODES 
    cp /usr/local/redis/cluster/redis_7003.conf /usr/local/redis/cluster/redis_7007.conf
    
    vim /usr/local/redis/cluster/redis_7007.conf
    bind 192.168.100.102
    port 7007
    daemonize yes
    pidfile "/var/run/redis_7007.pid"
    logfile "/usr/local/redis/cluster/redis_7007.log"
    dir "/data/redis/cluster/redis_7007"
    #replicaof 192.168.100.101 6379
    masterauth "123456"
    requirepass "123456"
    appendonly yes
    cluster-enabled yes
    cluster-config-file nodes_7007.conf
    cluster-node-timeout 15000
    
    mkdir /data/redis/cluster/redis_7007
    
    chown -R redis:redis /usr/local/redis && chown -R redis:redis /data/redis
    
    redis-server /usr/local/redis/cluster/redis_7007.conf 
    
    192.168.100.102:7003> CLUSTER MEET 192.168.100.102 7007
    192.168.100.102:7003> CLUSTER NODES
    
    删除节点
    CLUSTER FORGET 6788453ee9a8d7f72b1d45a9093838efd0e501f1
    
    保存配置
    CLUSTER SAVECONFIG

      

      

     

  • 相关阅读:
    学习进度——第十周
    梦断代码读后感03
    DFS入门——数的拆分
    DFS入门——素数环问题
    排列LCS问题
    洛谷P1436 棋盘分割 题解 二维区间DP
    洛谷P1241 括号序列 题解 栈
    《算法艺术与信息学竞赛》第1章 算法与数据结构 学习笔记
    洛谷P1563 玩具谜题(NOIP提高组2016 D1T1)题解 模拟
    洛谷P5022 旅行(NOIP提高组2018 D2T1)题解 贪心/去环
  • 原文地址:https://www.cnblogs.com/The-day-of-the-wind/p/9627746.html
Copyright © 2011-2022 走看看