zoukankan      html  css  js  c++  java
  • Redis 集群--------Redis-cluster

    1集群方案

    1.官方方案redis-cluster搭建实战

    2.客户端分片技术(不推荐),扩容/缩容时,必须手动调整分片程序,出现故障不能自动转移

    3.可以使用主从复制方式(不推荐)

    4.使用一些代理工具

    我们知道主从复制方式实现集群,性能不是很好,因为只有一个master,其他都是slave,slave上只能符读,而且都是master 的备份信息,所以比较冗余

    所以我们官方推荐的Redis-cluster来实现集群。

    2,Redis-cluster 实现原理

    3,搭建集群环境

    安装部署任何一个应用其实都很简单,只要安装步骤一步一步来就行了。下面说一下 Redis 集群搭建规划,由于集群至少需要6个节点(3主3从模式)。
    
    创建文件夹 我们计划集群中 Redis 节点的端口号为 9001-9006 ,端口号即集群下各实例文件夹。数据存放在 端口号/data 文件夹中。
    mkdir /usr/local/redis-cluster
    cd redis-cluster/
    mkdir -p 9001/data 9002/data 9003/data 9004/data 9005/data 9006/data

       

    复制脚本
    在 /usr/local/redis-cluster 下创建 bin 文件夹,用来存放集群运行脚本,并把安装好的 Redis 的 src 路径下的运行脚本拷贝过来。看命令:
    cd /usr/local/redis-cluster
    mkdir bin
    
    cd /usr/local/redis-3.2.9/src
    
    cp mkreleasehdr.sh redis-benchmark redis-check-aof  redis-cli redis-server redis-trib.rb /usr/local/redis-cluster/bin
    复制一个新 Redis 实例
    
    我们现在从已安装好的 Redis 中复制一个新的实例到 9001 文件夹,并修改 redis.conf 配置。
    cp -r /usr/local/redis    /usr/local/redis-cluster/9001
    
    注意,修改 redis.conf 配置和单点唯一区别是下图部分,其余还是常规的这几项:
    port 9001(每个节点的端口号)
    daemonize yes
    bind 192.168.119.131(绑定当前机器 IP)
    dir /usr/local/redis-cluster/9001/data/(数据文件存放位置)
    pidfile /var/run/redis_9001.pid(pid 9001和port要对应)
    cluster-enabled yes(启动集群模式)
    cluster-config-file nodes9001.conf(9001和port要对应)
    cluster-node-timeout 15000
    appendonly yes
    再复制出五个新 Redis 实例
    我们已经完成了一个节点了,其实接下来就是机械化的再完成另外五个节点,其实可以这么做:把 9001 实例 复制到另外五个文件夹中,唯一要修改的就是 redis.conf 中的所有和端口的相关的信息即可,其实就那么四个位置。开始操作,看图:
    cp -rf /usr/local/redis-cluster/9001/*   /usr/local/redis-cluster/9002
    cp -rf /usr/local/redis-cluster/9001/*   /usr/local/redis-cluster/9003
    cp -rf /usr/local/redis-cluster/9001/*   /usr/local/redis-cluster/9004
    cp -rf /usr/local/redis-cluster/9001/*   /usr/local/redis-cluster/9005
    cp -rf /usr/local/redis-cluster/9001/*   /usr/local/redis-cluster/9006
    cp -rf 命令是不使用别名来复制,因为 cp 其实是别名 cp -i,操作时会有交互式确认,比较烦人。
    
    修改 9002-9006 的 redis.conf 文件
    
    其实非常简单了,你通过搜索会发现其实只有四个点需要修改,我们全局替换下吧,进入相应的节点文件夹,做替换就好了。命令非常简单,看图:
    vi /usr/local/redis-cluster/9002/redis/etc/redis.conf
    vi /usr/local/redis-cluster/9003/redis/etc/redis.conf
    vi /usr/local/redis-cluster/9004/redis/etc/redis.conf
    vi /usr/local/redis-cluster/9005/redis/etc/redis.conf
    vi /usr/local/redis-cluster/9006/redis/etc/redis.conf
    
    
    
    %s/9001/9002
    %s/9001/9003
    %s/9001/9004
    %s/9001/9005
    %s/9001/9006
    
    
    其实我们也就是替换了下面这四行:
    
    
    port 9002
    dir /usr/local/redis-cluster/9002/data/
    cluster-config-file nodes-9002.conf
    pidfile /var/run/redis_9002.pid
    启动9001-9006六个节点
    /usr/local/redis/bin/redis-server  /usr/local/redis-cluster/9001/redis/etc/redis.conf
    /usr/local/redis/bin/redis-server  /usr/local/redis-cluster/9002/redis/etc/redis.conf
    /usr/local/redis/bin/redis-server  /usr/local/redis-cluster/9003/redis/etc/redis.conf
    /usr/local/redis/bin/redis-server  /usr/local/redis-cluster/9004/redis/etc/redis.conf
    /usr/local/redis/bin/redis-server  /usr/local/redis-cluster/9005/redis/etc/redis.conf
    /usr/local/redis/bin/redis-server  /usr/local/redis-cluster/9006/redis/etc/redis.conf
    随便找一个节点测试试
    /usr/local/redis-cluster/9001/redis/bin/redis-cli -h 192.168.212.150 -c -p 9001
    (error) CLUSTERDOWN Hash slot not served
    
    这是因为虽然我们配置并启动了 Redis 集群服务,但是他们暂时还并不在一个集群中,互相直接发现不了,而且还没有可存储的位置,就是所谓的slot(槽)。
    
    安装集群所需软件
    
    由于 Redis 集群需要使用 ruby 命令,所以我们需要安装 ruby 和相关接口。
    
    
    yum install ruby
    yum install rubygems
    gem install redis  使用本地上传方式
    把 redis-4.2.1.gem 下载下来,放到文件夹中,启动命令 gem install -l redis-3.2.1.gem
    
    
    
    
    /usr/local/redis-cluster/bin/redis-trib.rb create --replicas 1 192.168.212.150:9001 192.168.212.150:9002 192.168.212.150:9003 192.168.212.150:9004 192.168.212.150:9005 192.168.212.150:9006
    
    
    简单解释一下这个命令:调用 ruby 命令来进行创建集群,--replicas 1 表示主从复制比例为 1:1,即一个主节点对应一个从节点;然后,默认给我们分配好了每个主节点和对应从节点服务,以及 solt 的大小,因为在 Redis 集群中有且仅有 16383 个 solt ,默认情况会给我们平均分配,当然你可以指定,后续的增减节点也可以重新分配。
    
    M: 10222dee93f6a1700ede9f5424fccd6be0b2fb73 为主节点Id
    
    S: 9ce697e49f47fec47b3dc290042f3cc141ce5aeb 192.168.119.131:9004 replicates 10222dee93f6a1700ede9f5424fccd6be0b2fb73 从节点下对应主节点Id
    
    目前来看,9001-9003 为主节点,9004-9006 为从节点,并向你确认是否同意这么配置。输入 yes 后,会开始集群创建。
    
    记住输入yes
    
    验证集群环境
    
    依然是通过客户端命令连接上,通过集群命令看一下状态和节点信息等。
    


    总结一下 这一篇 Redis 集群部署搭建的文章真的是一步一步的走下来的,只要你安装我的步骤来,就保证你能成功搭建一个 Redis 集群玩玩,也可以这么说,除了步骤繁琐外,几乎不存在技术含量,估计能看完的人都感觉累(说真的,写这种文章真的很累人)。 接下来可能就是动态扩容、增加节点和减少节点,重新分配槽大小等,当然,还有最重要的就是怎么和我们程序结合起来,以及如何更好的把 Redis 缓存集群发挥出应有的效果,这些才是最重要的。

    4,redis-cli -h 192.168.178.110 -c -p 9001  ,加参数 -c 可连接到集群,因为上面 redis.conf 将 bind 改为了ip地址,所以 -h 参数不可以省略

         没写-c,虽然也有集群环境,但是,我操作的时候,它会提醒报错,要去正确的节点进行操作

       192.168.178.110:9001> set name 'chris'
       (error) MOVED 5798 192.168.178.110:9002

          写-c 之后,它会转发到相应的节点进行操作  

    192.168.178.110:9001> set name 22
    -> Redirected to slot [5798] located at 192.168.178.110:9002

    搭建的集群环境是三主三从,主的环境挂了之后,可以在从的节点找到数据

  • 相关阅读:
    Codeforces Round #706 (Div. 2)
    Caddi Programming Contest 2021(AtCoder Beginner Contest 193)
    [ARC116] Deque Game
    Codeforces Round #721 (Div. 2)
    Codeforces Round #618 (Div. 1)
    Educational Codeforces Round 109 (Rated for Div. 2)
    [ABC201F] Insertion Sort
    AtCoder Regular Contest 119
    Codeforces Global Round 13
    Codeforces Round #673 (Div. 1)
  • 原文地址:https://www.cnblogs.com/pickKnow/p/11313772.html
Copyright © 2011-2022 走看看