redis集群

Redis集群介绍
Redis 集群是一个提供在多个Redis间节点间共享数据的程序集。
Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情况下可能会导致不可预料的错误.

Redis 集群通过分区来提供一定程度的可用性,在实际环境中当某个节点宕机或者不可达的情况下继续处理命令. Redis 集群的优势:

自动分割数据到不同的节点上

整个集群的部分节点失败或者不可达的情况下能够继续处理命令

Redis 集群的数据分片

Redis 集群没有使用一致性hash, 而是引入了 哈希槽的概念.Redis 集群有16384个哈希槽,每个key通过CRC16校验后对16384取模来决定放置哪个槽.集群的每个节点负责一部分hash槽,举个例子,比如当前集群有3个节点,那么:
节点 A 包含 0 到 5500号哈希槽.
节点 B 包含5501 到 11000 号哈希槽.
节点 C 包含11001 到 16384号哈希槽.

这种结构很容易添加或者删除节点. 比如如果我想新添加个节点D, 我需要从节点 A, B, C中得部分槽到D上. 如果我像移除节点A,需要将A中得槽移到B和C节点上,然后将没有任何槽的A节点从集群中移除即可. 由于从一个节点将哈希槽移动到另一个节点并不会停止服务,所以无论添加删除或者改变某个节点的哈希槽的数量都不会造成集群不可用的状态.

Redis 一致性保证

Redis 并不能保证数据的强一致性. 这意味这在实际中集群在特定的条件下可能会丢失写操作.
第一个原因是因为集群是用了异步复制. 写操作过程:
客户端向主节点B写入一条命令.
主节点B向客户端回复命令状态.
主节点将写操作复制给他得从节点 B1, B2 和 B3.
主节点对命令的复制工作发生在返回命令回复之后， 因为如果每次处理命令请求都需要等待复制操作完成的话， 那么主节点处理命令请求的速度将极大地降低 —— 我们必须在性能和一致性之间做出权衡。 注意：Redis 集群可能会在将来提供同步写的方法。 Redis 集群另外一种可能会丢失命令的情况是集群出现了网络分区， 并且一个客户端与至少包括一个主节点在内的少数实例被孤立。
举个例子 假设集群包含 A 、 B 、 C 、 A1 、 B1 、 C1 六个节点， 其中 A 、B 、C 为主节点， A1 、B1 、C1 为A，B，C的从节点， 还有一个客户端 Z1 假设集群中发生网络分区，那么集群可能会分为两方，大部分的一方包含节点 A 、C 、A1 、B1 和 C1 ，小部分的一方则包含节点 B 和客户端 Z1 .
Z1仍然能够向主节点B中写入, 如果网络分区发生时间较短,那么集群将会继续正常运作,如果分区的时间足够让大部分的一方将B1选举为新的master，那么Z1写入B中得数据便丢失了.
注意， 在网络分裂出现期间， 客户端 Z1 可以向主节点 B 发送写命令的最大时间是有限制的， 这一时间限制称为节点超时时间（node timeout）， 是 Redis 集群的一个重要的配置选项：

搭建并使用Redis集群

环境centos6.7 虚拟机，已安装了redis (安装教程可参考另外一篇博客http://blog.csdn.net/sunqingzhong44/article/details/70761670）

要让集群正常运作至少需要三个主节点，， 强烈建议使用六个节点： 其中三个为主节点， 而其余三个则是各个主节点的从节点。

我这里在一台虚拟机上搭建，六个节点分别为7001—7006

1.创建目录结构：

mkdir /usr/local/redis-cluster  

mkdir /usr/local/redis-cluster/7001

mkdir /usr/local/redis-cluster/7002

mkdir /usr/local/redis-cluster/7003

mkdir /usr/local/redis-cluster/7004

mkdir /usr/local/redis-cluster/7005

mkdir /usr/local/redis-cluster/7006

创建完成后如下：

2.修改配置文件

从源码包中复制一份配置文件redis.cnf,到7001下，修改配置文件中以下各项：

daemonize yes  //后台运行port 7001 #端口bind #ip地址dir /usr/local/redis-cluster/7001/   # 指定文件存放目录cluster-enabled yes  #启动集群模式cluster-node-timeout 5000 #超时时间，如果5000秒没有响应，就认为挂掉了appendonly yes     #开启aof模式cluster-config-file neodes7001.conf    #cluster配置文件(启动自动生成

复制redis.cnf 到各个节点下并且修改7001：

cp /usr/local/redis-cluster/7001/redis.cnf     /usr/local/redis-cluster/7002/  &&  sed 's/7001/7002/g

cp /usr/local/redis-cluster/7001/redis.cnf     /usr/local/redis-cluster/7003/  &&  sed 's/7001/7003/g

cp /usr/local/redis-cluster/7001/redis.cnf     /usr/local/redis-cluster/7004/  &&  sed 's/7001/7004/g

cp /usr/local/redis-cluster/7001/redis.cnf     /usr/local/redis-cluster/7005/  &&  sed 's/7001/7005/g

cp /usr/local/redis-cluster/7001/redis.cnf     /usr/local/redis-cluster/7006/  &&  sed 's/7001/7006/g

3.安装ruby

yum -y install ruby ruby-devel rubygems rpm-build

gem install redis

4.启动redis 实例

/usr/local/redis/bin/redis-server /usr/local/redis-cluster/7001/redis.conf 
/usr/local/redis/bin/redis-server /usr/local/redis-cluster/7002/redis.conf 
/usr/local/redis/bin/redis-server /usr/local/redis-cluster/7003/redis.conf 
/usr/local/redis/bin/redis-server /usr/local/redis-cluster/7004/redis.conf 
/usr/local/redis/bin/redis-server /usr/local/redis-cluster/7005/redis.conf 
/usr/local/redis/bin/redis-server /usr/local/redis-cluster/7006/redis.conf

5.执行redis-trib.rb 脚本，redis-trib 位于 Redis 源码的 src 文件夹中， 它是一个 Ruby 程序， 这个程序通过向实例发送特殊命令来完成创建新集群， 检查集群， 或者对集群进行重新分片（reshared）等工作。，执行redis-trib.rb  选项–replicas 1 表示我们希望为集群中的每个主节点创建一个从节点。

执行出现询问直接yes

cd /home/redis-3.0.7/src/

./redis-trib.rb create --replicas 1 192.168.1.235:7001  192.168.1.235:7002 192.168.1.235:7003 192.168.1.235:7005 192.168.1.235:7004 192.168.1.235:7006

集群搭建到此成功

6测试

使用 /usr/local/redis/bin/redis-cli -c -h 192.168.1.235 -p 7001  链接redis,输入命令cluster nodes 查看集群节点