2019-06-01_160415.png

推荐博客:https://www.jianshu.com/p/7b89cba5864c
https://www.kancloud.cn/zatko/redis/2274294

集群的相关命令:

https://www.cnblogs.com/kevingrace/p/7910692.html

总结:

1、官方推荐是至少三主三从。
2、哨兵机制其本质还是master-slave集群,即:1主N从的模式。也就是master服务器依然只有1个,并没有实现水平扩展。(没人用它了已经)
3、自从Redis 3.0版推出了Redis Cluster集群方案之后,很快的,大家都开始使用Redis Cluster集群替代了之前的种种方案。即三主三从集群模式。

redis集群 - 图3
redis集群 - 图4
redis集群 - 图5

redis集群的介绍

Redis 集群是一个提供在多个Redis节点之间共享数据的程序集。
Redis 集群并不支持同时处理多个键的 Redis 命令,因为这需要在多个节点间移动数据,这样会降低redis集群的性能,在高负载的情况下可能会导致不可预料的错误。
Redis 集群通过分区来提供一定程度的可用性,即使集群中有一部分节点失效或者无法进行通讯, 集群也可以继续处理命令请求。

Redis 集群的优势:

1.缓存永不宕机:启动集群,永远让集群的一部分起作用。主节点失效了子节点能迅速改变角色成为主节点,整个集群的部分节点失败或者不可达的情况下能够继续处理命令;

2.迅速恢复数据:持久化数据,能在宕机后迅速解决数据丢失的问题;

3.Redis可以使用所有机器的内存,变相扩展性能;

4.使Redis的计算能力通过简单地增加服务器得到成倍提升,Redis的网络带宽也会随着计算机和网卡的增加而成倍增长;

5.Redis集群没有中心节点,不会因为某个节点成为整个集群的性能瓶颈;

6.异步处理数据,实现快速读写。
image.png

redis集群环境搭建

由于redis集群当中最少需要三个主节点,每个主节点,最少需要一个对应的从节点,所以搭建redis集群最少需要三主三从的配置,所以redis集群最少需要6台redis的实例,我们这里使用三台机器,每台服务器上面运行两个redis的实例。我们这里使用node01服务器,通过配置不同的端口,实现redis集群的环境搭建

注意:可以多写几个配置文件,启动的时候选择不同的配置文件启动,来达到集群的效果

具体的配置文件就不贴了。自己配配拉倒了。很简单

第一步:node01服务器解压redis压缩包

node01执行以下命令重新解压redis压缩包到/export路径下

  1. cd /export/softwares/
  2. tar -zxf redis-3.2.8.tar.gz -C /export/

第二步:安装redis必须依赖环境并进行编译

node01执行以下命令安装redis的依赖环境

  1. yum -y install gcc-c++ tcl

对redis进行编译

  1. cd /export/redis-3.2.8
  2. make && make install

第三步:创建redis不同实例的配置文件夹

创建文件夹,并将redis的配置文件拷贝到以下这些目录

  1. cd /export/redis-3.2.8
  2. mkdir -p /export/redis-3.2.8/clusters/7001
  3. mkdir -p /export/redis-3.2.8/clusters/7002
  4. mkdir -p /export/redis-3.2.8/clusters/7003
  5. mkdir -p /export/redis-3.2.8/clusters/7004
  6. mkdir -p /export/redis-3.2.8/clusters/7005
  7. mkdir -p /export/redis-3.2.8/clusters/7006

第四步:修改redis的六个配置文件

node01执行以下命令修改redis的配置文件

  1. mkdir -p /export/redis-3.2.8/logs
  2. mkdir -p /export/redis-3.2.8/redisdata/7001
  3. mkdir -p /export/redis-3.2.8/redisdata/7002
  4. mkdir -p /export/redis-3.2.8/redisdata/7003
  5. mkdir -p /export/redis-3.2.8/redisdata/7004
  6. mkdir -p /export/redis-3.2.8/redisdata/7005
  7. mkdir -p /export/redis-3.2.8/redisdata/7006

第一个配置文件修改
vim /export/redis-3.2.8/redis.conf

bind node01 port 7001 cluster-enabled yes cluster-config-file nodes-7001.conf cluster-node-timeout 5000 appendonly yes daemonize yes pidfile /var/run/redis_7001.pid logfile “/export/redis-3.2.8/logs/7001.log” dir /export/redis-3.2.8/redisdata/7001

将修改后的文件拷贝到对应的文件夹下面去
cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7001
第二个配置文件修改

  1. cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7002
  2. vim /export/redis-3.2.8/clusters/7002/redis.conf

bind node01 port 7002 cluster-enabled yes cluster-config-file nodes-7002.conf cluster-node-timeout 5000 appendonly yes daemonize yes pidfile /var/run/redis_7002.pid logfile “/export/redis-3.2.8/logs/7002.log”

dir /export/redis-3.2.8/redisdata/7002

第三个配置文件修改

  1. cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7003
  2. vim /export/redis-3.2.8/clusters/7003/redis.conf

bind node01

port 7003

cluster-enabled yes

cluster-config-file nodes-7003.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7003.pid

logfile “/export/redis-3.2.8/logs/7003.log”

dir /export/redis-3.2.8/redisdata/7003


第四个配置文件修改

  1. cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7004
  2. vim
  3. /export/redis-3.2.8/clusters/7004/redis.conf

bind node01

port 7004

cluster-enabled yes

cluster-config-file nodes-7004.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7004.pid

logfile “/export/redis-3.2.8/logs/7004.log”

dir /export/servers/redis-3.2.8/redisdata/7004

第五个配置文件修改

  1. cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7005
  2. vim /export/redis-3.2.8/clusters/7005/redis.conf


bind node01

port 7005

cluster-enabled yes

cluster-config-file nodes-7005.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7005.pid

logfile “/export/redis-3.2.8/logs/7005.log”

dir /export/servers/redis-3.2.8/redisdata/7005

第六个配置文件修改

  1. cp /export/redis-3.2.8/redis.conf /export/redis-3.2.8/clusters/7006
  2. vim /export/redis-3.2.8/clusters/7006/redis.conf

bind node01

port 7006

cluster-enabled yes

cluster-config-file nodes-7006.conf

cluster-node-timeout 5000

appendonly yes

daemonize yes

pidfile /var/run/redis_7006.pid

logfile “/export/redis-3.2.8/logs/7006.log”

dir /export/servers/redis-3.2.8/redisdata/7006

第五步:启动redis进程

node01执行以下命令来启动redis集群

  1. cd /export/redis-3.2.8
  2. src/redis-server clusters/7001/redis.conf
  3. src/redis-server clusters/7002/redis.conf
  4. src/redis-server clusters/7003/redis.conf
  5. src/redis-server clusters/7004/redis.conf
  6. src/redis-server clusters/7005/redis.conf
  7. src/redis-server clusters/7006/redis.conf

第六步:安装ruby运行环境

node01执行以下命令,安装ruby运行环境,因为redis集群的启动需要借助ruby的环境

  1. yum install ruby
  2. yum install rubygems
  3. gem install redis

这个时候可能会报错,如下:
image.png
这时,需要升级Ruby版本
node01执行以下命令升级ruby版本

  1. cd /export/redis-3.2.8
  2. gpg --keyserver hkp://keys.gnupg.net --recv-keys 409B6B1796C275462A1703113804BB82D39DC0E3 7D2BAF1CF37B13E2069D6956105BD0E739499BDB
  3. curl -sSL https://get.rvm.io | bash -s stable
  4. source /etc/profile.d/rvm.sh
  5. rvm list known
  6. rvm install 2.4.1

第七步:创建redis集群

node01执行以下命令创建redis集群

  1. cd /export/redis-3.2.8
  2. gem install redis
  3. src/redis-trib.rb create --replicas 1 192.168.100.100:7001 192.168.100.100:7002 192.168.100.100:7003 192.168.100.100:7004 192.168.100.100:7005 192.168.100.100:7006

第八步:连接redis客户端

node01执行以下命令连接redis客户端

  1. cd /export/redis-3.2.8
  2. src/redis-cli -h node01 -c -p 7001

redis集群管理

添加一个新节点作为主节点
启动新节点的redis服务,然后添加到集群当中去
启动服务

  1. src/redis-server clusters/7007/redis.conf
  2. src/redis-trib.rb add-node 192.168.100.100:7007 192.168.100.100:7001

添加一个新节点作为副本

  1. src/redis-server clusters/7008/redis.conf
  2. src/redis-trib.rb add-node --slave 192.168.100.100:7008 192.168.100.100:70010

删除一个节点
命令格式

  1. src/redis-trib del-node 127.0.0.1:7000 `<node-id>`
  1. src/redis-trib.rb del-node 192.168.100.100:7008 7c7b7f68bc56bf24cbb36b599d2e2d97b26c5540

重新分片

  1. ./redis-trib.rb reshard node01:7001
  2. ./redis-trib.rb reshard --from <node-id> --to <node-id> --slots <number of slots> --yes <host>:<port>

JavaAPI操作redis集群

  1. @Test
  2. public void jedisClusterTest() throws IOException {
  3. Set<HostAndPort> portSet = new HashSet<HostAndPort>();
  4. portSet.add(new HostAndPort("node01",7001));
  5. portSet.add(new HostAndPort("node01",7002));
  6. portSet.add(new HostAndPort("node01",7003));
  7. portSet.add(new HostAndPort("node01",7004));
  8. portSet.add(new HostAndPort("node01",7005));
  9. portSet.add(new HostAndPort("node01",7006));
  10. JedisPoolConfig jedisPoolConfig = new JedisPoolConfig();
  11. jedisPoolConfig.setMaxIdle(10);
  12. jedisPoolConfig.setMaxWaitMillis(3000);
  13. jedisPoolConfig.setMaxTotal(30);
  14. jedisPoolConfig.setMinIdle(5);
  15. JedisCluster jedisCluster = new JedisCluster(portSet, jedisPoolConfig);
  16. jedisCluster.set("cluster","clustervalue");
  17. jedisCluster.close();
  18. }