Redis Cluster分布式集群搭建及封装适配主从集群与Cluster的组件

HASH_SLOT = CRC16(key) mod 16384 

必然会有一台机器有两个主节点，另一台拥有两个从节点。并且，所有主节点与从节点都不会在同一台机器，比如上图中出现的一种划分方案。这不需要我们自己配置，在使用初始化集群创建Cluster的命令时，会自动识别不同机器进行配置。

因为分Solt的特性，如果想要两台机器理论上承受相同的请求量，就需要为拥有两个主节点的那台机器共享一半的槽位，即一台分16384/2个Solt；另一台分剩下的Solt，每个主节点分（16384/2）/2 个Solt。

部署配置

两台机器都创建一个目录：

/data/redis-cluster/

并在该目录下创建三个节点的目录

/data/redis-cluster/node-6379
/data/redis-cluster/node-6380
/data/redis-cluster/node-6381

将redis.conf（下载安装redis时官方提供的配置文件）拷贝到三个节点的目录下。（所有操作，两台机器相同）。

对于redis的配置文件我不多说，按需配置，比如持久化策略、缓存淘汰策略、最大内存等。我只说下cluster集群需要配置的地方。

1、daemonize yes
2、port 63**(分别对每个机器的端口号进行设置)
3、dir /data/redis-cluster/node-63**/(指定数据文件存放位置，必须要指定不同的目 录位置，不然会丢失数据)
4、cluster-enabled yes(启动集群模式)
5、cluster-config-file nodes-63**.conf(集群节点信息文件，这里63**最好和port对应上)
6、cluster-node-timeout 5000
7、注释掉 bind 127.0.0.1，去掉bind绑定访问ip信息
8、protected-mode no (关闭保护模式)
9、appendonly yes

如果你配置的是使用外网访问的集群，那就需要配置安全访问模式了，即配置密码。如果需要配置密码，还需修改如下配置。

10、requirepass xxx (设置redis访问密码) 
11、masterauth xxx (设置集群节点间访问密码，跟上面一致)

不同节点的配置文件信息相同，只是端口号、数据文件目录(rdb、aof文件等)、集群节点信息文件这几处配置不同。

cluster-config-file指定的文件，就是保存集群节点信息的文件。cluster-node-timeout节点超时配置。表示当某个节点持续timeout 的时间失联时，才可以认定该节点出现故障，需要进行主从切换。如果没有这个选项，网络抖动会导致主从频繁切换 (数据的重新复制)。

我习惯性把重复性操作写成脚本，所以每台机器上会有一个集群节点的启动脚本，当然，这些脚本只适合集群初始化的时候使用，实际生产环境下，节点的启动和重启都只能老老实实一个一个节点操作。

[redis-cluster-start.sh]
/data/redis-5.0.2/src/redis-server data/redis-cluster/node-6379/redis.conf
sleep 1s
/data/redis-5.0.2/src/redis-server data/redis-cluster/node-6380/redis.conf
sleep 1s
/data/redis-5.0.2/src/redis-server data/redis-cluster/node-6381/redis.conf

所有机器所有节点都启动后，用redis-cli创建整个redis集群（redis5以前的版本集群是依靠ruby脚本redis- trib.rb实现的，但5.0之后就不需要那么复杂了。)

[把‘\’去掉，只是为好看分行写，用'\'表示连接]
/data/redis-5.0.2/src/redis-cli \
        --cluster create --cluster-replicas 1 \
        172.24.11.11:6379 172.24.12.24:6379 172.24.11.11:6381 
        172.24.11.11:6380 172.24.12.24:6380 172.24.12.24:6381

那个"1"指的是一个主节点分配多少个从节点，如果是1，则6个节点会被分为3个一主一从的小集群，如果是2，则6个节点会被分为2个一主两从的小集群。但是集群要求必须至少6个节点，至少要有三个主节点。

当命令执行成功后会提示Solt的预计分配信息，默认会按照主节点的数量平台分配solt。我选择yes使用默认的分配方案，后期有需要再重新分配。

这样整个Cluster就创建好了。连接任意一个节点都可以正常访问集群

./redis-cli -c -h -p (-a访问服务端密码，-c表示集群模式，-h和-p分别指定ip地址和端口号)

如不带密码的访问

/usr/local/redis-5.0.2/src/redis-cli -c -h 172.24.11.11 -p 6379

带密码的访问

/usr/local/redis-5.0.2/src/redis-cli -a xxx -c -h 172.24.11.11 -p 6379

这是有历史原因的，原本项目封装了一套redis的操作模版。但由于一直使用的都是主从模式，这套模版实现读写分离，写请求访问主节点，读请求访问从节点。但是改用Cluster之后就不适用了。也不能重写，因为一套代码适配三个平台，另两个平台还是使用原来的主从读写分离模式呢。

好在前辈将缓存的读写封装成模版类，我可以直接将这些模版类抽象为接口，就可以实现不需要改任何业务代码。而且根据spring配置文件配置的平台，自动选择使用支持哪种模式的模版实现类。（封装的缓存组件需要排除spring的包扫描）

将所有模板类抽象为接口，为两种不同模式分别实现这些接口，最后根据spring配置的平台信息或者其它标志来选择一种实现方式就行了。一行业务代码也不需要修改。

根据不同环境选取不同的实现类。首先提供一个自动配置注解EnableAutoRedisConfig。

/**
 * @author wujiuye
 * @version 1.0 on 2019/7/7 {描述：}
 */
@Retention(RetentionPolicy.RUNTIME)
@Documented
@Target(ElementType.TYPE)
@Import(RedisConfigImportSelector.class)
public @interface EnableAutoRedisConfig {


}

/**
 * @author wujiuye
 * @version 1.0 on 2019/7/7 {描述：}
 */
@Slf4j
public class RedisConfigImportSelector implements ImportSelector, EnvironmentAware {


    private Environment environment;


    @Override
    public String[] selectImports(AnnotationMetadata annotationMetadata) {
        if (environment.containsProperty("redis.cluster.host-port")) {
            log.info("=========== selected redis cluster config ... ");
            return new String[]{RedisClusterConnectionConfig.class.getName()};
        } else {
            log.info("=========== selected redis master slave config ... ");
            return new String[]{RedisConnectionConfig.class.getName()};
        }
    }


    @Override
    public void setEnvironment(Environment environment) {
        this.environment = environment;
    }
}