Redis-主从复制和哨兵模式
主从复制
- 主机数据更新后根据配置和策略,自动同步最新数据到备机的master/slaver机制,Master以写为主,Slave以读为主
- 主要用来读写分离,数据备份,性能扩展,容灾快速恢复
基本配置
- 配置多个redis
- 拷贝多个redis.conf文件
- 开启daemonize yes
- pid文件名
- 指定端口
- Log文件名字
- dump.rdb名字
- slave-priority:设置从机的优先级,值越小,优先级越高,用于选举主机时使用。默认100
- 命令:打印主从复制的相关信息
info replication
- 配置文件:从服务器关联到主服务器
replicaof 主服务器ip 主服务器端口号
- 命令:在从服务器上更改配置主服务器信息
#从机将终止与原主机关系再重新关联到新主机上
slaveof <ip> <port>
slaveof 127.0.0.1 6379
- 命令:从服务器转换为主服务器
slaveof no one
一主二仆
- 命令 slaveof IP 端口号 配置两个从机
薪火相传
- 上一个Slave可以是下一个slave的Master,Slave同样可以接收其他 slaves的连接和同步请求,那么该slave作为链条中下一个的master,可以有效减轻master的写压力,去中心化降低风险
- 中途变更转向:会清除之前的数据,重新建立拷贝最新的
- 风险是一旦某个slave宕机,后面的slave都没法备份
- 主机挂了,从机还是从机,无法写数据了
反客为主
- 当一个master宕机后,后面的slave可以立刻升为master,其后面的slave不用做任何修改
- 将从机变为主机
slaveof no one
主从复制原理
- Slave启动成功连接到master后会发送一个sync命令
- Master接到命令启动后台的存盘进程,同时收集所有接收到的用于修改数据集命令, 在后台进程执行完毕之后,master将传送整个数据文件到slave,以完成一次完全同步
- 全量复制:而slave服务在接收到数据库文件数据后,将其存盘并加载到内存中
- 增量复制:Master继续将新的所有收集到的修改命令依次传给slave,完成同步
- 只要是重新连接master,一次完全同步(全量复制)将被自动执行
哨兵模式(sentinel)
- 反客为主的自动版,能够后台监控主机是否故障,如果发生故障了根据投票数自动将从库转换为主库
配置哨兵
- 自定义的/my/redis目录下新建sentinel.conf文件
- 执行命令,mymaster为监控对象起的服务器名称, 1 为至少有多少个哨兵同意迁移的数量
sentinel monitor mymaster 127.0.0.1 6379 1
- 启动哨兵,进入/usr/local/bin,执行redis-sentinel /myredis/sentinel.conf
哨兵运行流程
1. SDown主观下线(Subjectively Down)
- SDOWN(主观不可用)是单个sentinel自己主观上检测到的关于master的状态,从sentinel的角度来看如果发送了PING心跳后在一定时间内没有收到合法的回复,就达到了SDOWN的条件
- sentinel配置文件中的down-after-miliseconds设置了判断主观下线的时间长度
2. ODown客观下线(Objectively Down)
- 至少有quorum个sentinel认为这个master有故障才会对这个master进行下线以及故障转移
- 有的时候,某个sentinel节点可能因为自身网络原因导致无法连接master,而此时master并没有出现故障,所以这就需要多个sentinel都一致认为该master有问题,才可以进行下一步操作,这就保证了公平性和高可用
3. 选举出哨兵领导者
- 当主节点被判断客观下线以后,各个哨兵节点会进行协商先选举出一个领导者哨兵节点(兵王)并由该领导者节点也即被选举出的兵王进行failover(故障迁移)
- 监视该主节点的所有哨兵都有可能被选为领导者,选举使用的算法是Raft算法
- Raft算法的基本思路是先到先得:即在一轮选举中,哨兵A向B发送成为领导者的申请,如果B没有同意过其他哨兵,则会同意A成为领导者
4. 哨兵领导者开始推动故障迁移流程,选出新的master
- 优先级在redis.conf中默认:slave-priority 100,值越小优先级越高
- 偏移量是指获得原主机数据最全的
- 每个redis实例启动后都会随机生成一个40位的runid
代码例子
private static JedisSentinelPool jedisSentinelPool=null;public static Jedis getJedisFromSentinel(){if(jedisSentinelPool==null){Set<String> sentinelSet=new HashSet<>();sentinelSet.add("192.168.11.103:26379");JedisPoolConfig jedisPoolConfig =new JedisPoolConfig();jedisPoolConfig.setMaxTotal(10); //最大可用连接数jedisPoolConfig.setMaxIdle(5); //最大闲置连接数jedisPoolConfig.setMinIdle(5); //最小闲置连接数jedisPoolConfig.setBlockWhenExhausted(true); //连接耗尽是否等待jedisPoolConfig.setMaxWaitMillis(2000); //等待时间jedisPoolConfig.setTestOnBorrow(true); //取连接的时候进行一下测试 ping pongjedisSentinelPool=new JedisSentinelPool("mymaster",sentinelSet,jedisPoolConfig);return jedisSentinelPool.getResource();}else{return jedisSentinelPool.getResource();}
}