Redis 主从复制

  随着项目访问量的增加,对Redis服务器的操作也越加频繁,虽然Redis读写速度都很快,但是一定程度上也会造成一定的延时,那么为了解决访问量大的问题,通常会采取的一种方式是主从架构Master/SlaveMaster为主,Slave为主。

1. 主从复制原理

  • Redis 一般是使用一个 Master 节点来进行写操作,而若干个 Slave 节点进行读操作,Master 和 Slave 分别代表了一个个不同的 Redis Server 实例

  • 定期的数据备份操作也是单独选择一个 Slave 去完成,这样可以最大程度发挥 Redis 的性能,为的是保证数据的弱一致性和最终一致性。

  • Master 和 Slave 的数据不是一定要即时同步的,但是在一段时间后 Master 和 Slave 的数据是趋于同步的,这就是最终一致性

  • 全同步过程如下:

    • Slave 发送 Sync 命令到 Master。

    • Master 启动一个后台进程,将 Redis 中的数据快照保存到文件中。

    • Master 将保存数据快照期间接收到的写命令缓存起来。

    • Master 完成写文件操作后,将该文件发送给 Slave。

    • 使用新的 RDB 或 AOF 文件替换掉旧的 RDB 或 AOF 文件。

    • Master 将这期间收集的增量写命令发送给 Slave 端。

  • 增量同步过程如下:

    • Master 接收到用户的操作指令,判断是否需要传播到 Slave。

    • 将操作记录追加到 AOF 文件。

    • 将操作传播到其他 Slave:对齐主从库;往响应缓存写入指令。

    • 将缓存中的数据发送给 Slave。

2. 主从复制配置

下面我们来搭建一主双从的 Redis 集群

2.1 一主双从

准备三台虚拟机,配置好主机名、IP地址和Redis环境。本教程中为了演示方便,在一台虚拟机中配置三个Redis实例。

  • 创建目录:根目录下创建 rediscluster 目录
mkdir /rediscluster
  • 复制配置文件:把 redis.conf 复制到这个目录中
cp /etc/redis.conf /rediscluster/redis.conf
  • 创建三个文件:在rediscluster目录下分别创建三个文件: redis-6379.conf、redis-6380.conf 和 redis-6381.conf。
vim redis-6379.conf

# 文件内容如下:
include /rediscluster/redis.conf
# 修改端口号
port 6379
# 修改pid文件名
pidfile "/var/run/redis_6379.pid"
# 修改持久化文件名
dbfilename "dump_6379.rdb"
dir "/rediscluster"

# 同样的方式创建另外两个文件并做相应的修改。
  • 启动服务:分别启动三台 Redis 服务器:
rediscluster]# redis-server redis-6379.conf
rediscluster]# redis-server redis-6380.conf
rediscluster]# redis-server redis-6381.conf
  • 验证服务
rediscluster]# ps -ef | grep redis
  • 连接服务:分别使用 redis-cli 来连接这三台服务(三个窗口):
rediscluster]# redis-cli -p 6379
rediscluster]# redis-cli -p 6380
rediscluster]# redis-cli -p 6381
  • 进行复制:客户端连接上后,执行如下命令:
127.0.0.1:6379> info replication
127.0.0.1:6380> info replication
127.0.0.1:6381> info replication

 

  • 从图中可以发现,这三台都是 master,也就是都是主服务器。

  • 配置主从:假设我们希望 6379 是主服务器,而 6380 和 6381 是从服务器,则需要做如下配置。

# 命令格式:slaveof <ip> <port>

# 我们分别在 6380 和 6381 客户端中执行如下命令:

127.0.0.1:6380> slaveof 127.0.0.1 6379
OK
127.0.0.1:6381> slaveof 127.0.0.1 6379
OK

# 注意:

	# 1. 在 redis-cli 客户端中执行 slaveof 命令只会对当前环境生效,重启后失效。要想永久生效,需要在 redis.conf 配置文件中添加 `slaveof <masterip> <masterport>` 配置。

	# 2. 在 Redis 5.0 后,新增了 replicaof 命令,作用与 slaveof 命令效果一致。

# 再次执行 `info replication` 命令查看,可以发现已经变为了从机了。

  • 集群测试:在 6379 中添加如下数据:

127.0.0.1:6379> set k1 v1
OK
127.0.0.1:6379> set k2 v2
OK

# 然后在从机上查询:

127.0.0.1:6380> get k1
1) "v1"
127.0.0.1:6381> get k1
1) "v1"

# 发现数据已经同步了。

注意:

  1. 如果我们在从服务器中添加数据,则会报错。因为从服务器只能读。

  2. 如果从机宕机了,重启后会变为主服务器,需要重新执行 slaveof <ip> <port> 命令。

如果主机宕机了,重启后一切正常。

2.2 主从切换

  • 当一个 master 宕机后,后面的 slave 可以立刻升为 master,其后面的 slave 不用做任何修改。

  • slaveof no one 将从机变为主机。

  • 假设主机 6379 宕机了,我们可以在 6380 上执行如下命令来切换为主机:

127.0.0.1:6380> slaveof no one
  • 查看 6380,已经变为主机了。

3. 哨兵模式

3.1 什么是哨兵模式

  哨兵也叫 sentinel,它的作用是能够在后台监控主机是否故障,如果故障了根据投票数自动将从库转换为主库。

 

3.2 配置哨兵

首先停止三台 Redis 服务。

redis-cli shutdown
  • 然后再重新启动三台 Redis 服务器,并实现一主双从。

  • 最后在 /rediscluster 目录下新建 sentinel.conf 文件,文件名称不能写错,必须叫这个名称。

rediscluster]# vim sentinel.conf
  • 内容如下:

sentinel monitor redismaster 127.0.0.1 6379 1

参数说明:

  • monitor:监控

  • redismaster:为监控对象起的服务名称

  • 1:为至少有多个个哨兵同意迁移的数量

3.3 启动哨兵

执行如下命令来启动哨兵

rediscluster]# redis-sentinel sentinel.conf

3.4 验证哨兵

  • 把主服务器停止:

127.0.0.1:6379> shutdown
  •  这时,哨兵就会介入,并进行选举,然后把选举成功的从面切换为主机。

  • 如果我们把 6379 重新启动,则它会变为从机。

127.0.0.1:6379> info replication

 

4. 复制延时

   由于所有的写操作都是先在Master上操作,然后同步更新到Slave上,所以从Master同步到Slave机器有一定的延迟,当系统很繁忙的时候,延迟问题会更加严重,Slave机器数量的增加也会使这个问题更加严重。

4.1 选举策略

  • 选择优先级靠前的服务器。优先级的配置在 redis.conf 文件中的 replica-priority 配置,默认为 100,值越小优先级越高

  • 选择偏移量最大的。偏移量是指获得原主机数据最全的

  • 选择 runid 最小的从服务器。每个redis实例启动后都会随机生成一个40位的runid

### Redis主从复制配置方法 #### Docker环境下的Redis主从复制设置 为了在Docker环境中成功配置Redis主从复制,需先理解基本概念以及具体的操作流程。 #### 基本概念解释 主从复制意味着将一台Redis服务器的数据同步至其他Redis实例。此过程涉及两个角色:一个是作为数据源的主节点(master),另一个是从主节点接收更新副本的从节点(slave)。这种架构允许读取负载均衡,并提供了一定程度上的冗余保障[^2]。 #### 创建网络连接以便容器间通信 确保所有参与复制的Redis服务能够相互通信至关重要。为此,建议创建专用的Docker网络来促进这些交互: ```bash docker network create redis-network ``` #### 启动主服务器 启动一个名为`redis-master`的服务端口映射到主机6379端口上,并将其加入之前建立好的自定义网络中去: ```bash docker run -d --name redis-master -p 6379:6379 --network redis-network redis ``` 这一步骤建立了整个集群的核心——即存储实际键值对的地方[^3]。 #### 修改配置文件支持远程访问 为了让后续添加的从机可以正常连通主机,需要调整默认不允许外部链接的安全策略。可以通过编辑已有的配置文件或者挂载新的配置文件方式完成这项工作。这里给出一种基于后者的方法示例: ```bash vim /home/docker/redis6379/conf/redis.conf ``` 在此文件内部找到有关绑定地址的部分(`bind`)取消其注释状态并将值设为空白表示接受来自任何地方请求;另外还需开启认证机制以增强安全性(如果适用的话)[^4]。 #### 添加并初始化第一个从属节点 现在准备就绪向系统引入首个辅助成员了。执行如下指令部署新实例同时指定它所依赖的目标对象名称为先前提到过的那个“master”。 ```bash docker run -d --name redis-slave1 --link redis-master:master \ --network redis-network \ -e REDIS_MASTER_HOST=master \ -e REDIS_MASTER_PORT=6379 \ -p 6380:6379 \ redis redis-server --slaveof master 6379 ``` 上述命令不仅完成了容器本身的创建工作还指定了必要的环境变量用于告知子进程应当追随哪台机器成为自己的上级领导单位。 #### 扩展更多跟随者 如果有需求进一步扩大规模只需重复上面的过程更改相应参数比如暴露不同对外监听接口即可轻松达成目的。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值