我的开发笔记

Redis主从复制

7/21/2022 缓存框架

# 前述

  • 主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点(master)，后者称为从节点(slave),数据的复制是单向的，只能由主节点到从节点。

  • 默认情况下，每台Redis服务器都是主节点；且一个主节点可以有多个从节点(或没有从节点)，但一个从节点只能有一个主节点。

# 主从复制的作用

  1. 数据冗余： 主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式。
  2. 故障恢复： 当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复；实际上是一种服务的冗余。
  3. 负载均衡： 在主从复制的基础上，配合读写分离，可以由主节点提供写服务，由从节点提供读服务（即写Redis数据时应用连接主节点，读Redis数据时应用连接从节点），分担服务器负载；尤其是在写少读多的场景下，通过多个从节点分担读负载，可以大大提高Redis服务器的并发量。
  4. 读写分离： 可以用于实现读写分离，主库写、从库读，读写分离不仅可以提高服务器的负载能力，同时可根据需求的变化，改变从库的数量；
  5. 高可用基石： 除了上述作用以外，主从复制还是哨兵和集群能够实施的基础，因此说主从复制是Redis高可用的基础。

# 前期准备

# 1、查看当前库的信息

127.0.0.1:6379> info replication   #查看当前库的信息
# Replication
role:master       # 角色  默认  master
connected_slaves:0   # 没有从机
master_replid:b36b43117f39f3989feef719c0002a7c8f4d2fe1
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:0
second_repl_offset:-1
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0
127.0.0.1:6379>
1
2
3
4
5
6
7
8
9
10
11
12
13

# 2、准备三份redis.conf配置

[root@localhost kconfig]# cp redis.conf redis79.conf
[root@localhost kconfig]# cp redis.conf redis80.conf
[root@localhost kconfig]# cp redis.conf redis81.conf
[root@localhost kconfig]# ls
redis79.conf  redis80.conf  redis81.conf  redis.conf
1
2
3
4
5

# 3、修改Redis配置

主要修改以下几处配置

  • 后台运行
  • 端口
  • PID名字
  • log文件名字
  • dump.rdb名字
########################################## redis79.conf 修改 ##############################################
# 后台运行
daemonize yes

# 端口
port 6379

# PID 文件名修改
pidfile /var/run/redis_6379.pid

# 日志文件命名修改
logfile "6379.log"

# rdb文件名
dbfilename dump6379.rdb

########################################## redis80.conf 修改 ##############################################
# 后台运行
daemonize yes

# 端口
port 6380

# PID 文件名修改
pidfile /var/run/redis_6380.pid

# 日志文件命名修改
logfile "6380.log"

# rdb文件名
dbfilename dump6380.rdb
########################################## redis81.conf 修改 ##############################################
# 后台运行
daemonize yes

# 端口
port 6381

# PID 文件名修改
pidfile /var/run/redis_6381.pid

# 日志文件命名修改
logfile "6381.log"

# rdb文件名
dbfilename dump6381.rdb
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46

# 4、启动Redis查看配置是否正确

redis-server /usr/local/redis/kconfig/redis79.conf
redis-server /usr/local/redis/kconfig/redis80.conf 
redis-server /usr/local/redis/kconfig/redis81.conf 

# 启动之后查看redis进程
[root@localhost bin]# ps -ef|grep redis
root      65094      1  0 12:00 ?        00:00:00 redis-server 127.0.0.1:6379
root      65459      1  0 12:02 ?        00:00:00 redis-server 127.0.0.1:6380
root      65492      1  0 12:02 ?        00:00:00 redis-server 127.0.0.1:6381
root      65543  57098  0 12:03 pts/3    00:00:00 grep --color=auto redis
[root@localhost bin]#
1
2
3
4
5
6
7
8
9
10
11

# 一主二从

  • 默认情况下，每台Redis服务器都是主节点;我们一般情况下只用配置从机就好了

  • 实例中：一主（79）二从（80,81）

# 从机配置

# 在80窗口（从机）中配置
127.0.0.1:6380> SLAVEOF 127.0.0.1 6379  # SLAVEOF host 6379
OK
127.0.0.1:6380> info replication
# Replication
role:slave    # 当前角色是从机
master_host:127.0.0.1    # 可以看到主机的信息
master_port:6379
master_link_status:up
master_last_io_seconds_ago:6
master_sync_in_progress:0
slave_repl_offset:28
slave_priority:100
slave_read_only:1
connected_slaves:0
master_replid:6b5887f2ffdcf423d81c8fd2b6e325572ce73add
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:28
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:28
127.0.0.1:6380> 
#################################################################################################
# 在主机中查看信息
127.0.0.1:6379> info replication
# Replication
role:master
connected_slaves:1   # 多了从机的配置
slave0:ip=127.0.0.1,port=6380,state=online,offset=56,lag=0  # 从机的信息
master_replid:6b5887f2ffdcf423d81c8fd2b6e325572ce73add
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:56
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:56
127.0.0.1:6379>
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
  • 注意：真实的从主配置应该在配置文件中配置，这样的话是永久的，我们这里使用的是命令，只是暂时的!

redis

# 一些细节

  • 主机可以写，从机不能写只能读!主机中的所有信息和数据，都会自动被从机保存
  • 主机断开连接，从机依旧连接到主机的，但是没有写操作，这个时候，主机如果回来了，从机依旧可以直接获取到主机写的信息
  • 如果是使用命令行，来配置的主从，这个时候如果从机重启了，就会变回主机!只要变为从机，立马就会从主机中获取值

redis

# 复制原理

  • Slave 启动成功连接到 master 后会发送一个 sync 同步命令
  • Master 接到命令，启动后台的存盘进程，同时收集所有接收到的用于修改数据集命令，在后台进程执行完毕之后，master 将传送整个数据文件到 slave，并完成一次完全同步
  • 全量复制： slave 服务在接收到数据库文件数据后，将其存盘并加载到内存中。
  • 增量复制: Master 继续将新的所有收集到的修改命令依次传给 slave，完成同步。但是只要是重新连接 master ，一次完全同步（全量复制)将被自动执行
  • 如果主机断开了连接，我们可以使用 SLAVEOF no one 让自己变成主机，其他的节点就可以手动连接到最新的这个主节点(手动）

Redis哨兵模式