> 文章列表 > 4.redis-主从复制

4.redis-主从复制

4.redis-主从复制

01-主从复制概述

  • 单机redis存在的问题

    • ①硬盘故障, 导致数据丢失, redis不好用;
    • ②内存容量受限制, 单台服务器内存扩展有上限, 内存数据超过该上线, 该如何处理.
  • 解决方案

    • 4.redis-主从复制

    • 1个master可以有多个slave, 1个slave只能对应1个master

    • master: 主机, 可以读也可以写, 主要负责写.

    • slave: 从机, 只能读.

    • 保证master和slave数据同步.

  • 主从复制

    • 将master中的数据实时地, 有效地同步到从机.
  • 好处

    • 读写分离: master只负责写, slave只负责读
    • 负载均衡: 多台redis服务器分担客户端负载
    • 故障恢复: master宕机, 由slave提供服务
    • 数据冗余: 数据备份到多台redis服务器
    • 高可用: 是哨兵和集群的基础

02-主从复制搭建及演示

  • 需求

    • 搭建1主1从的结构
  • 配置说明

    #从机的配置文件
    slaveof 主机ip 主机port
    
  • ①master配置文件

    port 6379
    daemonize no
    # logfile "log-6379.log"
    maxclients 100000
    timeout 0
    loglevel debug# RDB设置
    # 1.设置rdb文件名
    dbfilename "dump-6379.rdb"# 2.设置rdb文件存储路径
    dir /usr/local/redis-6379/data# 3.设置存储rdb时是否压缩数据
    rdbcompression no# 4.设置读写文件过程是否进行RDB格式校验
    rdbchecksum no# 5.后台存储过程中如果出现错误现象,是否停止保存操作
    stop-writes-on-bgsave-error yes# 6.每隔10秒检测一次,有2个数据变化就执行bgsave指令
    save 10 2# AOF设置
    # 1.开启aof持久化功能
    appendonly yes
    # 2.设置aof文件名
    appendfilename 'appendonly-6379.aof'
    # 4.设置aof策略
    appendfsync everysec# 5.当前aof文件大小达到64mb,自动触发AOF重写
    auto-aof-rewrite-min-size 64mb
    # 5.当前aof文件大小比之前aof文件大小增加了100%,自动触发AOF重写
    auto-aof-rewrite-percentage 100protected-mode no
    
  • ②slave配置文件

    port 26379
    daemonize no
    # logfile "log-26379.log"
    maxclients 100000
    timeout 0
    loglevel debug# RDB设置
    # 1.设置rdb文件名
    dbfilename "dump-26379.rdb"# 2.设置rdb文件存储路径
    dir /usr/local/redis-26379/data# 3.设置存储rdb时是否压缩数据
    rdbcompression no# 4.设置读写文件过程是否进行RDB格式校验
    rdbchecksum no# 5.后台存储过程中如果出现错误现象,是否停止保存操作
    stop-writes-on-bgsave-error yes# 6.每隔10秒检测一次,有2个数据变化就执行bgsave指令
    save 10 2# AOF设置
    # 1.开启aof持久化功能
    appendonly yes
    # 2.设置aof文件名
    appendfilename 'appendonly-26379.aof'
    # 4.设置aof策略
    appendfsync everysec# 5.当前aof文件大小达到64mb,自动触发AOF重写
    auto-aof-rewrite-min-size 64mb
    # 5.当前aof文件大小比之前aof文件大小增加了100%,自动触发AOF重写
    auto-aof-rewrite-percentage 100protected-mode no#主机ip和主机port
    slaveof 192.168.199.110 6379
    
  • ③启动主机

    • 4.redis-主从复制
  • ④启动从机

    • 4.redis-主从复制
  • ⑤演示主从结构

    • 分别使用redis客户端链接主机和从机操作读写指令.

03-主从复制之建立链接阶段

  • 建立链接阶段

    • 4.redis-主从复制
  • 总结

    • ①master保存了slave的port
    • ②slave保存了master的host和port
    • ③master和slave建立心跳机制(ping/pong)

04-主从复制之数据同步阶段

  • 数据同步阶段

    • 4.redis-主从复制
  • 总结

    • ①第一次链接, 通过全量复制(RDB)将master的数据备份到slave
    • ②后续的指令, 通过部分复制(AOF)将master的数据备份到slave

05-部分复制的三要素

  • 三要素
    • ①服务器运行id(run id)
    • ②主服务器的复制缓冲区
    • ③主从服务器的复制偏移量
  • ①服务器运行id(run id)
    • 4.redis-主从复制
  • ②主服务器的复制缓冲区
    • 4.redis-主从复制
  • ③主从服务器的复制偏移量
    • 从机应该从哪里开始执行部分复制
    • 1个master有多个偏移量, 1个slave有一个偏移量

06-主从复制之命令传播阶段

  • 命令传播阶段
    • 当master数据库状态被修改后,导致主从服务器数据库状态不一致,此时需要让主从数据同步到一致 的状态,同步的动作称为命令传播 master将接收到数据变更命令发送给slave,slave接收命令后执行
  • 网络出现问题
    • 网络闪断闪连,可以忽略
    • 短时间网络中断,部分复制 (AOF)
    • 长时间网络中断,全量复制(RDB)