redis数据复制

redis是一个key-value存储系统，本图梳理了redis数据复制的内容，包含配置、拓扑、原理、读写分离、规避全量复制等。

复制

• 配置
  • 从结点发起
  • 断开复制
    • slaveof no one
    • slaveof newMasterHost newMasterPort切主（注：切主会删除从结点原先的数据）
  • 建立复制
    • 配置方式
      • 配置文件中：slaveof masterHost masterPort
      • 启动命令redis-server 加上 --slaveof masterHost masterPort
      • 使用命令 slaveof masterHost masterPort
  • 安全
    • 主配置 requirepass password
    • 从配置 masterauth password
  • 只读
    • 默认slave-read-only=yes，不建议修改
  • 传输延时
    • 关闭延时（默认）
      • 配置
        • repl-disable-tcp-nodelay no
      • 适用
        • 主从网络良好，如同机房
    • 开启延时
      • 配置
        • repl-disable-tcp-nodelay yes
      • 适用
        • 主从网络复杂或带宽紧张，如跨机房
• 拓扑
  • 一主一从
  • 一主多从
    • 读多场景
    • 不适合写多场景
  • 树状主从
    • 分担主节点写压力
• 原理
  • 复制过程
    • 保存主节点信息
    • 建立socket连接
    • 发送ping命令
    • 权限验证
    • 同步数据
    • 同步命令
  • 数据同步
    • 全量复制
    • 部分复制
    • psync命令支持组件
      • 主从结点复制偏移量
      • 主从结点复制积压缓冲区
      • 主节点运行ID
  • 心跳
  • 异步复制
• 需要规避的问题
  • 读写分离
    • 复制数据延迟
    • 读到过期数据
    • 从结点故障
  • 规避主从配置不一致
    • 内存相关的配置要一致
  • 规避全量复制
    • 给大流量主节点添加从结点在流量低峰时
    • 避免主节点运行ID变化
    • 增加复制积压缓冲区内存
  • 规避复制风暴
    • 规避单主节点复制风暴
      • 拓扑结构转成树状
    • 规避单机器复制风暴
      • 主节点分散在多机器上
      • 故障转移