• 企业400电话
  • 微网小程序
  • AI电话机器人
  • 电商代运营
  • 全 部 栏 目

    企业400电话 网络优化推广 AI电话机器人 呼叫中心 网站建设 商标✡知产 微网小程序 电商运营 彩铃•短信 增值拓展业务
    Redis的持久化方案详解

    Redis支持RDB与AOF两种持久化机制,持久化可以避免因进程异常退出或down机导致的数据丢失问题,在下次重启时能利用之前的持久化文件实现数据恢复。

    RDB持久化

    RDB持久化即通过创建快照(压缩的二进制文件)的方式进行持久化,保存某个时间点的全量数据。RDB持久化是Redis默认的持久化方式。RDB持久化的触发包括手动触发与自动触发两种方式。

    手动触发

    自动触发

    在redis.conf中配置 save m n 定时触发,如 save 900 1表示在900s内至少存在一次更新就触发
    主从复制时,如果从节点执行全量复制操作,主节点自动执行bgsave生成RDB文件并发送给从节点
    执行debug reload命令重新加载Redis时
    执行shutdown且没有开启AOF持久化
    redis.conf中RDB持久化配置

     # 只要满足下列条件之一,则会执行bgsave命令
    save 900 1 # 在900s内存在至少一次写操作
    save 300 10
    save 60 10000
    # 禁用RBD持久化,可在最后加 save ""

    # 当备份进程出错时主进程是否停止写入操作
    stop-writes-on-bgsave-error yes
    # 是否压缩rdb文件 推荐no 相对于硬盘成本cpu资源更贵
    rdbcompression no

    AOF持久化

    AOF(Append-Only-File)持久化即记录所有变更数据库状态的指令,以append的形式追加保存到AOF文件中。在服务器下次启动时,就可以通过载入和执行AOF文件中保存的命令,来还原服务器关闭前的数据库状态。

    redis.conf中AOF持久化配置如下

    # 默认关闭AOF,若要开启将no改为yes
    appendonly no

    # append文件的名字
    appendfilename "appendonly.aof"

    # 每隔一秒将缓存区内容写入文件 默认开启的写入方式
    appendfsync everysec

    # 当AOF文件大小的增长率大于该配置项时自动开启重写(这里指超过原大小的100%)。
    auto-aof-rewrite-percentage 100

    # 当AOF文件大小大于该配置项时自动开启重写
    auto-aof-rewrite-min-size 64mb

    AOF持久化的实现包括3个步骤:

    其中后两步的频率通过appendfsync来配置,appendfsync的选项包括

    AOF通过保存命令来持久化,随着时间的推移,AOF文件会越来越大,Redis通过AOF文件重写来解决AOF文件不断增大的问题(可以减少文件的磁盘占有量,加快数据恢复的速度),原理如下:

    调用fork,创建一个子进程

    子进程读取当前数据库的状态来“重写”一个新的AOF文件(这里虽然叫“重写”,但实际并没有对旧文件进行任何读取,而是根据数据库的当前状态来形成指令)

    主进程持续将新的变动同时写到AOF重写缓冲区与原来的AOF缓冲区中

    主进程获取到子进程重写AOF完成的信号,调用信号处理函数将AOF重写缓冲区内容写入新的AOF文件中,并对新文件进行重命名,原子地覆盖原有AOF文件,完成新旧文件的替换

    AOF的重写也分为手动触发与自动触发

    RDB vs AOF

    RDB与AOF两种方式各有优缺点。

    数据库的恢复

    服务器启动时,如果没有开启AOF持久化功能,则会自动载入RDB文件,期间会阻塞主进程。如果开启了AOF持久化功能,服务器则会优先使用AOF文件来还原数据库状态,因为AOF文件的更新频率通常比RDB文件的更新频率高,保存的数据更完整。

    redis数据库恢复的处理流程如下,

    在数据恢复方面,RDB的启动时间会更短,原因有两个:

    RDB 文件中每一条数据只有一条记录,不会像AOF日志那样可能有一条数据的多次操作记录。所以每条数据只需要写一次就行了,文件相对较小。

    RDB 文件的存储格式和Redis数据在内存中的编码格式是一致的,不需要再进行数据编码工作,所以在CPU消耗上要远小于AOF日志的加载。

    但是在进行RDB持久化时,fork出来进行dump操作的子进程会占用与父进程一样的内存,采用的copy-on-write机制,对性能的影响和内存的消耗都是比较大的。比如16G内存,Redis已经使用了10G,这时save的话会再生成10G,变成20G,大于系统的16G。这时候会发生交换,要是虚拟内存不够则会崩溃,导致数据丢失。所以在用redis的时候一定对系统内存做好容量规划。

    RDB、AOF混合持久化

    Redis从4.0版开始支持RDB与AOF的混合持久化方案。首先由RDB定期完成内存快照的备份,然后再由AOF完成两次RDB之间的数据备份,由这两部分共同构成持久化文件。该方案的优点是充分利用了RDB加载快、备份文件小及AOF尽可能不丢数据的特性。缺点是兼容性差,一旦开启了混合持久化,在4.0之前的版本都不识别该持久化文件,同时由于前部分是RDB格式,阅读性较低。

    开启混合持久化

    aof-use-rdb-preamble yes

    数据恢复加载过程就是先按照RDB进行加载,然后把AOF命令追加写入。

    持久化方案的建议

    如果Redis只是用来做缓存服务器,比如数据库查询数据后缓存,那可以不用考虑持久化,因为缓存服务失效还能再从数据库获取恢复。

    如果你要想提供很高的数据保障性,那么建议你同时使用两种持久化方式。如果你可以接受灾难带来的几分钟的数据丢失,那么可以仅使用RDB。

    通常的设计思路是利用主从复制机制来弥补持久化时性能上的影响。即Master上RDB、AOF都不做,保证Master的读写性能,而Slave上则同时开启RDB和AOF(或4.0以上版本的混合持久化方式)来进行持久化,保证数据的安全性。

    到此这篇关于Redis的持久化方案详解的文章就介绍到这了,更多相关Redis的持久化方案内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

    您可能感兴趣的文章:
    • redis数据的两种持久化方式对比
    • 一篇文章揭秘Redis的磁盘持久化机制
    • Redis做数据持久化的解决方案及底层原理
    • Redis教程(十):持久化详解
    • 浅谈redis内存数据的持久化方式
    • Redis数据持久化方式技术解析
    上一篇:redis中数据类型命令整理
    下一篇:redis中的数据结构和编码详解
  • 相关文章
  • 

    © 2016-2020 巨人网络通讯 版权所有

    《增值电信业务经营许可证》 苏ICP备15040257号-8

    Redis的持久化方案详解 Redis,的,持久化,方案,详解,