RDB:Redis DataBase

1. 什么是RDB

  • RDB:每隔一段时间,把内存中的数据写入到磁盘的临时文件,作为快照,恢复的时候把快照文件读进内存;

2. RDB优劣势

  • 优势:

    1. 每隔一段时间备份,全量备份
    2. 灾备简单,可以远程传输
    3. 子进程备份的时候,主进程不会有任何io操作(不会有写入、修改或删除),保证备份数据的完整性
    4. 相对AOF来说,当有更大文件的时候可以快速重启恢复
  • 劣势

    1. 发生故障时,有可能会丢失最后一次的备份数据
    2. 子进程所占用的内存会比父进程一样,会造成CPU负担
    3. 由于是定时全量备份是重量级操作,无法实时备份

3. RDB的配置

  • 保存位置:可以在redis.conf中自定义,可参考如下
dir /usr/local/redis/working
dbfilename dump.rdb
  • 保存机制:
save 900 1    	# 1个缓存更新,15分钟后备份
save 300 10	# 10个缓存更新,5分钟后备份
save 60 10000	# 10000个缓存更新,1分钟后备份
save 10 3	# 3个缓存更新,10秒后备份
  • stop-writes-on-bgsave-error

    1. yes:如果save过程出错,则停止写操作
    2. no:可能造成数据不一致
  • rdbcompression

    1. yes:开启rdb压缩模式
    2. no:关闭rdb压缩模式,可以节约cpu损耗,但是文件会大
  • rdbchecksum

    1. yes:使用CRC64算法校验对rdb进行数据校验,有10%性能损耗
    2. no:不校验

4. 总结

  • RDB适合大量数据的恢复,但是数据的完整性和一致性可能会不足

AOF:Append Only File

1. 引言

  • RDB会丢失最后一次备份的rdb文件,但是可以忽略不计,毕竟是缓存;但是如果追求数据的完整性,那就得考虑使用AOF;

2. AOF特点

  • 以日志的形式来记录用户请求的写操作,读操作不会记录
  • 文件以追加的形式,而不是修改的形式
  • Redis的AOF恢复其实就是把追加的文件从开始到结尾读取出来执行写操作

3. 优势

  • AOF 更加耐用,可以以秒级别为单位备份,如果发生问题,也只会丢失一秒的数据,大大增加了可靠性和数据的完整性;AOF可以每秒备份一次,使用fsync操作
  • 以log日志形式追加,如果磁盘满了,会执行redis-check-aof工具
  • 当数据太大的时候,redis可以在后台自动重写aof;当redis继续把日志追加到老的文件中去时,重写也是非常安全的,不会影响客户端的读写操作
  • AOF 日志包含的所有写操作,会更加便于redis解析恢复

4. 劣势

  • 相同的数据,AOF会比RDB大
  • 针对不同的同步机制,AOF会比RDB慢,因为AOF每秒都会备份做写操作,相对于RDB来说就略低;每秒备份fsync没毛病,但是客户端的每次写入就做一次备份fsync的话,那么redis的性能就会下降
  • AOF发生过bug,就是数据恢复的时候数据不完整,这样显得AOF会比较脆弱,容易出现bug,因为AOF没有RDB那么简单,为了防止bug的产生,AOF不会根据旧的指令去重构,而是根据当时缓存中存在的数据指令去做重构,这样就更加健壮和可靠;

5. AOF的配置

# AOF 默认关闭,yes可以开启
appendonly no

# AOF 的文件名
appendfilename "appendonly.aof"

# no:不同步
# everysec:每秒备份,推荐使用
# always: 每次操作都会备份,安全并且数据完整,但是性能差
appendfsync everysec

# 重写的时候是否要同步,no可以保证数据安全
no-appendfsync-on-rewrite no

# 重写机制:避免文件越来越大,自动优化压缩指令,会fork一个新的进程去完成重写动作,新进程里的内存数据会被重写,此时旧的AOF文件不会被读取使用,类似RDB
# 当前AOF文件的大小是上次AOF大小的100% 并且文件体积达到64m,满足两者则触发重写
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb

到底采用RDB还是AOF?

  • 如果你能接受一段时间的缓存丢失,那么可以使用RDB
  • 如果你对实时性的数据比较care,那么就用AOF
  • 使用RDB和AOF结合一起做持久化,RDB做冷备,可以在不同时期对不同的版本进行备份/恢复;AOF做热备,保证数据仅仅只有1秒的损失,当AOF破损不可用时,在用RDB恢复,两者相互结合,Redis恢复会先加载AOF,如果AOF有问题会在加载RDB,这样就能达到冷热备份的目的

Q.E.D.

知识共享署名-非商业性使用-相同方式共享 4.0 国际许可协议

那一年,我也变成了光!!