rdb(Redis DataBase)
简介:在指定的时间间隔内将内存中的数据集快照写入磁盘,也就是行话讲的Snapshot快照,它恢复时是将快照文件直接读到内存里-------------Redis会单独创建(fork)一个子进程来进行持久化,会先将数据写入到一个临时文件中,待持久化进程都结束后,再用这个临时文件替换上次持久化好的文件。整个过程中,主进程是不进行任何IO操作的,这就确保了极高的性能,如果需要进行大规模数据的恢复,且对于数据恢复的完整性不是非常敏感,那rdb方式要比aof方式更加高效。rdb的缺点是最后一次持久化后的数据可能丢失。
rdb是整个内存的压缩过的snapshot,rdb的数据结构可以配置符合的快照触发条件,默认是===========一分钟内改一万次或5分钟内改10次或15分钟内改一次
rdb保存的是dump.rdb文件
触发rdb快照方法/条件:
1,配置文件中默认的快照配置-------冷拷贝后重新使用,即可以cp dump.rdb dump_new.rdb
2,命令save或者是bgsave:
1,save时只管保存,其他不管,全部阻塞
2,basave时,Redis会在后台异步进行快照操作,快照同时还可以响应客户端请求,可以通过lastsave命令获取最后一次成功执行快照的时间
3,执行flushall命令,也会产生dump.rdb文件,但里面为空,无意义
恢复:
1,将备份文件(dump.rdb)移动到Redis安装目录并启动服务即可
2,CONFIG GIT dir获取目录
优势:
1,适合大规模的数据恢复
2,对数据的完整性和一致性要求不高
劣势:
1, 在一定的时间间隔 做一次备份,所以如果Redis意外down(挂)掉的话,就会丢失最后一次快照后的所有修改
2,fork的时候,内存中的数据会被克隆一份,大致2倍的膨胀性需要考虑
停止的方法-------->动态停止所有rdb保存规则的方法:Redis-cli config set save “”
rdb小结:
优点:
1,rdb是一个非常紧凑的文件
2,rdb在保存rdb文件时父进程唯一需要做的是fork出一个子进程,接下来的工作全部由子进程来做,父进程不需要再做其他io操作,所以rdb持久化方式可以最大化Redis的性能
3,与aof相比,在恢复大的数据集的时候,rdb方式会快些
缺点:
1,数据丢失风险大
2,rdb需要经常fork子进程来保存数据集到硬盘上,当数据集比较大时候,fork的过程是非常耗时的,可能会导致Redis在一些毫秒级不能响应客户端请求
aof(Append Only File)
简介:以日志的形式来记录每个写操作,将Redis执行过的所有写指令记录下来(读操作不记录),只许追加文件但不可以改写文件,Redis启动之初会读取该文件重新构建数据,换言之,Redis重启的话就根据日志文件的内容将写指令从前到后执行一次已完成数据的恢复工作
aof保存的是Appendonly.aof文件
aof启动:设置yes,修改默认的appendonly no,改为yes
aof正常恢复:将有数据的aof文件复制一份到对应目录,重启Redis,然后重新加载即可正常恢复
aof异常恢复:备份被写坏的aof文件,然后通过命令Redis-check-aof --fix 以坏的aof文件 ,进行修复,最后重新启动Redis,加载即可
Rewrite(重写)简介:aof采用文件追加的方式,文件会越来越大,为避免出现这种情况,新增重写机制,当aof文件的大小超过所设定的阈值时,Redis就会启动aof文件的内容压缩,只保留可以恢复数据的最小指令集,可以使用命令bgrewriteaof
重写原理: aof文件持续增长而过大时,会fork一条新进程来将文件重写(也是先写临时文件最后在rename),遍历新进程的内存中的数据,每条记录有一条的set语句,重写aof文件的操作,并没有读取旧的aof文件,而是将整个内存中的数据库内容用命令的方式重写了一个新的aof文件,这点和快照有点类似
触发机制: Redis会记录上次重写时aof文件大小,默认配置是当aof文件大小是上次rewrite后大小的一倍且文件大于64M时触发
aof优势:
1,appendfsync always (每秒同步) 同步持久化 ,每次发生数据变更会被立即记录到磁盘,性能较差但数据完整性比较好
2,appendfsync everysec (每修改同步) 异步操作,每秒记录,如果一秒内宕机,有数据丢失
3,appendfsync no(不同步),从不同步
劣势:
1,相同数据集的数据而言aof文件要远大于rdb文件,恢复速度慢于rdb
2,aof运行效率要慢于rdb,每秒同步策略效率较好,不同步效率和rdb相同
aof小结;
优点:
1,aof文件是一个只进行追加的日志文件
2,Redis可以在aof文件体积变得过大时,自动的在后台对aof重写
3,aof文件有序的保存了对数据库执行的所有写入操作,这些写入操作以Redis协议的格式保存,因此aof文件的内容非常容易的被人读懂,对文件的进行分析也很轻松
缺点:
1,对于相同体积的数据集来说,aof文件的体积通常要大于rdb文件的体积
2,根据所使用的的fsync策略,aof的速度可能慢于rdb
1,rdb持久化方式能够在指定的时间间隔能对你的数据进行快照存储
2,aof持久化方式记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始的数据,aof命令以Redis协议追加保存每次写的操作到文件末尾,Redis还能对aof文件进行后台重写,使aof文件体积不至于过大
3,若只做缓存,即你只希望你的数据在服务器运行时存在,你也可以不使用任何持久化方式
4,若同时开启两种持久化方式:
1,在该情况下,当Redis重启的时候会优先加载aof文件来恢复原始数据,因为通常情况下aof文件保存的数据集要比rdb文件保存的数据集要完整
2,rdb数据不实时,同时使用两者时服务器重启也只会找aof文件,同时建议不要只使用aof文件 ,因为rdb更适合用于备份数据库(因aof在不断变化不好备份)快速重启,而且不会有aof可能潜在的bug,同时可以留着以确保意外发生。
注:Redis 官网上所说的,AOF 在“每一秒钟保存一次”时发生故障,只丢失 1 秒钟数据的说法,实际上并不准确。
