ICode9

精准搜索请尝试: 精确搜索
首页 > 数据库> 文章详细

Redis持久化

2021-09-16 19:59:12  阅读:110  来源: 互联网

标签:文件 持久 AOF 写入 Redis 重写


Redis持久化

一、什么是持久化,为什么要持久化,持久化方式

1.1什么是持久化

将数据从掉电易失的内存存放到能够永久存储的设备上

1.2Redis为什么需要持久化

基于内存的
缓存服务器,需要吗?
内存数据库,需要吗?
消息队列,需要吗?

1.3Redis持久化方式

RDB(Redis DB)
AOF(AppendOnlyFile)

二、 Redis持久化-RDB

1.RDB

在默认情况下,Redis 将数据库快照保存在名字为 dump.rdb的二进制文件中
策略
自动:按照配置文件中的条件满足就执行BGSAVE
save 60 1000,Redis要满足在60秒内至少有1000个键被改动,会自动保存一次
手动:客户端发起SAVE、BGSAVE命令

2.SAVE命令

redis > save
阻塞Redis服务,无法响应客户端请求
创建新的dump.rdb替代旧文件
在这里插入图片描述

3.BGSAVE命令

BGSAVE是一个异步命令
在这里插入图片描述在这里插入图片描述
SAVE 和 BGSAVE 命令对比

SAVE不用创建新的进程,速度略快
BGSAVE需要创建子进程,消耗额外的内存
SAVE适合停机维护,服务低谷时段
BGSAVE适合线上执行

4.自动执行

本质上就是BGSAVE
默认配置
save 900 1
save 300 10
save 60 10000
dbfilename dump.rdb
dir /var/lib/redis/6379
只要上面三个条件满足一个,就自动执行备份。
创建RDB文件之后,时间计数器和次数计数器会清零。所以多个条件的效果不是叠加的

5.RDB优缺点

1.优点:
完全备份,不同时间的数据集备份可以做到多版本恢复
紧凑的单一文件,方便网络传输,适合灾难恢复
恢复大数据集速度较AOF快
2.缺点:
会丢失最近写入、修改的而未能持久化的数据
folk过程非常耗时,会造成毫秒级不能响应客户端请求

6.生产环境

创建一个定时任务cron job,每小时或者每天将dump.rdb复制到指定目录
确保备份文件名称带有日期时间信息,便于管理和还原对应的时间点的快照版本
定时任务删除过期的备份
如果有必要,跨物理主机、跨机架、异地备份

三、Redis持久化-AOF

1.AOF

Append only file,采用追加的方式保存
默认文件appendonly.aof
记录所有的写操作命令,在服务启动的时候使用这些命令就可以还原数据库
在这里插入图片描述在这里插入图片描述在这里插入图片描述
调整AOF持久化策略,可以在服务出现故障时,不丢失任何数据,也可以丢失一秒的数据。相对于RDB损失小得多

2.AOF写入机制

2.1AOF方式不能保证绝对不丢失数据
目前常见的操作系统中,执行系统调用write函数,将一些内容写入到某个文件里面时,为了提高效率,系统通常不会直接将内容写入硬盘里面,而是先将内容放入一个内存缓冲区(buffer)里面,等到缓冲区被填满,或者用户执行fsync调用和fdatasync调用时才将储存在缓冲区里的内容真正的写入到硬盘里,未写入磁盘之前,数据可能会丢失。

2.2写入磁盘的策略
appendfsync选项,这个选项的值可以是always、everysec或者no
Always:服务器每写入一个命令,就调用一次fdatasync,将缓冲区里面的命令写入到硬盘。这种模式下,服务器出现故障,也不会丢失任何已经成功执行的命令数据
Everysec(默认):服务器每一秒重调用一次fdatasync,将缓冲区里面的命令写入到硬盘。这种模式下,服务器出现故障,最多只丢失一秒钟内的执行的命令数据
No:服务器不主动调用fdatasync,由操作系统决定何时将缓冲区里面的命令写入到硬盘。这种模式下,服务器遭遇意外停机时,丢失命令的数量是不确定的
运行速度:always的速度慢,everysec和no都很快

3.AOF重写机制

AOF文件过大
合并重复的操作,AOF会使用尽可能少的命令来记录

重写过程:
folk一个子进程负责重写AOF文件
子进程会创建一个临时文件写入AOF信息
父进程会开辟一个内存缓冲区接收新的写命令
子进程重写完成后,父进程会获得一个信号,将父进程接收到的新的写操作由子进程写入到临时文件中
新文件替代旧文件
注:如果写入操作的时候出现故障导致命令写半截,可以使用redis-check-aof工具修复
在这里插入图片描述

4.AOF重写触发

手动:客户端向服务器发送BGREWRITEAOF命令
自动:配置文件中的选项,自动执行BGREWRITEAOF命令

auto-aof-rewrite-min-size <size>,触发AOF重写所需的最小
体积:只要在AOF文件的体积大于等于size时,才会考虑是否需要进行
AOF重写,这个选项用于避免对体积过小的AOF文件进行重写

auto-aof-rewrite-percentage  <percent>,指定触发重写所
需的AOF文件体积百分比:当AOF文件的体积大于auto-aof-rewrite-min-size指定的体积,并且超过上一次重写之后的AOF文件体积的percent %时,就会
触发AOF重写。(如果服务器刚刚启动不久,还没有进行过AOF重写,
那么使用服务器启动时载入的AOF文件的体积来作为基准值)。将这个
值设置为0表示关闭自动AOF重写

5.AOF重写配置项举例

auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
当AOF文件大于64MB时候,可以考虑重写AOF文件
只有当AOF文件的增量大于起始size的100%时(就是文件大小翻了一倍),启动重写

appendonly yes
默认关闭,请开启

6.Redis持久化-AOF优缺点

优点:
1.写入机制,默认fysnc每秒执行,性能很好不阻塞服务,最多丢失一秒的数据
2.重写机制,优化AOF文件
2.如果误操作了(FLUSHALL等),只要AOF未被重写,停止服务移除AOF文件尾部FLUSHALL命令,重启Redis,可以将数据集恢复到 FLUSHALL 执行之前的状态

缺点:
1.相同数据集,AOF文件体积较RDB大了很多
2.恢复数据库速度叫RDB慢(文本,命令重演)

标签:文件,持久,AOF,写入,Redis,重写
来源: https://blog.csdn.net/qq_43278189/article/details/120335793

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有