首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Redis系列-持久化AOF

上篇介绍了持久化方案的RDB模式,今天我们来谈谈其另外一种持久化方案AOF。

AOF(append only file)持久化是以独立日志的方式记录每次写命令,将数据的操作过程进行保存,日志形式,存储操作过程,存储格式复杂,关注点在数据的操作过程,重启时再重新执行AOF文件中命令达到恢复数据的目的。与RDB相比可以简单描述为改记录数据为记录数据产生的过程(不写全数据)。

AOF的主要作用是解决了数据持久化的实时性,目前已经是Redis持久化的主流方式。

AOF写数据过程

当有命令执行时,其不会马上记录日志,而是会将这些命令先放到redis为其开辟的AOF的写命令缓存区内,当这些命令达到一定的量级后在将这些命令写到.aof的文件中。如下图的执行:

以上的写aof过程我们就会有个疑问,它什么时候存,多大的量才会存?

AOF写数据三种策略(appendfsync)

always(每次) 每次写入操作均同步到AOF文件中,数据零误差,性能较低。(不建议使用)

everysec(每秒) 每秒将缓冲区中的指令同步到AOF文件中,数据准确性较高,性能较高在系统突然宕机的情况下丢失1秒内的数据。(建议使用,也是默认配置 )

no(系统控制) 由操作系统控制每次同步到AOF文件的周期,整体过程不可控。

AOF功能开启

配置:appendonlyyes|no

作用: 是否开启AOF持久化功能,默认为不开启状态

配置:appendfsyncalways|everysec|no

作用: AOF写数据策略

AOF相关配置

配置:appendfilenamefilename

用来指定AOF持久化文件名,默认文件名为appendonly.aof,建议配置为appendonly-端口号.aof

配置:dir指AOF持久化文件保存路径,与RDB持久化文件保持一致即可

AOF重写

随着命令不断写入AOF,文件会越来越大,为了解决这个问题,Redis引入了AOF重写机制压缩文件体积。AOF文件重写是将Redis进程内的数据转化为写命令同步到新AOF文件的过程。简单说就是将对同一个数据的若干个条命令执行结果转化成最终结果数据对应的指令进行记录。

AOF重写作用

降低磁盘占用量,提高磁盘利用率。

提高持久化效率,降低持久化写时间,提高IO性能 。

降低数据恢复用时,提高数据恢复效率。

AOF重写规则

进程内已超时的数据不再写入文件。

忽略无效指令,重写时使用进程内数据直接生成,这样新的AOF文件只保留最终数据的写入命令 如del key1、 hdel key2、srem key3、set key4 111、set key4 222等。

对同一数据的多条写命令合并为一条命令。

如lpush list1 a、lpush list1 b、 lpush list1 c 可以转化为:lpush list1 a b c。

为防止数据量过大造成客户端缓冲区溢出,对list、set、hash、zset等类型,每条指令最多写入64个元素

AOF重写方式

手动重写bgrewriteaof其执行流程和RDB的流程类似

自动重写

auto-aof-rewrite-min-sizesize 自动重写的aof的文件大小

auto-aof-rewrite-percentagepercentage 自动重写的百分比

AOF自动重写方式

自动重写触发条件设置

auto-aof-rewrite-min-sizesize

auto-aof-rewrite-percentagepercent

自动重写触发比对参数( 运行指令info  获取具体信息 )

aof_current_size

aof_base_size

自动重写触发条件

aof_current_size > auto-aof-rewrite-min-size

当aof当前的大小大于设置的重写大小时就执行

((aof_current_size - aof_base_size)/aof_base_size)>=auto-aof-rewrite-percentage

当前的大小减去基本的大小,再除以其基本的大小,当这个值大于等于设置的比例时则执行。

以上两种满足一种则触发。

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20201127A0I51R00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券