惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

S
Schneier on Security
The Register - Security
The Register - Security
月光博客
月光博客
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
The GitHub Blog
The GitHub Blog
博客园 - 司徒正美
罗磊的独立博客
U
Unit 42
S
SegmentFault 最新的问题
Y
Y Combinator Blog
博客园_首页
Hugging Face - Blog
Hugging Face - Blog
J
Java Code Geeks
Schneier on Security
Schneier on Security
Know Your Adversary
Know Your Adversary
C
Check Point Blog
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
Simon Willison's Weblog
Simon Willison's Weblog
V
Vulnerabilities – Threatpost
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
阮一峰的网络日志
阮一峰的网络日志
The Hacker News
The Hacker News
博客园 - 叶小钗
C
Cybersecurity and Infrastructure Security Agency CISA
Spread Privacy
Spread Privacy
L
LINUX DO - 热门话题
T
The Exploit Database - CXSecurity.com
P
Palo Alto Networks Blog
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
Latest news
Latest news
L
Lohrmann on Cybersecurity
A
About on SuperTechFans
L
LangChain Blog
Stack Overflow Blog
Stack Overflow Blog
S
Securelist
A
Arctic Wolf
D
Darknet – Hacking Tools, Hacker News & Cyber Security
T
Threatpost
Scott Helme
Scott Helme
博客园 - 聂微东
博客园 - 【当耐特】
T
Tenable Blog
I
Intezer
D
DataBreaches.Net
B
Blog RSS Feed
Security Latest
Security Latest
C
Cisco Blogs
T
Tor Project blog
N
Netflix TechBlog - Medium

博客园_首页

Linux实操--组管理、权限管理和定时任务 Java + EasyExcel 实现单个接口导出多个Excel Mem0 源码解析系列(二):提示词工程的深度剖析 Openclaw TaskFlow究竟是什么?和普通Skill技能有什么区别 博文阅读密码验证 - 博客园 嘉立创开源:应该是全网MicroPython教程最多的开发板 Hermes Agent 集成实践:从协议到生产 2026年AI编程工具横评:Cursor、Codex、Claude Code、Zed、Windsurf Java程序员必看的RAG入门教程 2026 AI效率神器:Superpowers + Claude Code 保姆级教程 本地大模型部署全攻略:从 0 到 1 玩转 Ollama 【从0到1构建一个ClaudeAgent】内存管理-上下文压缩 .NET 高级开发 | 设计、实现一个事件总线框架 电子小白入门之NE555 3. WorkBuddy:隐藏玩法,一键召唤专家,让 AI 以"专家身份"给你干活 和AI一起搞事情#3:Claude Teammate 游戏开发翻车实录 【OpenClaw】通过 Nanobot 源码学习架构---(7)Memory C# .NET 周刊|2026年3月3期 我在 Debian 11 上把 K8s 单机搭起来了,过程没你想的那么顺(/opt 目录版) 深度学习进阶(七)Data-efficient Image Transformer CLI+Skill搭建浏览器AI自动化框架,告别一切重复枯燥任务 告别Token账单无底洞:OpenClaw本地部署,重塑企业数据主权的唯一解 FastAPI+Vue:文件分片上传+秒传+断点续传,这坑我帮你踩平了! SBTI 爆火后,我做了个程序员版的 CBTI。。已开源 + 附开发过程 多模态检索开始进入工程期:用 Sentence Transformers 搭建可落地的 Multimodal RAG 100多行代码实现一个最简单的Agent(用ReAct) Claude Code 通关手册(八):推荐 5 个 Hooks,代码质量提升 3 倍 老板:“有人截图了!”。安全部门:“收到,马上查暗水印!” - why技术 技术之外,皆是人间 C#/.NET/.NET Core技术前沿周刊 | 第 69 期(2026年4.01-4.12) Snack JSONPath 项目架构分析 Claude Code Buddy 小析:一个非核心功能,如何体现产品的细节完成度 AI新时代下的图床管理方案-Cloudflare图床+MCP+Skills方案指南 化繁为简:顺丰速运App如何通过 HarmonyOS SDK实现专业级空间测量 从零实现富文本编辑器#13-React非编辑节点的内容渲染 AI开发-python-langchain框架(3-23-OpenAI Functions风格Tool Calling智能助手) .NET + AI 进阶实战:基于类的技能开发 - 打造可治理的 Agent 能力模块 【从0到1构建一个ClaudeAgent】规划与协调-技能 上周热点回顾(4.6-4.12) 电子小白的工具三件套:面包板、杜邦线、万能板 单表五亿数据的查询优化 | Mysql、StarRocks 2. WorkBuddy:从“我是谁”到“帮我干活” C# 如何减少代码运行时间:7 个实战技巧 基于HelixToolkit.SharpDX 渲染3D模型 - 笺上知微 从零开始的双臂具身VLA起源及现阶段发展综述 - SkyXZ 记对 xonsh shell 的使用, 脚本编写, 迁移及调优 - pluvium27 受够了Vibe Coding的失控?换个起点,让AI事半功倍 从开始配置漏洞环境到漏洞复现流程 - 難しい 关于10年工作经验的程序员对OpenClaw的实战经验分享以及看法 - 虚无境 Any metadata 的内存布局 C# .NET 周刊|2026年3月2期 - InCerry 我帮你测过了,测试圈排名第二的 Skill 依然很牛逼 Skill Discovery | 无监督技能发现的经典工作总结 - MoonOut PbootCMS 网站内容数量多导致访问慢?这些实用优化方案帮你提速! - 家兴网络技术工作室 上下文工程是什么?过时了么?一文讲明白! - 一枫说码 网站漏洞怎么发现并修复?一篇实用指南(附完整流程) - 家兴网络技术工作室 开了 TUN 模式还是直连?90% 的人都踩过这个坑 Github日报|2026年04月12日 - AI一族 AScript扩展多种脚本语言 - rockey627 AI 学习笔记:Agent 的记忆机制 你能被装进一个文件里吗?——7 万人把同事"蒸馏"成了 AI - 我没有三颗心脏 Claude Code 通关手册(七):给 AI 装上技能包——Skills 完全指南 - 暮色之狐 在浏览器中快速编辑代码:VSCode Web 集成实践 - Newbe36524 蒸馏自己 skill?基于 Deepseek 的蒸馏器,丐版蒸馏方式,简单便捷 - To_Carpe_Diem Spring AI Aliababa和AgentScope,哪个更好? - 苏三说技术 Etsy 把 1000 个 MySQL 分片迁进 Vitess:425TB 数据背后的真正问题不是性能,而是运维规模 MicroPython LVGL基础知识和概念:底层渲染与性能优化 - FreakStudio 数据库草图算法 Python 潮流周刊#146:CPython 引入 Rust 的进展 - 豌豆花下猫 最小生成树 - mofei1116 红日靶场七:从外网入口、容器逃逸到 AD 接管的完整利用链复盘 - YouDiscovered1t 分享四款开源且实用的 Kafka 管理工具 - 追逐时光者 vLLM 权重加载机制全解析:从挑战到理想架构 LCT 学习笔记 - ACehomoxue Avalonia UI 12.0.0 正式发布:架构演进和性能飞跃 - 张善友 当 AI Agent 把调用链拉长,延迟开始成为一门生意 conhost.exe 无法显示 U+2717 - 145a 太秀了,我把自己蒸馏成了 Skill!已开源 - 程序员鱼皮 ASP.NET Core 内存缓存实战:一篇搞懂该怎么配、怎么避坑 基于 Ghostty 带有分割标签页和为 Claude 编程设计的通知终端 - BugShare AI 焊死入口:教育的“操作系统级”重塑 - 郝hai 初级Java开发工程师使用sql脚本编写代码的过程是简单而且不糊涂 - CoderOilStation Claude Code通关手册(六):MCP协议完全指南 - 暮色之狐 边框灯光环绕动画特效实现指南 - Newbe36524 开源:子木蒸馏版的 SEO 审计工具 seo-audit-skill v1.0 我所理解的Python元模型 【从0到1构建一个ClaudeAgent】规划与协调-TodoWrite - 程序员Seven Claude 和 Codex 在审计 Skill 上性能差异探究 - ACai_sec AScript如何实现中文脚本引擎 - rockey627 【渗透测试】HTB Season10 Garfield 全过程wp - dynasty_chenzi Android 开发者为什么必须掌握 AI 能力?端侧视角下的技术变革 树状数组正确性证明 - AC-wyr 你的 AI 焦虑,可能比 AI 本身更危险——ATM 机没有消灭银行柜员,但恐慌消灭了你的判断力 - 我没有三颗心脏 一个拉胯的分库分表方案有多绝望?整个部门都在救火! - 冰河团队 动态规划入门必学之走方格问题 - Ofnoname PostgREST 与 PostgreSQL 角色权限配置全解析(生产级实践) - SheepDog1998 使用 UEFI 图形输出协议 GOP 在屏幕上显示图像的方法 - 阿源- Claude Code通关手册(五):组建你的AI专家团队,子代理系统 - 暮色之狐 一个程序员到架构师的催婚路之感悟(整整10年后的催婚相亲感悟) - MisterLip 用 Agent Skill 自动生成工作周报 - 赵康
Redis--持久化之AOF
NE_STOP · 2026-05-06 · via 博客园_首页

AOF持久化

AOF Append only FIle,指Redis将每一次的写操作以日志形式记录到一个AOF文件中的持久化技术。

需要恢复内存数据时,将这些写操作重新执行一次,就会恢复到之前的内存数据状态。

AOF基础配置

AOF的开启

# 在Redis配置文件中配置如下:
appendonly yes

默认情况下此配置关闭。

文件名配置

appendfilename “appendonly.aof”

Redis7 在这里发生了重大变化,原来只有一个appendonly.aof文件,现在具有了三类多个文件:

  • 基本文件:可以是RDB格式也可以是AOF格式,其存放内容是由RDB转换为AOF当时内存的快照数据。该文件可以有多个。
  • 增量文件:以操作日志形式记录转为AOF后的写入操作,该文件可以有多个。
  • 清单文件:用于维护AOF文件的创建顺序,保证激活时的应用顺序。该文件只有一个。

混合持久化开启

aof-use-rdb-preamble yes

对于基本文件可以是RDB格式也可以是AOF格式,通过aof-use-rdb-preamble属性可以设置。默认yes。

默认AOF持久化的基本文件以rdb格式,也就是默认启用混合持久化。

AOF文件目录配置

appenddirname “appendonlydir”

AOF持久化文件指定存放目录,默认为Redis安装目录。

AOF文件格式

AOF文件包含三类文件:基本文件、增量文件和清单文件。

基本文件一般是rdb格式,下面将解释增量文件和清单文件的内容格式。

Redis协议

增量文件扩展名为.aof,AOF格式就是Redis通讯协议格式,AOF文件的本质就是基于Redis通讯协议的文本,将命令以纯文本的方式写入到文件中。

Redis协议规定,Redis文本以行来划分,每行以\r\n结束,每一行都有一个消息头,表示消息类型,消息头有6种不同符号表示:

  • (+):表示一个正确的状态信息
  • (-):表示一个错误信息
  • (*):表示消息体总共有多少行,不包括当前行
  • ($):表示下一行消息数据的长度,不包括换行符长度\r\n
  • (空):表示一个消息数据
  • (:):表示返回一个数值

查看AOF文件

打开appendonly.aof.1.incr.aof 文件,可以看到如下格式内容:

屏幕截图1

以上内容有三条命令:一条数据库切换命令select 0,两条set命令。其意义如下:

*2   # 表示当前命令包含2个参数
$6  # 表示第一个参数包含6个字符
select # 第一个参数
$1 # 表示第二个参数包含1个字符
0 # 第二个参数
*3 #表示当前命令包含3个参数
$3 # 表示第一个参数包含3个字符
set # 第一个参数
$3 #表示第二个参数包含3个字符
k11 #表示第二个参数
$3 #表示第三个参数包含3个字符
v11 #表示第三个参数

清单文件

打开清单文件appendonly.aof.manifest,查看其内容如下:

无标2题

该文件会先安装seq序号列出所有基本文件,基本文件type类型为b,

再安装seq序号列出所有增量文件,增量文件type类型为i。

当Redis启动数据恢复,会按照该文件由上到下依次加载他们中的数据。

Rewrite机制

随着时间推移,AOF文件会越来越大,为了放置AOF文件过大占用大量的空间,降低性能,Redis引入了Rewrite机制对AOF文件进行压缩。

什么是Rewrite

Rewrite就是对AOF文件进行重写整理

当Rewrite开启后,主进程redis-server创建一个子进程bgrewriteaof,该子进程完成Rewrite过程。

其首先对现有aof文件进行Rewrite计算,将计算结果写入到一个临时文件,写入完毕后,再rename该临时文件为aof文件,覆盖原有文件。

Rewrite计算

Rewrite计算也称Rewrite策略。Rewrite计算遵循以下策略:

  • 读操作不写入文件
  • 无效命令不写入文件(对同一个key多次写命令,只写入最新的指令)
  • 过期数据不写入文件
  • 多条命令合并写入文件

手动开启Rewrite

Rewrite开启有两种方式:bgrewriteaof命令手动开启;设置条件自动开启。

bgrewriteaof命令会使主进程redis-server创建出一个子进程bgrewriteaof,有此子进程完成rewrite过程。

在Rewrite期间,redis-server仍可以对外提供读写服务。

自动开启Rewrite

通过设置一些条件,当条件满足后才会开启。可在配置文件中对Rewrite自动启动条件设置:

无标3题

  • auto-aof-rewrite-percentage:开启rewrite的增大比例,默认100%。指定为0.表示禁用自动rewrite。
  • auto-aof-rewrite-min-size:开启rewrite的AOF文件最小值,默认64M。该值的设置主要是为了放置小AOF文件被rewrite,从而导致性能下降。

当AOF日志文件大小增长到指定的百分比时,主进程redis-server创建出一个子进程bgrewriteaof来完成rewrite过程。

其工作原理如下:

Redis会记住最新rewrite后的AOF文件大小作为基本大小,
如果从主机启动后就没有发生过重写,基本大小就是启动时AOF的大小。
如果当前AOF文件大于基本大小的指定百分比阈值,且当前AOF文件大于配置文件中指定的最小阈值,则会触发rewrite。

AOF优化配置

appendfsync

当客户端提交写操作命令后,该命令就会写入到aof_buf中,而aof_buf中的数据持久化到AOF文件的过程称为数据同步。

何时将aof_buf的数据同步到AOF文件?

采用不同的数据同步策略,同时的时机是不同的,有三种策略:

  • always:写操作命令写入到aof_buf后立即调用fsync()函数,将其追加到AOF文件。该策略效率低,比较安全,不会丢失太多数据。 最多就是丢失刚刚执行的写操作。
  • no:写操作命令写入到aof_buf后什么也不做,不会调用fsync()函数。由操作系统负责将aof_buf中的数据同步到磁盘,Linux系统默认同步周期是30秒,效率较高
  • everysec:默认策略。写操作命令写入aof_buf后不直接调用fsync(),而是每秒调用一次fsync()来完成同步。该策略兼顾性能与安全,是一种折中方案。

no-appendfsync-on-rewrite

该属性指定,当AOF fsync策略设置为always或everysec,当主进程创建子进程正在执行bgsave或bgrewriteaof时,主进程是否不调用fsync()来做数据同步

设置为no,双重否定即肯定,主进程会调用fsync()做同步;

设置为yes,则不会调用fsync()做数据同步。

如果调用fsync(),在同步数据量非常大时,会阻塞主进程对外提供服务;

如果不调用fsync(),可能会存在30秒数据丢失风险。

aof-rewrite-incremental-fsync

当bgrewriteaof在执行时,先将rewrite计算结果写入到aof_rewrite_buf缓存中,当缓存数据达到一定量后就会调用fsync()进行刷盘操作,即数据同步。

该属性用户控制fsync()每次刷盘的数据量最大不超过4MB。这样可以避免由于单次刷盘量过大而引发长时间阻塞。

aof-load-truncated

在进行AOF持久化时,系统突然宕机,此时写入到AOF文件中的最后一条数据可能不完整,当主机启动后,Redis在AOF文件不完整的情况下是否可以启动,由aof-load-truncated设置。其值为:

  • yes:AOF文件最后不完整的数据会被截断删除,不影响Redis启动。
  • no:不删除不完整数据,Redis无法启动.

aof-timestamp-enabled

该属性设置为yes,会在AOF文件中显示时间戳,方便按照时间对数据进行恢复.

但是,该方式可能会与AOF解析器不兼容,所以默认为no,不开启.

AOF持久化过程

无标4题

AOF持久化过程如下:

  1. Redis接收到写命令后将命令按照Redis通讯协议格式暂时添加到AOF缓冲区aof_buf。
  2. 根据数据同步策略,再将缓冲区的数据一次性写入磁盘的AOF文件,以减少io次数,提高性能。
  3. 当AOF文件达到rewrite条件时,redis-server主进程会fork一个子进程bgrewriteaof,由该子进程完成rewrite过程。
  4. 子进程先对AOF文件进行rewrite计算,将计算结果写入一个临时文件,全部写入完毕后,再rename该临时文件,覆盖原文件。
  5. 如果在rewrite过程种又有写命令追加,那么这些数据会写入aof_rewrite_buf缓冲区。等将rewrite计算结果写入临时文件后,会先将aof_rewrite_buf缓冲区的数据写入到临时文件,然后再rename成源文件名称,覆盖原文件。

RDB与AOF对比

优点 缺点
RDB 文件小、恢复快 安全性差、写时复制会降低性能、RDB文件可读性差
AOF 安全性高、AOF文件可读性强 文件大、写操作影响性能、数据恢复慢

官方推荐使用RDB与AOF混合式持久化

如果数据安全性要求不高,推荐使用RDB方式

不推荐使用纯AOF方式

若Redis仅用作缓存,则无需使用任何持久化技术。