惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Hacker News: Ask HN
Hacker News: Ask HN
WordPress大学
WordPress大学
T
The Blog of Author Tim Ferriss
The GitHub Blog
The GitHub Blog
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
博客园 - 聂微东
A
About on SuperTechFans
Stack Overflow Blog
Stack Overflow Blog
雷峰网
雷峰网
Microsoft Azure Blog
Microsoft Azure Blog
腾讯CDC
爱范儿
爱范儿
酷 壳 – CoolShell
酷 壳 – CoolShell
博客园 - 【当耐特】
V
Visual Studio Blog
有赞技术团队
有赞技术团队
U
Unit 42
D
Docker
小众软件
小众软件
F
Full Disclosure
I
Intezer
Scott Helme
Scott Helme
P
Privacy International News Feed
P
Proofpoint News Feed
Engineering at Meta
Engineering at Meta
Google DeepMind News
Google DeepMind News
B
Blog
Martin Fowler
Martin Fowler
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
Vercel News
Vercel News
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
Spread Privacy
Spread Privacy
宝玉的分享
宝玉的分享
S
Security Affairs
www.infosecurity-magazine.com
www.infosecurity-magazine.com
月光博客
月光博客
C
Cisco Blogs
云风的 BLOG
云风的 BLOG
Schneier on Security
Schneier on Security
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
T
Threat Research - Cisco Blogs
量子位
Hacker News - Newest:
Hacker News - Newest: "LLM"
H
Heimdal Security Blog
N
Netflix TechBlog - Medium
H
Hacker News: Front Page
P
Proofpoint News Feed
G
GRAHAM CLULEY
V
Vulnerabilities – Threatpost
S
Schneier on Security

博客园_首页

Plist 二进制格式 Milvus 和 PGVector,哪个更好? OpenClaw 已过时?在 VS Code 中运行 Hermes Agent! 第30篇文章:一个大三计科生的自白 Manim如何在数学公式中完美显示中文? Docker 部署 RocketMQ 5 并发编程核心概念辨析 C#事务处理最佳实践:别再让“主表存了、明细丢了”的破事发生 CLI 是什么?为什么大厂突然集体卷命令行? 【从0到1构建一个ClaudeAgent】协作-自主Agent UIImageView 设置图片不生效的原因排查 最小二乘问题详解20:无先验约束下的增量式SFM自由网平差 痞子衡嵌入式:大话双核i.MXRT1180之XIP应用里借助MU实现可靠Flash IAP的方法 AI Chat 封装, SemanticKerne.AiProvider.Unified 已发布 Windows下右键编辑js文件无法打开记事本——在注册表中使用环境变量 在后台服务中使用 Scoped 服务,为什么总是报错? H200 安装驱动并使用sglang启动模型 wireshark 抓包Trap上报告警内容 我用 AI 辅助开发了一系列小工具(2):图片压缩工具 [A Primer On MC and CC] 2.1 Memory Consistency 1 - 指令重排序和 SC 模型 Oracle数据库SCN推进技术详解与实践指南 玩转控件:封装个带图片的Label控件 Claude Code 4.7 真正该升级的不是模型,而是你的工作流 前端小白一句话,AI 帮我做了个颜值拉满的桌面媒体播放器。当代码不再是门槛,一句话编程就是现实。 5. WorkBuddy: 小龙虾的灵魂三件套,让你的小龙虾不只是工具 SQLite 分片方案实战:三种分片策略的深度对比 告别简陋 UI!一款基于 Fluent Design 和基于 WinUI 的开源免费、现代化的 Avalonia UI 控件库 关于二进制排列组合枚举的总结 AI开发-python-LangGraph框架(3-27-LangGraph从零实现大模型智能决策工作流) ElasticSearch主分片和副本分片概念详解 【002】HTTPS 粗解:证书、TLS 握手与对后端配置的影响 Hermes Agent 一周暴涨五万 Star,但我劝你别急着追 明明连接的是Redis的DB0,为什么能查到DB3的数据? 【从0到1构建一个ClaudeAgent】协作-Agent团队 熟悉电子元器件之后,电子小白下一步该怎么走? MAF快速入门(23)通过C#类定义Skills .NET 高级开发 | 手写一个对象映射框架 FastAPI数据库ORM怎么选?我肝了三个Demo后,终于不再纠结了 mysqldump 参数拾遗:在遗忘与铭记之间 C# .NET 周刊|2026年3月5期 Claude code入门 - 陈彦斌 一文学习入门 ThingsBoard 开源物联网平台 GitHub 热门项目 | 2026年04月16日 如何为GIT设置全局勾子,为每次提交追加信息 Number.isFinite和isFinite与isNaN()和Number.isNaN的区别 PortSwigger SQL注入LAB2 推荐一个测试人必备的Skills,从功能到性能全搞定(附详细实操和安装下载方式) 筑基期:掌握Odoo基础核心知识点02(Odoo XML 开发方式详解) GLM模型这么火,咱们用vllm也咧一个呗! 深入理解 AbortController:从底层原理到跨语言设计哲学 字符串学习笔记 多租户系统框架的基础模块设计和分析设计 Apache SeaTunnel Zeta 为什么能做到“又快又稳”? AI开发-python-LangGraph框架(3-26-LangGraph基本概念及第一个简单样例) Vue 3 组件通信,别只会用 Props 和 Emits 了,这几个狠活儿你得看看 ElasticSearch7.X版本配置密码 用Manim实现动态交点计算--从一个动点问题说起 团结引擎+Addressable+Instant Game打包抖音小游戏 function call 实战:让 LLM 自动判断 pod 异常、调用日志工具并完成故障分析 bubseek —— 让 Agent 的足迹,变成团队的洞察 通过 C# 读取并导出 PDF 书签 如何用 GitHub Actions 实现 Steam 自动化发布 【从0到1构建一个ClaudeAgent】并发-后台任务 .NET 高级开发 | 定制 ASP.NET Core 框架 电子小白:什么是运算放大器(运放) zero2Agent:面向大厂面试的 Agent 工程教程,从概念到生产的完整学习路线 堆上的ORW HC32F460 USB CDC通信异常:非对齐访问异常排查 20260413-Hyperbridge 攻击事件:发生在默克尔山上的验证绕过 那些喊着AI 要淘汰你的人,正在靠你的焦虑赚大钱! 深度学习进阶(八)Swin Transformer 最小二乘问题详解19:带先验约束的增量式SFM优化与实现 SnapTranslate 3.0 正式发布:全局划词翻译 + 完整英语学习闭环,一站式搞定查词、记词、复习 工作的意义、工作的困难认知再思考 .NET + AI 进阶实战:基于类的技能开发 - 打造可治理的 Agent 能力模块 【从0到1构建一个ClaudeAgent】规划与协调-技能 上周热点回顾(4.6-4.12) 电子小白的工具三件套:面包板、杜邦线、万能板 单表五亿数据的查询优化 | Mysql、StarRocks 2. WorkBuddy:从“我是谁”到“帮我干活” C# 如何减少代码运行时间:7 个实战技巧 基于HelixToolkit.SharpDX 渲染3D模型 - 笺上知微 从零开始的双臂具身VLA起源及现阶段发展综述 - SkyXZ 记对 xonsh shell 的使用, 脚本编写, 迁移及调优 - pluvium27 受够了Vibe Coding的失控?换个起点,让AI事半功倍 从开始配置漏洞环境到漏洞复现流程 - 難しい 关于10年工作经验的程序员对OpenClaw的实战经验分享以及看法 - 虚无境 Any metadata 的内存布局 C# .NET 周刊|2026年3月2期 - InCerry 我帮你测过了,测试圈排名第二的 Skill 依然很牛逼 Skill Discovery | 无监督技能发现的经典工作总结 - MoonOut 上下文工程是什么?过时了么?一文讲明白! - 一枫说码 开了 TUN 模式还是直连?90% 的人都踩过这个坑 AScript扩展多种脚本语言 - rockey627 AI 学习笔记:Agent 的记忆机制 你能被装进一个文件里吗?——7 万人把同事"蒸馏"成了 AI - 我没有三颗心脏 Claude Code 通关手册(七):给 AI 装上技能包——Skills 完全指南 - 暮色之狐 在浏览器中快速编辑代码:VSCode Web 集成实践 - Newbe36524 蒸馏自己 skill?基于 Deepseek 的蒸馏器,丐版蒸馏方式,简单便捷 - To_Carpe_Diem Spring AI Aliababa和AgentScope,哪个更好? - 苏三说技术
内存化系统设计
无所事事O_o · 2026-04-28 · via 博客园_首页

内存化系统设计

在互联网世界,我们经常会遇到性能瓶颈和数据一致性的问题。尤其是当系统越来越复杂、请求越来越多时,传统的数据库驱动模式常常捉襟见肘。于是,就出现了所谓的 内存化系统

本文先来简单聊聊内存化系统是啥,它和我们平时的互联网系统有什么区别,有啥好处和坑。

后续我会介绍一下内存化设计思路与具体实现,以及在实际应用案例。感兴趣的朋友可以先点赞分享收藏加关注


1. 传统互联网系统的痛点

大多数互联网系统都是这样的:

一切状态都保存在数据库里,服务只是操作数据表。乍一看没问题,但会遇到几个问题:

  1. 性能瓶颈
    每次请求都要去数据库,IO 延迟可能 1~2ms。高并发场景下,这就变成了瓶颈。

  2. 顺序和一致性难保证
    多个请求同时修改同一条数据,就得靠锁或事务。锁多了性能就降,事务多了逻辑就复杂。

  3. 复杂业务原子性难做
    假如一个业务表涉及多步更新,想保证“要么全部成功,要么全部失败”,就需要大事务支持。进一步加剧性能问题。

  4. 调试难
    数据库里是表格,系统的中间状态、计算逻辑、临时数据都看不到。出了问题,要么靠日志,要么重放操作,很麻烦。

总结一句话:数据库是慢、分散、强一致的存储。它适合存档,但不适合高性能的实时计算。


2. 内存化系统的思路

如果数据库慢、难保证顺序和原子性,那干脆把核心状态放到内存里,直接操作内存。

核心思路:

  • 内存就是状态:把业务状态(余额、库存、队列、指标等)全放到内存里。
  • 操作先写日志,再修改内存:日志叫做 WAL(Write-Ahead Log),保证系统挂掉也能重放恢复状态。
  • 定期快照:把内存状态快照到磁盘,加快恢复速度。
  • 事件驱动:请求变为事件,驱动状态变化。

术语解释:

  • WAL(Write-Ahead Log):操作先写入日志,再改内存。日志是是否成功的决定点。
  • 快照(Snapshot):定期把内存状态保存到磁盘,方便重启或恢复时不需要全量回放增量日志。

换句话说:内存化系统把“状态”和“业务逻辑”收敛在一台机器的内存里,用日志保证安全,用快照加速恢复。


3. 内存化 vs 传统互联网系统

我们可以对比一下两者:

维度 传统互联网系统 内存化系统
真相在哪里 数据库 内存 + WAL 日志
并发控制 锁 / 事务 消灭冲突(单写者或分区顺序)
顺序保证 弱顺序 / 最终一致 强顺序、可重放
性能 数据库 IO 瓶颈,毫秒甚至秒级 内存访问 + 顺序执行,微秒级
容灾 DB 回滚 / 补偿 快照 + WAL 恢复

总结:传统系统用数据库作为真相,慢、分散;内存化系统用内存作为真相,快、顺序明确、可恢复。


4. 内存化系统的优势

对比传统系统,内存化系统优势很明显:

  • 单条操作延迟低到微秒级,操作性能跨指数级增长。
  • 并发吞吐量高,因为内存操作顺序明确,不需要锁。
  • 高并发复杂业务可以原子完成,因为状态在内存里一次更新。
  • Crash 恢复快,日志+快照组合可以快速恢复状态。

5. 内存化系统的缺点

当然,内存化系统也不是银弹:

  1. 内存即真相,风险高:一旦丢失内存状态,如果日志或快照没写好就惨了。
  2. 扩展性受限:单状态边界内只能有一个写者,scale-out 需要仔细分区。
  3. 开发复杂:内存管理、GC、热升级、OOM 等都要小心。
  4. 调试难:需要日志和快照辅助重放。
  5. 设计复杂:设计比 CRUD 系统复杂,需要理解单写者、顺序执行等原则。
  6. 存在不可用时间:系统内维护状态,重启时,必然存在一个短暂的不可用时间

6. 总结

内存化系统本质上是 把数据库慢、分散、弱顺序的状态操作搬到内存里,通过 WAL 和快照保证安全,通过事件驱动保证对外同步。

可以这样理解:

传统互联网系统是慢速存档机器,内存化系统是快、顺序明确、可重放的业务引擎。

如果你希望系统对高并发、实时计算、顺序和原子性要求很高,内存化系统绝对值得一看。