惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

V
Vulnerabilities – Threatpost
Google DeepMind News
Google DeepMind News
Scott Helme
Scott Helme
NISL@THU
NISL@THU
T
Tor Project blog
T
Tenable Blog
D
Darknet – Hacking Tools, Hacker News & Cyber Security
P
Privacy International News Feed
Cyberwarzone
Cyberwarzone
Project Zero
Project Zero
S
Schneier on Security
C
Cybersecurity and Infrastructure Security Agency CISA
P
Proofpoint News Feed
Exploit-DB.com RSS Feed
Exploit-DB.com RSS Feed
O
OpenAI News
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
美团技术团队
Hugging Face - Blog
Hugging Face - Blog
V2EX - 技术
V2EX - 技术
H
Help Net Security
C
Check Point Blog
T
The Exploit Database - CXSecurity.com
Forbes - Security
Forbes - Security
人人都是产品经理
人人都是产品经理
U
Unit 42
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
Microsoft Azure Blog
Microsoft Azure Blog
D
Docker
I
InfoQ
Schneier on Security
Schneier on Security
K
Kaspersky official blog
罗磊的独立博客
Cisco Talos Blog
Cisco Talos Blog
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
S
Security Affairs
Microsoft Security Blog
Microsoft Security Blog
GbyAI
GbyAI
雷峰网
雷峰网
G
GRAHAM CLULEY
Cloudbric
Cloudbric
IT之家
IT之家
Stack Overflow Blog
Stack Overflow Blog
AI
AI
L
LINUX DO - 热门话题
云风的 BLOG
云风的 BLOG
博客园_首页
T
Threat Research - Cisco Blogs
S
Secure Thoughts
有赞技术团队
有赞技术团队

博客园_首页

Plist 二进制格式 Milvus 和 PGVector,哪个更好? OpenClaw 已过时?在 VS Code 中运行 Hermes Agent! 第30篇文章:一个大三计科生的自白 Manim如何在数学公式中完美显示中文? Docker 部署 RocketMQ 5 并发编程核心概念辨析 C#事务处理最佳实践:别再让“主表存了、明细丢了”的破事发生 CLI 是什么?为什么大厂突然集体卷命令行? 【从0到1构建一个ClaudeAgent】协作-自主Agent UIImageView 设置图片不生效的原因排查 最小二乘问题详解20:无先验约束下的增量式SFM自由网平差 痞子衡嵌入式:大话双核i.MXRT1180之XIP应用里借助MU实现可靠Flash IAP的方法 AI Chat 封装, SemanticKerne.AiProvider.Unified 已发布 Windows下右键编辑js文件无法打开记事本——在注册表中使用环境变量 在后台服务中使用 Scoped 服务,为什么总是报错? H200 安装驱动并使用sglang启动模型 wireshark 抓包Trap上报告警内容 我用 AI 辅助开发了一系列小工具(2):图片压缩工具 [A Primer On MC and CC] 2.1 Memory Consistency 1 - 指令重排序和 SC 模型 Oracle数据库SCN推进技术详解与实践指南 玩转控件:封装个带图片的Label控件 Claude Code 4.7 真正该升级的不是模型,而是你的工作流 前端小白一句话,AI 帮我做了个颜值拉满的桌面媒体播放器。当代码不再是门槛,一句话编程就是现实。 5. WorkBuddy: 小龙虾的灵魂三件套,让你的小龙虾不只是工具 SQLite 分片方案实战:三种分片策略的深度对比 告别简陋 UI!一款基于 Fluent Design 和基于 WinUI 的开源免费、现代化的 Avalonia UI 控件库 关于二进制排列组合枚举的总结 AI开发-python-LangGraph框架(3-27-LangGraph从零实现大模型智能决策工作流) ElasticSearch主分片和副本分片概念详解 【002】HTTPS 粗解:证书、TLS 握手与对后端配置的影响 Hermes Agent 一周暴涨五万 Star,但我劝你别急着追 明明连接的是Redis的DB0,为什么能查到DB3的数据? 【从0到1构建一个ClaudeAgent】协作-Agent团队 熟悉电子元器件之后,电子小白下一步该怎么走? MAF快速入门(23)通过C#类定义Skills .NET 高级开发 | 手写一个对象映射框架 FastAPI数据库ORM怎么选?我肝了三个Demo后,终于不再纠结了 mysqldump 参数拾遗:在遗忘与铭记之间 C# .NET 周刊|2026年3月5期 Claude code入门 - 陈彦斌 一文学习入门 ThingsBoard 开源物联网平台 GitHub 热门项目 | 2026年04月16日 如何为GIT设置全局勾子,为每次提交追加信息 Number.isFinite和isFinite与isNaN()和Number.isNaN的区别 PortSwigger SQL注入LAB2 推荐一个测试人必备的Skills,从功能到性能全搞定(附详细实操和安装下载方式) 筑基期:掌握Odoo基础核心知识点02(Odoo XML 开发方式详解) GLM模型这么火,咱们用vllm也咧一个呗! 深入理解 AbortController:从底层原理到跨语言设计哲学 字符串学习笔记 多租户系统框架的基础模块设计和分析设计 Apache SeaTunnel Zeta 为什么能做到“又快又稳”? AI开发-python-LangGraph框架(3-26-LangGraph基本概念及第一个简单样例) Vue 3 组件通信,别只会用 Props 和 Emits 了,这几个狠活儿你得看看 ElasticSearch7.X版本配置密码 用Manim实现动态交点计算--从一个动点问题说起 团结引擎+Addressable+Instant Game打包抖音小游戏 function call 实战:让 LLM 自动判断 pod 异常、调用日志工具并完成故障分析 bubseek —— 让 Agent 的足迹,变成团队的洞察 通过 C# 读取并导出 PDF 书签 如何用 GitHub Actions 实现 Steam 自动化发布 【从0到1构建一个ClaudeAgent】并发-后台任务 .NET 高级开发 | 定制 ASP.NET Core 框架 电子小白:什么是运算放大器(运放) zero2Agent:面向大厂面试的 Agent 工程教程,从概念到生产的完整学习路线 堆上的ORW HC32F460 USB CDC通信异常:非对齐访问异常排查 20260413-Hyperbridge 攻击事件:发生在默克尔山上的验证绕过 那些喊着AI 要淘汰你的人,正在靠你的焦虑赚大钱! 深度学习进阶(八)Swin Transformer 最小二乘问题详解19:带先验约束的增量式SFM优化与实现 SnapTranslate 3.0 正式发布:全局划词翻译 + 完整英语学习闭环,一站式搞定查词、记词、复习 工作的意义、工作的困难认知再思考 .NET + AI 进阶实战:基于类的技能开发 - 打造可治理的 Agent 能力模块 【从0到1构建一个ClaudeAgent】规划与协调-技能 上周热点回顾(4.6-4.12) 电子小白的工具三件套:面包板、杜邦线、万能板 单表五亿数据的查询优化 | Mysql、StarRocks 2. WorkBuddy:从“我是谁”到“帮我干活” C# 如何减少代码运行时间:7 个实战技巧 基于HelixToolkit.SharpDX 渲染3D模型 - 笺上知微 从零开始的双臂具身VLA起源及现阶段发展综述 - SkyXZ 记对 xonsh shell 的使用, 脚本编写, 迁移及调优 - pluvium27 受够了Vibe Coding的失控?换个起点,让AI事半功倍 从开始配置漏洞环境到漏洞复现流程 - 難しい 关于10年工作经验的程序员对OpenClaw的实战经验分享以及看法 - 虚无境 Any metadata 的内存布局 C# .NET 周刊|2026年3月2期 - InCerry 我帮你测过了,测试圈排名第二的 Skill 依然很牛逼 Skill Discovery | 无监督技能发现的经典工作总结 - MoonOut 上下文工程是什么?过时了么?一文讲明白! - 一枫说码 开了 TUN 模式还是直连?90% 的人都踩过这个坑 AScript扩展多种脚本语言 - rockey627 AI 学习笔记:Agent 的记忆机制 你能被装进一个文件里吗?——7 万人把同事"蒸馏"成了 AI - 我没有三颗心脏 Claude Code 通关手册(七):给 AI 装上技能包——Skills 完全指南 - 暮色之狐 在浏览器中快速编辑代码:VSCode Web 集成实践 - Newbe36524 蒸馏自己 skill?基于 Deepseek 的蒸馏器,丐版蒸馏方式,简单便捷 - To_Carpe_Diem Spring AI Aliababa和AgentScope,哪个更好? - 苏三说技术
FastAPI服务半夜又挂了?先别急着重启,查查你的数据库连接池“池子”是不是漏了
一名程序媛呀 · 2026-04-20 · via 博客园_首页

是不是觉得你的 FastAPI 服务像个长不大的孩子,白天活蹦乱跳,一到夜深人静流量低谷时就给你来个假死、无响应?然后你迷迷糊糊被报警叫醒,骂骂咧咧重启一下又好了,仿佛什么都没发生过。第二天顶着黑眼圈去看日志,除了几条模糊的 “connection timeout” 啥也抓不住。🎯 如果这剧情你熟,那今天这篇,大概率是你的菜。

今天咱们不扯虚的,就解决一件事:让你的 FastAPI 跟数据库打交道时,别再因为连接池那点破事儿掉链子。我会从原理到参数,再到监控,把我踩过的坑变成你的垫脚石。


🎯 案例模拟

那是某个凌晨三点,手机跟抽风一样狂震。线上服务接口响应时间从 50ms 飙升到 30s,然后直接 timeout。

你睡眼惺忪地连上服务器,一看进程还在,但就是死活连不上数据库。日志里躺着一堆 QueuePool limit of size ... overflow ... reached ,当时就懵了,心想:“我这大半夜的又没流量,连接池怎么就满了呢?”

重启大法好啊,服务瞬间恢复。但这就像止疼药,治标不治本。第二天你扒了一层皮才发现,原来是 MySQL 那边的 wait_timeout 把空闲连接给杀了,而 SQLAlchemy 的连接池还傻乎乎地以为连接活着,拿起来就用,结果一用一个不吱声。

所以,官方文档还是要仔细看啊,以前总觉得默认参数就是最佳实践,结果被现实狠狠打脸。数据库连接池这玩意儿,没有银弹,默认配置只保证你能跑,不保证你跑得稳。

🍜 先听个故事:为啥非得要个“池子”?

好,咱们先来点轻松的。把数据库想象成一家火爆的餐厅后厨,每个请求就是一个来吃饭的客人。

- 没有连接池的时候:

来一个客人,服务员现场跑去后厨招一个厨师(建立TCP连接,握手认证),做完菜立马把厨师开了(关闭连接)。客人一多,光雇厨师和开厨师的时间就占了90%,后厨门都要被挤爆了。

- 有连接池的时候:

提前雇好一群厨师在后厨待命( pool_size ),来客人了直接分配一个厨师去炒菜,炒完了厨师不辞退,而是回到休息室等着(回到池子)。这效率,天差地别。

所以连接池的核心就是仨字:复用、省心、有序。 减少了 TCP 握手的开销,还能限制你最多能开多少连接,防止把数据库给冲垮。

🔧 四个参数,保你平安(重点!)

FastAPI 底下通常用 SQLAlchemy,而 SQLAlchemy 的队列池(QueuePool)有四个参数,你必须在配置里混个脸熟。别怕,我用大白话给你翻译。

- pool_size=5 常驻厨师数量。 后厨里常年保持待命的“正式工”。设太小了吞吐量上不去,设太大了数据库那边该骂娘了(数据库总连接数有限制)。

- max_overflow=10 临时工上限。 高峰期客人太多,正式工忙不过来,可以招点临时工。但最多只能再招这么多。高峰期一过,临时工会自动辞退。

- pool_recycle=3600 健康体检时间。 每个连接(厨师)上岗满1小时,不管有没有活,强制让他退休,换新人。
这就是为了防止数据库那边因为长时间没动静,偷偷把连接给掐了(比如MySQL默认8小时wait_timeout),咱们自己先主动点。

- pool_pre_ping=True 上岗前喊一嗓子。 从池子里拿连接之前,先发个简单的 SELECT 1 探探路。如果对面没反应(连接被杀了),直接扔掉换个新的。
这个参数是救命稻草,我强烈建议你设为 True,虽然有一丢丢性能开销,但跟半夜被叫起来相比,这都不是事儿。

再说个容易翻车的点:
pool_size 到底设多少?网上那些抄来抄去的公式 (CPU核心数 * 2) + 有效磁盘数 是个参考,但千万别当圣旨。
根据以往的经验,对于 FastAPI 这种异步框架,因为并发高,连接占用时间短, pool_size 反而可以比同步框架(Django)设得小一点,比如 10-20 之间,然后靠 max_overflow 去扛突发流量。具体是多少,往下看监控部分。

👀 光说不练假把式,监控得支棱起来

是不是以为参数配好就完了?Too young!参数调优没有监控,那就跟盲人开车一样——全靠运气。咱们得把连接池的底裤扒开看看。

好在 SQLAlchemy 留了后门——事件监听。我们可以写几行代码,把连接池的状态暴露给 Prometheus。

# 这段代码可以直接塞进你的 FastAPI 启动事件里
from sqlalchemy import event
from prometheus_client import Gauge

# 定义几个仪表盘指标
pool_size_gauge = Gauge('db_pool_size', 'Current pool size')
checked_out_gauge = Gauge('db_pool_checked_out', 'Connections currently in use')
overflow_gauge = Gauge('db_pool_overflow', 'Current overflow connections')

def collect_pool_metrics(db_pool):
    pool_size_gauge.set(db_pool.size())
    checked_out_gauge.set(db_pool.checkedout())
    overflow_gauge.set(db_pool.overflow())

# 监听从池子里拿连接的事件(checkout)
@event.listens_for(engine, 'checkout')
def receive_checkout(dbapi_conn, conn_record, conn_proxy):
    collect_pool_metrics(conn_proxy._pool)

# 监听归还连接的事件(checkin)
@event.listens_for(engine, 'checkin')
def receive_checkin(dbapi_conn, conn_record):
    collect_pool_metrics(conn_record._pool)

把这几个指标挂到 /metrics 端点,用 Grafana 画个图,你会看到一个全新的世界:

- 场景一: checked_out  长时间逼近 pool_size + max_overflow,并且出现等待。结论:池子太小了,加人!

- 场景二: overflow 常年大于0,高峰期更离谱。结论:把 pool_size 调大点,别老招临时工,不稳定。

- 场景三: 半夜一看图,checked_out 归零,但 overflow 偶尔跳一下。结论:没事,那是 pool_pre_ping 在体检呢。

🚨 两个经典陷阱,早看早脱身

1. 连接泄漏(Leak):

用了 Depends 注入 Session 但忘了关闭?或者在一个无限循环里开了连接没 commit/close?这就是典型的“厨师借出去没还回来”。时间一长,池子里的连接全被占着,新请求直接排队等死。

解法: 死都要用 with 上下文管理器,或者 FastAPI 里用 yield 依赖,保证请求结束把连接还回去。

2. 首次请求卡顿:

服务刚启动,池子是空的。第一个倒霉蛋请求进来时,不仅要处理业务,还得负责把 pool_size 个连接建立起来。这就是“冷启动”的代价。

解法:startup 事件里,手动执行一次 await db.execute("SELECT 1") ,强迫连接池提前预热,别让第一个用户当冤大头。


最后啰嗦一句

技术这玩意儿,说白了就是经验的积累。今天我把那些坑填平了给你看,就是希望你的服务器日志能干干净净,你也能安安稳稳睡到大天亮。这篇文章里的代码和思路,都是我亲手试过的,放心拿去用,不好使回来打我脸(反正也打不着😏)。

如果你觉得这顿“技术烧烤”吃得还算过瘾,或者帮你省下了一瓶速效救心丸的钱,别藏着掖着,点个赞,加个关注,分享给那个还在为连接池抓狂的同事。关注我,咱们下次接着聊 FastAPI 那些不能说的秘密,保你少走几年弯路。🚀