惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

V
V2EX
V
Vulnerabilities – Threatpost
MongoDB | Blog
MongoDB | Blog
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
P
Proofpoint News Feed
Know Your Adversary
Know Your Adversary
aimingoo的专栏
aimingoo的专栏
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
C
Cisco Blogs
C
CERT Recently Published Vulnerability Notes
T
Tor Project blog
A
Arctic Wolf
L
LangChain Blog
L
LINUX DO - 热门话题
G
Google Developers Blog
Google DeepMind News
Google DeepMind News
T
Threat Research - Cisco Blogs
Stack Overflow Blog
Stack Overflow Blog
I
Intezer
爱范儿
爱范儿
P
Palo Alto Networks Blog
WordPress大学
WordPress大学
H
Hackread – Cybersecurity News, Data Breaches, AI and More
T
The Blog of Author Tim Ferriss
G
GRAHAM CLULEY
S
Securelist
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
Cisco Talos Blog
Cisco Talos Blog
Security Latest
Security Latest
Martin Fowler
Martin Fowler
AWS News Blog
AWS News Blog
L
Lohrmann on Cybersecurity
C
Cybersecurity and Infrastructure Security Agency CISA
酷 壳 – CoolShell
酷 壳 – CoolShell
Recorded Future
Recorded Future
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
C
CXSECURITY Database RSS Feed - CXSecurity.com
Recent Announcements
Recent Announcements
有赞技术团队
有赞技术团队
Apple Machine Learning Research
Apple Machine Learning Research
V2EX - 技术
V2EX - 技术
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
L
LINUX DO - 最新话题
博客园 - Franky
P
Privacy & Cybersecurity Law Blog
Simon Willison's Weblog
Simon Willison's Weblog
W
WeLiveSecurity
Cyberwarzone
Cyberwarzone
The Hacker News
The Hacker News
A
About on SuperTechFans

博客园_首页

Linux实操--组管理、权限管理和定时任务 Java + EasyExcel 实现单个接口导出多个Excel Mem0 源码解析系列(二):提示词工程的深度剖析 Openclaw TaskFlow究竟是什么?和普通Skill技能有什么区别 博文阅读密码验证 - 博客园 嘉立创开源:应该是全网MicroPython教程最多的开发板 Hermes Agent 集成实践:从协议到生产 2026年AI编程工具横评:Cursor、Codex、Claude Code、Zed、Windsurf Java程序员必看的RAG入门教程 2026 AI效率神器:Superpowers + Claude Code 保姆级教程 本地大模型部署全攻略:从 0 到 1 玩转 Ollama 【从0到1构建一个ClaudeAgent】内存管理-上下文压缩 .NET 高级开发 | 设计、实现一个事件总线框架 电子小白入门之NE555 3. WorkBuddy:隐藏玩法,一键召唤专家,让 AI 以"专家身份"给你干活 和AI一起搞事情#3:Claude Teammate 游戏开发翻车实录 【OpenClaw】通过 Nanobot 源码学习架构---(7)Memory C# .NET 周刊|2026年3月3期 我在 Debian 11 上把 K8s 单机搭起来了,过程没你想的那么顺(/opt 目录版) 深度学习进阶(七)Data-efficient Image Transformer CLI+Skill搭建浏览器AI自动化框架,告别一切重复枯燥任务 告别Token账单无底洞:OpenClaw本地部署,重塑企业数据主权的唯一解 FastAPI+Vue:文件分片上传+秒传+断点续传,这坑我帮你踩平了! SBTI 爆火后,我做了个程序员版的 CBTI。。已开源 + 附开发过程 多模态检索开始进入工程期:用 Sentence Transformers 搭建可落地的 Multimodal RAG 100多行代码实现一个最简单的Agent(用ReAct) Claude Code 通关手册(八):推荐 5 个 Hooks,代码质量提升 3 倍 老板:“有人截图了!”。安全部门:“收到,马上查暗水印!” - why技术 技术之外,皆是人间 C#/.NET/.NET Core技术前沿周刊 | 第 69 期(2026年4.01-4.12) Snack JSONPath 项目架构分析 Claude Code Buddy 小析:一个非核心功能,如何体现产品的细节完成度 AI新时代下的图床管理方案-Cloudflare图床+MCP+Skills方案指南 化繁为简:顺丰速运App如何通过 HarmonyOS SDK实现专业级空间测量 从零实现富文本编辑器#13-React非编辑节点的内容渲染 AI开发-python-langchain框架(3-23-OpenAI Functions风格Tool Calling智能助手) .NET + AI 进阶实战:基于类的技能开发 - 打造可治理的 Agent 能力模块 【从0到1构建一个ClaudeAgent】规划与协调-技能 上周热点回顾(4.6-4.12) 电子小白的工具三件套:面包板、杜邦线、万能板 单表五亿数据的查询优化 | Mysql、StarRocks 2. WorkBuddy:从“我是谁”到“帮我干活” C# 如何减少代码运行时间:7 个实战技巧 基于HelixToolkit.SharpDX 渲染3D模型 - 笺上知微 从零开始的双臂具身VLA起源及现阶段发展综述 - SkyXZ 记对 xonsh shell 的使用, 脚本编写, 迁移及调优 - pluvium27 受够了Vibe Coding的失控?换个起点,让AI事半功倍 从开始配置漏洞环境到漏洞复现流程 - 難しい 关于10年工作经验的程序员对OpenClaw的实战经验分享以及看法 - 虚无境 Any metadata 的内存布局 C# .NET 周刊|2026年3月2期 - InCerry 我帮你测过了,测试圈排名第二的 Skill 依然很牛逼 Skill Discovery | 无监督技能发现的经典工作总结 - MoonOut PbootCMS 网站内容数量多导致访问慢?这些实用优化方案帮你提速! - 家兴网络技术工作室 上下文工程是什么?过时了么?一文讲明白! - 一枫说码 网站漏洞怎么发现并修复?一篇实用指南(附完整流程) - 家兴网络技术工作室 开了 TUN 模式还是直连?90% 的人都踩过这个坑 Github日报|2026年04月12日 - AI一族 AScript扩展多种脚本语言 - rockey627 AI 学习笔记:Agent 的记忆机制 你能被装进一个文件里吗?——7 万人把同事"蒸馏"成了 AI - 我没有三颗心脏 Claude Code 通关手册(七):给 AI 装上技能包——Skills 完全指南 - 暮色之狐 在浏览器中快速编辑代码:VSCode Web 集成实践 - Newbe36524 蒸馏自己 skill?基于 Deepseek 的蒸馏器,丐版蒸馏方式,简单便捷 - To_Carpe_Diem Spring AI Aliababa和AgentScope,哪个更好? - 苏三说技术 Etsy 把 1000 个 MySQL 分片迁进 Vitess:425TB 数据背后的真正问题不是性能,而是运维规模 MicroPython LVGL基础知识和概念:底层渲染与性能优化 - FreakStudio 数据库草图算法 Python 潮流周刊#146:CPython 引入 Rust 的进展 - 豌豆花下猫 最小生成树 - mofei1116 红日靶场七:从外网入口、容器逃逸到 AD 接管的完整利用链复盘 - YouDiscovered1t 分享四款开源且实用的 Kafka 管理工具 - 追逐时光者 vLLM 权重加载机制全解析:从挑战到理想架构 LCT 学习笔记 - ACehomoxue Avalonia UI 12.0.0 正式发布:架构演进和性能飞跃 - 张善友 当 AI Agent 把调用链拉长,延迟开始成为一门生意 conhost.exe 无法显示 U+2717 - 145a 太秀了,我把自己蒸馏成了 Skill!已开源 - 程序员鱼皮 ASP.NET Core 内存缓存实战:一篇搞懂该怎么配、怎么避坑 基于 Ghostty 带有分割标签页和为 Claude 编程设计的通知终端 - BugShare AI 焊死入口:教育的“操作系统级”重塑 - 郝hai 初级Java开发工程师使用sql脚本编写代码的过程是简单而且不糊涂 - CoderOilStation Claude Code通关手册(六):MCP协议完全指南 - 暮色之狐 边框灯光环绕动画特效实现指南 - Newbe36524 开源:子木蒸馏版的 SEO 审计工具 seo-audit-skill v1.0 我所理解的Python元模型 【从0到1构建一个ClaudeAgent】规划与协调-TodoWrite - 程序员Seven Claude 和 Codex 在审计 Skill 上性能差异探究 - ACai_sec AScript如何实现中文脚本引擎 - rockey627 【渗透测试】HTB Season10 Garfield 全过程wp - dynasty_chenzi Android 开发者为什么必须掌握 AI 能力?端侧视角下的技术变革 树状数组正确性证明 - AC-wyr 你的 AI 焦虑,可能比 AI 本身更危险——ATM 机没有消灭银行柜员,但恐慌消灭了你的判断力 - 我没有三颗心脏 一个拉胯的分库分表方案有多绝望?整个部门都在救火! - 冰河团队 动态规划入门必学之走方格问题 - Ofnoname PostgREST 与 PostgreSQL 角色权限配置全解析(生产级实践) - SheepDog1998 使用 UEFI 图形输出协议 GOP 在屏幕上显示图像的方法 - 阿源- Claude Code通关手册(五):组建你的AI专家团队,子代理系统 - 暮色之狐 一个程序员到架构师的催婚路之感悟(整整10年后的催婚相亲感悟) - MisterLip 用 Agent Skill 自动生成工作周报 - 赵康
美团二面:在千万级的大表上建索引,需要注意些什么?
苏三说技术 · 2026-05-06 · via 博客园_首页

前言

最近有位小伙伴去面大厂,被问到:“现在有一张千万级数据量的订单表,要给几个常用查询条件字段建索引,需要注意什么?”

他当场愣住了——平时在测试环境随手就ALTER TABLE ADD INDEX,从没想过在大表上操作会有那么多“坑”。

其实,面试官想考察的绝不仅仅是“索引的基本语法”,而是如何安全、高效地在大表上维护索引

今天这篇文章专门跟大家一起聊聊这个话题,希望对你会有所帮助。

更多项目实战在Java突击队网:susan.net.cn/project

一、先上一句“心法口诀”

“列要精,序要对,成覆盖,忌重复,锁要短,频监控”

下面,我把这句口诀展开成6个模块,手把手教你在大表上玩转索引。

二、千万级大表和普通表不一样?

在大表(千万级)上建索引,有三个最直观的风险:

  1. 锁表时间超长:InnoDB在MySQL 5.6+ 支持Online DDL(大多数操作不锁全表),但仍有短暂的独占元数据锁,且创建过程会消耗大量IO和CPU,拖垮业务。
  2. 磁盘空间井喷:每加一个索引,相当于重建一张“影子表”,千万级数据可能占用几十GB临时空间,导致磁盘打满。
  3. 写入性能骤降:每个新索引都会拖累INSERTUPDATEDELETE的速度。在大表上,这点尤其致命。

所以,大表索引的设计必须“精打细算”,不能盲目堆叠。

三、6 个必须注意的要点

3.1 原则一:“列要精”

选择高选择性的列。

什么叫选择性高?

就是COUNT(DISTINCT column) / COUNT(*)接近1。

比如用户ID、订单号都是好选择;

而性别、状态等只有两三个值的列,基本没有意义。

错误示例:给订单表的status字段(只有“已支付”“未支付”“已取消”)单独建索引。

ALTER TABLE orders ADD INDEX idx_status (status);

在千万级数据上,status='PAID'可能命中500万行,MySQL仍会扫描大量数据,还不如全表快。

索引反而浪费空间和写入成本。

正确做法:把低选择性的列放在联合索引的后面,而不是单独索引。

-- 好的做法:status 作为二级过滤
ALTER TABLE orders ADD INDEX idx_user_status (user_id, status);

例外:当status配合其他条件时,联合索引才可能被用到。

3.2 原则二:“序要对”

联合索引最左前缀法则。

经常有小伙伴问:“我建了 (a,b,c) 联合索引,为什么只查 b 不走索引?”

因为联合索引严格按照最左前缀原则工作。

示例

ALTER TABLE orders ADD INDEX idx_createtime_user (create_time, user_id);

下面的查询可以用到索引:

WHERE create_time > '2026-01-01'               -- ✅ 用到索引第一列
WHERE create_time > '2026-01-01' AND user_id = 123  -- ✅ 完全覆盖

而下面的查询用不到

WHERE user_id = 123                            -- ❌ 跳过了第一列

所以,范围查询(><)的列要放在联合索引的最后,否则其后所有列都无法走索引。

-- 推荐:等值查询在前,范围查询在后
INDEX (user_id, create_time)
-- 不推荐
INDEX (create_time, user_id)

3.3 原则三:“成覆盖”

使用覆盖索引避免回表。

覆盖索引是指索引中已经包含了查询需要的所有字段,不需要再回表查聚簇索引,极大减少随机IO。

示例

-- 原查询需要回表
SELECT user_id, status FROM orders WHERE user_id = 123;

如果索引只建了(user_id),还需要通过主键回表取status。更优的方案:

ALTER TABLE orders ADD INDEX idx_user_status (user_id, status);

现在查询所需字段都在索引中,Extra列会显示Using index,性能提升几倍。

使用场景:高频查询的字段组合,且数据量较大时。

3.4 原则四:“忌重复”

避免多余和冗余索引。

重复索引:完全相同列组合的多个索引。

冗余索引:一个索引是另一个索引的前缀。例如有了(a,b),又建(a)就是冗余。

检查方法

SELECT * FROM sys.schema_redundant_indexes WHERE table_schema = 'your_db' AND table_name = 'orders';

示例

-- 已经有一个索引
ALTER TABLE orders ADD INDEX idx_user (user_id);
-- 又加了这个,idx_user 就成了冗余
ALTER TABLE orders ADD INDEX idx_user_createtime (user_id, create_time);

冗余索引会浪费空间,建议删除前一个。

3.5 原则五:“锁要短”

用工具在线建索引。

传统的ALTER TABLE在大表上可能会长时间阻塞写入(虽然Online DDL支持,但仍有短暂锁风险,且消耗资源)。

推荐工具pt-online-schema-change (Percona Toolkit) 或 gh-ost,它们通过创建影子表、触发器,实现几乎零锁表的索引变更。

使用示例pt-osc):

pt-online-schema-change --alter "ADD INDEX idx_user (user_id)" \
  D=test,t=orders --execute

原理:

graph LR A[原表 orders] -->|复制结构| B[影子表 _orders_new] B -->|加索引| B A -->|触发器同步增量| B A -->|最后rename替换| C[新表 orders_new]

优点:不阻塞业务读写,可以限流控制负载。
缺点:需要额外的磁盘空间,执行时间长(千万级可能需要几小时)。

生产强烈建议:永远不要在高峰期对大表直接ALTER,用专业工具或维护窗口。

3.6 原则六:“频监控”

定期分析索引使用情况。

大表索引不是建完就万事大吉,随着业务变化,有些索引可能变成“僵尸索引”,只消耗资源从不使用。

监控手段

-- 查看索引使用统计(需开启 performance_schema)
SELECT * FROM performance_schema.table_io_waits_summary_by_index_usage
WHERE object_schema='your_db' AND object_name='orders';

如果某个索引的COUNT_READ长期为0,可以考虑删除。

另外,定期执行OPTIMIZE TABLE或重建索引可以消除索引碎片,提升效率。

更多项目实战在Java突击队网:susan.net.cn/project

四、一张图看懂大表建索引流程

image

五、大表索引的优缺点与适用场景

优点

  • 大幅提升查询速度(尤其是高选择性列)
  • 覆盖索引可避免回表,减少IO
  • 合理设计能让千万级表的复杂查询从分钟级降到毫秒级

缺点

  • 占用额外磁盘空间(一般占数据量的30%~100%)
  • 降低写入(INSERT/UPDATE/DELETE)性能
  • 管理复杂度高,DDL操作风险大

最佳适用场景

  • 只读或读多写少的业务(如订单历史查询、报表)
  • 查询条件稳定,有明确的高频过滤字段
  • 核心高频查询可以使用覆盖索引

不适用场景

  • 写入极频繁的日志表(如埋点数据)——宁可降低索引量
  • 数据量极小(<10万行)——全表扫描也很快
  • 绝大多数查询不走索引(例如没有where条件)

六、总结

面试官如果再问“大表建索引要注意什么”,你可以从容回答:

  1. 先评估必要性:是否真的需要?能否通过分区、归档冷数据减少表大小?
  2. 列选择:只在高选择性、高频查询的列上建索引,避免低选择性列单独索引。
  3. 联合索引顺序:等值查询在前,范围查询在后;遵循最左前缀。
  4. 覆盖索引:尽量让索引包含查询所需字段,避免回表。
  5. 去冗余:用sys.schema_redundant_indexes检查并清理无用索引。
  6. 安全变更:用pt-online-schema-changegh-ost控制锁,避免业务抖动。
  7. 持续监控:观察索引使用频率、碎片率,及时优化。

最后,送大家一句话:索引是把双刃剑,在大表上尤其锋利。

用得好,性能直冲云霄;用不好,磁盘爆满、写入崩溃。

每一次加索引,都应当像做手术一样,事先设计、事中安全、事后复盘。