惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Last Week in AI
Last Week in AI
S
Schneier on Security
The GitHub Blog
The GitHub Blog
宝玉的分享
宝玉的分享
GbyAI
GbyAI
L
LINUX DO - 热门话题
大猫的无限游戏
大猫的无限游戏
Hacker News: Ask HN
Hacker News: Ask HN
A
Arctic Wolf
罗磊的独立博客
S
Securelist
I
Intezer
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
D
Darknet – Hacking Tools, Hacker News & Cyber Security
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
The Register - Security
The Register - Security
M
MIT News - Artificial intelligence
C
Cisco Blogs
G
GRAHAM CLULEY
P
Proofpoint News Feed
美团技术团队
MongoDB | Blog
MongoDB | Blog
Cyberwarzone
Cyberwarzone
T
Tor Project blog
P
Proofpoint News Feed
NISL@THU
NISL@THU
J
Java Code Geeks
有赞技术团队
有赞技术团队
AWS News Blog
AWS News Blog
D
Docker
博客园 - 聂微东
I
InfoQ
AI
AI
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
O
OpenAI News
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
C
Cybersecurity and Infrastructure Security Agency CISA
Know Your Adversary
Know Your Adversary
www.infosecurity-magazine.com
www.infosecurity-magazine.com
Application and Cybersecurity Blog
Application and Cybersecurity Blog
N
News | PayPal Newsroom
L
LangChain Blog
Hugging Face - Blog
Hugging Face - Blog
T
Tenable Blog
Exploit-DB.com RSS Feed
Exploit-DB.com RSS Feed
K
KPMG report finds enterprise disconnect between AI and its ROI | CIO
MyScale Blog
MyScale Blog
T
Tailwind CSS Blog
K
Kaspersky official blog

博客园_首页

Plist 二进制格式 Milvus 和 PGVector,哪个更好? OpenClaw 已过时?在 VS Code 中运行 Hermes Agent! 第30篇文章:一个大三计科生的自白 Manim如何在数学公式中完美显示中文? Docker 部署 RocketMQ 5 并发编程核心概念辨析 C#事务处理最佳实践:别再让“主表存了、明细丢了”的破事发生 CLI 是什么?为什么大厂突然集体卷命令行? 【从0到1构建一个ClaudeAgent】协作-自主Agent UIImageView 设置图片不生效的原因排查 最小二乘问题详解20:无先验约束下的增量式SFM自由网平差 痞子衡嵌入式:大话双核i.MXRT1180之XIP应用里借助MU实现可靠Flash IAP的方法 AI Chat 封装, SemanticKerne.AiProvider.Unified 已发布 Windows下右键编辑js文件无法打开记事本——在注册表中使用环境变量 在后台服务中使用 Scoped 服务,为什么总是报错? H200 安装驱动并使用sglang启动模型 wireshark 抓包Trap上报告警内容 我用 AI 辅助开发了一系列小工具(2):图片压缩工具 [A Primer On MC and CC] 2.1 Memory Consistency 1 - 指令重排序和 SC 模型 Oracle数据库SCN推进技术详解与实践指南 玩转控件:封装个带图片的Label控件 Claude Code 4.7 真正该升级的不是模型,而是你的工作流 前端小白一句话,AI 帮我做了个颜值拉满的桌面媒体播放器。当代码不再是门槛,一句话编程就是现实。 5. WorkBuddy: 小龙虾的灵魂三件套,让你的小龙虾不只是工具 SQLite 分片方案实战:三种分片策略的深度对比 告别简陋 UI!一款基于 Fluent Design 和基于 WinUI 的开源免费、现代化的 Avalonia UI 控件库 关于二进制排列组合枚举的总结 AI开发-python-LangGraph框架(3-27-LangGraph从零实现大模型智能决策工作流) ElasticSearch主分片和副本分片概念详解 【002】HTTPS 粗解:证书、TLS 握手与对后端配置的影响 Hermes Agent 一周暴涨五万 Star,但我劝你别急着追 明明连接的是Redis的DB0,为什么能查到DB3的数据? 【从0到1构建一个ClaudeAgent】协作-Agent团队 熟悉电子元器件之后,电子小白下一步该怎么走? MAF快速入门(23)通过C#类定义Skills .NET 高级开发 | 手写一个对象映射框架 FastAPI数据库ORM怎么选?我肝了三个Demo后,终于不再纠结了 mysqldump 参数拾遗:在遗忘与铭记之间 C# .NET 周刊|2026年3月5期 Claude code入门 - 陈彦斌 一文学习入门 ThingsBoard 开源物联网平台 GitHub 热门项目 | 2026年04月16日 如何为GIT设置全局勾子,为每次提交追加信息 Number.isFinite和isFinite与isNaN()和Number.isNaN的区别 PortSwigger SQL注入LAB2 推荐一个测试人必备的Skills,从功能到性能全搞定(附详细实操和安装下载方式) 筑基期:掌握Odoo基础核心知识点02(Odoo XML 开发方式详解) GLM模型这么火,咱们用vllm也咧一个呗! 深入理解 AbortController:从底层原理到跨语言设计哲学 字符串学习笔记 多租户系统框架的基础模块设计和分析设计 Apache SeaTunnel Zeta 为什么能做到“又快又稳”? AI开发-python-LangGraph框架(3-26-LangGraph基本概念及第一个简单样例) Vue 3 组件通信,别只会用 Props 和 Emits 了,这几个狠活儿你得看看 ElasticSearch7.X版本配置密码 用Manim实现动态交点计算--从一个动点问题说起 团结引擎+Addressable+Instant Game打包抖音小游戏 function call 实战:让 LLM 自动判断 pod 异常、调用日志工具并完成故障分析 bubseek —— 让 Agent 的足迹,变成团队的洞察 通过 C# 读取并导出 PDF 书签 如何用 GitHub Actions 实现 Steam 自动化发布 【从0到1构建一个ClaudeAgent】并发-后台任务 .NET 高级开发 | 定制 ASP.NET Core 框架 电子小白:什么是运算放大器(运放) zero2Agent:面向大厂面试的 Agent 工程教程,从概念到生产的完整学习路线 堆上的ORW HC32F460 USB CDC通信异常:非对齐访问异常排查 20260413-Hyperbridge 攻击事件:发生在默克尔山上的验证绕过 那些喊着AI 要淘汰你的人,正在靠你的焦虑赚大钱! 深度学习进阶(八)Swin Transformer 最小二乘问题详解19:带先验约束的增量式SFM优化与实现 SnapTranslate 3.0 正式发布:全局划词翻译 + 完整英语学习闭环,一站式搞定查词、记词、复习 工作的意义、工作的困难认知再思考 .NET + AI 进阶实战:基于类的技能开发 - 打造可治理的 Agent 能力模块 【从0到1构建一个ClaudeAgent】规划与协调-技能 上周热点回顾(4.6-4.12) 电子小白的工具三件套:面包板、杜邦线、万能板 单表五亿数据的查询优化 | Mysql、StarRocks 2. WorkBuddy:从“我是谁”到“帮我干活” C# 如何减少代码运行时间:7 个实战技巧 基于HelixToolkit.SharpDX 渲染3D模型 - 笺上知微 从零开始的双臂具身VLA起源及现阶段发展综述 - SkyXZ 记对 xonsh shell 的使用, 脚本编写, 迁移及调优 - pluvium27 受够了Vibe Coding的失控?换个起点,让AI事半功倍 从开始配置漏洞环境到漏洞复现流程 - 難しい 关于10年工作经验的程序员对OpenClaw的实战经验分享以及看法 - 虚无境 Any metadata 的内存布局 C# .NET 周刊|2026年3月2期 - InCerry 我帮你测过了,测试圈排名第二的 Skill 依然很牛逼 Skill Discovery | 无监督技能发现的经典工作总结 - MoonOut 上下文工程是什么?过时了么?一文讲明白! - 一枫说码 开了 TUN 模式还是直连?90% 的人都踩过这个坑 AScript扩展多种脚本语言 - rockey627 AI 学习笔记:Agent 的记忆机制 你能被装进一个文件里吗?——7 万人把同事"蒸馏"成了 AI - 我没有三颗心脏 Claude Code 通关手册(七):给 AI 装上技能包——Skills 完全指南 - 暮色之狐 在浏览器中快速编辑代码:VSCode Web 集成实践 - Newbe36524 蒸馏自己 skill?基于 Deepseek 的蒸馏器,丐版蒸馏方式,简单便捷 - To_Carpe_Diem Spring AI Aliababa和AgentScope,哪个更好? - 苏三说技术
美团二面:在千万级的大表上建索引,需要注意些什么?
苏三说技术 · 2026-05-06 · via 博客园_首页

前言

最近有位小伙伴去面大厂,被问到:“现在有一张千万级数据量的订单表,要给几个常用查询条件字段建索引,需要注意什么?”

他当场愣住了——平时在测试环境随手就ALTER TABLE ADD INDEX,从没想过在大表上操作会有那么多“坑”。

其实,面试官想考察的绝不仅仅是“索引的基本语法”,而是如何安全、高效地在大表上维护索引

今天这篇文章专门跟大家一起聊聊这个话题,希望对你会有所帮助。

更多项目实战在Java突击队网:susan.net.cn/project

一、先上一句“心法口诀”

“列要精,序要对,成覆盖,忌重复,锁要短,频监控”

下面,我把这句口诀展开成6个模块,手把手教你在大表上玩转索引。

二、千万级大表和普通表不一样?

在大表(千万级)上建索引,有三个最直观的风险:

  1. 锁表时间超长:InnoDB在MySQL 5.6+ 支持Online DDL(大多数操作不锁全表),但仍有短暂的独占元数据锁,且创建过程会消耗大量IO和CPU,拖垮业务。
  2. 磁盘空间井喷:每加一个索引,相当于重建一张“影子表”,千万级数据可能占用几十GB临时空间,导致磁盘打满。
  3. 写入性能骤降:每个新索引都会拖累INSERTUPDATEDELETE的速度。在大表上,这点尤其致命。

所以,大表索引的设计必须“精打细算”,不能盲目堆叠。

三、6 个必须注意的要点

3.1 原则一:“列要精”

选择高选择性的列。

什么叫选择性高?

就是COUNT(DISTINCT column) / COUNT(*)接近1。

比如用户ID、订单号都是好选择;

而性别、状态等只有两三个值的列,基本没有意义。

错误示例:给订单表的status字段(只有“已支付”“未支付”“已取消”)单独建索引。

ALTER TABLE orders ADD INDEX idx_status (status);

在千万级数据上,status='PAID'可能命中500万行,MySQL仍会扫描大量数据,还不如全表快。

索引反而浪费空间和写入成本。

正确做法:把低选择性的列放在联合索引的后面,而不是单独索引。

-- 好的做法:status 作为二级过滤
ALTER TABLE orders ADD INDEX idx_user_status (user_id, status);

例外:当status配合其他条件时,联合索引才可能被用到。

3.2 原则二:“序要对”

联合索引最左前缀法则。

经常有小伙伴问:“我建了 (a,b,c) 联合索引,为什么只查 b 不走索引?”

因为联合索引严格按照最左前缀原则工作。

示例

ALTER TABLE orders ADD INDEX idx_createtime_user (create_time, user_id);

下面的查询可以用到索引:

WHERE create_time > '2026-01-01'               -- ✅ 用到索引第一列
WHERE create_time > '2026-01-01' AND user_id = 123  -- ✅ 完全覆盖

而下面的查询用不到

WHERE user_id = 123                            -- ❌ 跳过了第一列

所以,范围查询(><)的列要放在联合索引的最后,否则其后所有列都无法走索引。

-- 推荐:等值查询在前,范围查询在后
INDEX (user_id, create_time)
-- 不推荐
INDEX (create_time, user_id)

3.3 原则三:“成覆盖”

使用覆盖索引避免回表。

覆盖索引是指索引中已经包含了查询需要的所有字段,不需要再回表查聚簇索引,极大减少随机IO。

示例

-- 原查询需要回表
SELECT user_id, status FROM orders WHERE user_id = 123;

如果索引只建了(user_id),还需要通过主键回表取status。更优的方案:

ALTER TABLE orders ADD INDEX idx_user_status (user_id, status);

现在查询所需字段都在索引中,Extra列会显示Using index,性能提升几倍。

使用场景:高频查询的字段组合,且数据量较大时。

3.4 原则四:“忌重复”

避免多余和冗余索引。

重复索引:完全相同列组合的多个索引。

冗余索引:一个索引是另一个索引的前缀。例如有了(a,b),又建(a)就是冗余。

检查方法

SELECT * FROM sys.schema_redundant_indexes WHERE table_schema = 'your_db' AND table_name = 'orders';

示例

-- 已经有一个索引
ALTER TABLE orders ADD INDEX idx_user (user_id);
-- 又加了这个,idx_user 就成了冗余
ALTER TABLE orders ADD INDEX idx_user_createtime (user_id, create_time);

冗余索引会浪费空间,建议删除前一个。

3.5 原则五:“锁要短”

用工具在线建索引。

传统的ALTER TABLE在大表上可能会长时间阻塞写入(虽然Online DDL支持,但仍有短暂锁风险,且消耗资源)。

推荐工具pt-online-schema-change (Percona Toolkit) 或 gh-ost,它们通过创建影子表、触发器,实现几乎零锁表的索引变更。

使用示例pt-osc):

pt-online-schema-change --alter "ADD INDEX idx_user (user_id)" \
  D=test,t=orders --execute

原理:

graph LR A[原表 orders] -->|复制结构| B[影子表 _orders_new] B -->|加索引| B A -->|触发器同步增量| B A -->|最后rename替换| C[新表 orders_new]

优点:不阻塞业务读写,可以限流控制负载。
缺点:需要额外的磁盘空间,执行时间长(千万级可能需要几小时)。

生产强烈建议:永远不要在高峰期对大表直接ALTER,用专业工具或维护窗口。

3.6 原则六:“频监控”

定期分析索引使用情况。

大表索引不是建完就万事大吉,随着业务变化,有些索引可能变成“僵尸索引”,只消耗资源从不使用。

监控手段

-- 查看索引使用统计(需开启 performance_schema)
SELECT * FROM performance_schema.table_io_waits_summary_by_index_usage
WHERE object_schema='your_db' AND object_name='orders';

如果某个索引的COUNT_READ长期为0,可以考虑删除。

另外,定期执行OPTIMIZE TABLE或重建索引可以消除索引碎片,提升效率。

更多项目实战在Java突击队网:susan.net.cn/project

四、一张图看懂大表建索引流程

image

五、大表索引的优缺点与适用场景

优点

  • 大幅提升查询速度(尤其是高选择性列)
  • 覆盖索引可避免回表,减少IO
  • 合理设计能让千万级表的复杂查询从分钟级降到毫秒级

缺点

  • 占用额外磁盘空间(一般占数据量的30%~100%)
  • 降低写入(INSERT/UPDATE/DELETE)性能
  • 管理复杂度高,DDL操作风险大

最佳适用场景

  • 只读或读多写少的业务(如订单历史查询、报表)
  • 查询条件稳定,有明确的高频过滤字段
  • 核心高频查询可以使用覆盖索引

不适用场景

  • 写入极频繁的日志表(如埋点数据)——宁可降低索引量
  • 数据量极小(<10万行)——全表扫描也很快
  • 绝大多数查询不走索引(例如没有where条件)

六、总结

面试官如果再问“大表建索引要注意什么”,你可以从容回答:

  1. 先评估必要性:是否真的需要?能否通过分区、归档冷数据减少表大小?
  2. 列选择:只在高选择性、高频查询的列上建索引,避免低选择性列单独索引。
  3. 联合索引顺序:等值查询在前,范围查询在后;遵循最左前缀。
  4. 覆盖索引:尽量让索引包含查询所需字段,避免回表。
  5. 去冗余:用sys.schema_redundant_indexes检查并清理无用索引。
  6. 安全变更:用pt-online-schema-changegh-ost控制锁,避免业务抖动。
  7. 持续监控:观察索引使用频率、碎片率,及时优化。

最后,送大家一句话:索引是把双刃剑,在大表上尤其锋利。

用得好,性能直冲云霄;用不好,磁盘爆满、写入崩溃。

每一次加索引,都应当像做手术一样,事先设计、事中安全、事后复盘。