惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
V
Visual Studio Blog
The GitHub Blog
The GitHub Blog
Apple Machine Learning Research
Apple Machine Learning Research
J
Java Code Geeks
T
Tailwind CSS Blog
大猫的无限游戏
大猫的无限游戏
Jina AI
Jina AI
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
Hugging Face - Blog
Hugging Face - Blog
WordPress大学
WordPress大学
宝玉的分享
宝玉的分享
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
罗磊的独立博客
人人都是产品经理
人人都是产品经理
H
Heimdal Security Blog
Last Week in AI
Last Week in AI
博客园 - 【当耐特】
Cyberwarzone
Cyberwarzone
Google DeepMind News
Google DeepMind News
雷峰网
雷峰网
Hacker News: Ask HN
Hacker News: Ask HN
Webroot Blog
Webroot Blog
Microsoft Azure Blog
Microsoft Azure Blog
MyScale Blog
MyScale Blog
A
About on SuperTechFans
V2EX - 技术
V2EX - 技术
小众软件
小众软件
博客园 - Franky
博客园 - 司徒正美
P
Privacy International News Feed
爱范儿
爱范儿
U
Unit 42
博客园 - 叶小钗
The Hacker News
The Hacker News
C
Check Point Blog
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
Simon Willison's Weblog
Simon Willison's Weblog
N
News and Events Feed by Topic
D
Docker
T
Threatpost
MongoDB | Blog
MongoDB | Blog
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
H
Help Net Security
L
LINUX DO - 最新话题
Security Latest
Security Latest
T
The Exploit Database - CXSecurity.com
S
SegmentFault 最新的问题
A
Arctic Wolf
Spread Privacy
Spread Privacy

人人都是产品经理

为什么你的产品找不到差异化?90%的失败都卡在第一步上(下) – 人人都是产品经理, 3年从30万到1300万用户、获2200万美元融资,这个AI教育产品用“抽卡”破解了获客难题 – 人人都是产品经理, 园区招商系统怎么做才能真正帮到去化?我加了这一个功能,推广链接转发400次阅读过万 – 人人都是产品经理, AI大事件:OpenAI发完网络安全模型又搞药物研发,小鹏汽车要抓”DeepSeek时刻” – 人人都是产品经理, 电商不是卖货,是一场更残酷的产品经理实战 – 人人都是产品经理, 没想到,活动营销又回来了! – 人人都是产品经理, 为何All-in海外KOC:一场关于AI时代窗口期的豪赌 – 人人都是产品经理, 重新理解企业的内部协作 – 人人都是产品经理, 苹果的 AI 战略到底是什么? – 人人都是产品经理, 医疗智能体·第2讲——合规护城河:等保、PIPL与HIPAA的架构实战 – 人人都是产品经理, 向量知识库五步法:从“答非所问”到“精准回复” – 人人都是产品经理, 鸿蒙PC三方库构建总指挥HPKBUILD(sha)库为例 – 人人都是产品经理, 何时该用LLM?AI产品经理的LLM设计指南 – 人人都是产品经理, 医疗信息领域的需求方、决策方、准入方以及关注点(二) – 人人都是产品经理, 即梦涨价:一场被误读的「傲慢」 – 人人都是产品经理, 面试AI PM必答题:Hermes和OpenClaw的区别,如何讲清楚业务价值 – 人人都是产品经理, AI的下一张船票:世界模型——AI产品经理必须理解的技术拐点 – 人人都是产品经理, 小红书做GEO,怎么让AI信你?记住这 3 个重要信息 – 人人都是产品经理, 5 家印度 AI 初创公司,看看印度 AI 再做什么 – 人人都是产品经理, AI项目跨团队协作:产品技术业务如何不打架 – 人人都是产品经理, Agentic Workflow(智能体工作流):让AI从”答案生成器”变成”数字员工” – 人人都是产品经理, lycium_plusplus 项目全景解读:OpenHarmony 三方库构建的“大管家” – 人人都是产品经理, 从爆单救火到前置履约:两套预采策略,把生鲜大促履约效率拉满 – 人人都是产品经理, 什么时候该补货?我用一轮数据做了一个决定 – 人人都是产品经理, 从“机械兜底”到“动态分流”:AI客服重复进线治理的4大底层逻辑 – 人人都是产品经理, 抖音拼效率,红书拼洞察 – 人人都是产品经理, 全民狂欢与退潮——为什么龙虾这波热潮冷却得如此之快? – 人人都是产品经理, Stripe押注!MPP重塑全球支付 – 人人都是产品经理, 小红书GEO:AI引用你的内容,不是因为你对,而是因为你看起来可信 – 人人都是产品经理, 前百度副总裁押注办公Agent,日韩付费爆发,Manus迎来强劲对手 – 人人都是产品经理, 企事业单位数字化的业务供需本质 – 人人都是产品经理, 医疗智能体·第1讲——医疗信息化重构:从“辅助软件”到“自主智能体”的范式转移 – 人人都是产品经理, 粉丝量就是空气!!! – 人人都是产品经理, 用户说“薯片碎了”,机器回“要买吗?”:意图识别的翻车与破局 – 人人都是产品经理, RAG召回准确率从75到90 我做对了这三件事 – 人人都是产品经理, AI大事件:Anthropic改收费、OpenAI发安全版、手术机器人纳入医保、阿里发布”秒悟” – 人人都是产品经理, Chrome 推出 Skills 新功能,Agent 重塑上网方式 – 人人都是产品经理, GitHub前创始人拿了a16z的1700万美元,做Agent时代的Git – 人人都是产品经理 拷贝或克隆其他 Flutter OH 项目到本地后无法运行 – 人人都是产品经理, 优惠券设计:优惠券创建 – 人人都是产品经理, 不用死磕文档!AI 助手 1 小时搞定飞书 CLI 安装 + 配置 + 知识库 – 人人都是产品经理, 用小龙虾做竞品分析报告:从2天到20分钟,我是怎么做到的 – 人人都是产品经理 用小龙虾做市场分析报告:搞懂这3个公式,市场规模不再靠猜 – 人人都是产品经理, 你早就在做 Harness 工程,只是不知道它叫这个名字 – 人人都是产品经理, Think Long就够?你可能想多了! – 人人都是产品经理, 货代SRM实战:供应商准入怎么做,才能让资源池不是通讯录而是可交付网络? – 人人都是产品经理, 如何做好用户调研?详解基本技巧 – 人人都是产品经理, 木鸟、途家、美团对打,平台春天行动开“卷” – 人人都是产品经理, 入职才发现公司不靠谱?小红书从业者求职避坑指南 – 人人都是产品经理, 美国 AI 三巨头联手封堵,中国 AI 突围之路在何方 – 人人都是产品经理, 小红书,放在需求对面的镜子 – 人人都是产品经理, AI 会带来大规模失业吗? – 人人都是产品经理, 从出单到补货前,我第一次犹豫:该不该放大? – 人人都是产品经理, Flutter 三方库鸿蒙化适配:5 种高效检查方式,快速判断是否需要适配 – 人人都是产品经理, 从做产品进阶拿结果:医美机构产品经理转岗科室运营经理 – 人人都是产品经理, 阿里HappyHorse,一场关于“Token经济”的阳谋 – 人人都是产品经理, To B AI:客户留存落地的观察与思考 – 人人都是产品经理, AI产品的“生命线”——数据采集、标注、清洗的产品化设计 – 人人都是产品经理, 谈谈AI Agent(二):当“孩子”能自己“体验世界”时,你该学什么? – 人人都是产品经理, UI/UX设计师的3层能力进阶,前两层让你活下来,第三层…才是真正的分水岭 – 人人都是产品经理, 2分钟 → 30秒,效率提升75%:B端产品经理如何用「规则枷锁」驯服AI幻觉? – 人人都是产品经理, 还没来得及学OpenClaw,来了个更猛的:Hermes Agent – 人人都是产品经理, AI日报:宇树机器人跑出10m/s刷新世界纪录 – 人人都是产品经理, 一文说透基金互金如何用情绪价值引导用户决策做转化 – 人人都是产品经理, 当浏览器开始替你”看”网页:AI 浏览器正在亲手拆掉它脚下的那张网 – 人人都是产品经理, 0代码,一天时间我Vibe Coding了个网站 – 人人都是产品经理, Hermes 和 OpenClaw 之争,Agent 的能力应该“装上去”还是“长出来”? – 人人都是产品经理 视频生成的“桌子”,字节Seedance 2掀完,阿里快乐马掀 – 人人都是产品经理, 从听不懂到完全信任:我的 Codex 深度产品体验 – 人人都是产品经理, 当虚拟偶像有了北京户口,与真人偶像还有什么区别? – 人人都是产品经理, 会说,远远比会做更重要 —— 对 SBTI 爆火现象的五层观察 – 人人都是产品经理, AI产品经理必看:当“搭环境”比“选模型”更重要,你的认知还在2024年吗? – 人人都是产品经理, 2026年AI产品商业化核心逻辑:从功能demo到规模化营收的3个必破卡点 – 人人都是产品经理, 京东围绕供应链,卷起裤腿下场的那些事儿 – 人人都是产品经理, SBTI一夜刷屏:它赢在了“太会说人话” – 人人都是产品经理, 折扣零售的真相:不是便宜,而是价值感! – 人人都是产品经理, 和甲方吵了一架,最后加钱做了——我学到的ToB产品经理生存法则 – 人人都是产品经理, 和几位小红书操盘手聊了8小时,干货全在这 – 人人都是产品经理, 智谱GLM-5.1登场,开源模型首超Opus4.6!!! – 人人都是产品经理 Anthropic收入凭什么反超OpenAI,终于有人把这事说清楚了 – 人人都是产品经理, 史上最有故事感的技术报告——Claude最强模型Mythos 7个极其精彩的细节 – 人人都是产品经理, 模型不是壁垒,Harness 也不是 – 人人都是产品经理, 抖音本地生活业务思考21 – 人人都是产品经理, Superpowers:145k Star的AI编码框架,到底是什么来头? Superpowers:145k Star的AI编码框架,到底是什么来头? – 人人都是产品经理, OpenAI 的路走错了,Anthropic Harness 解法启示:模型需要实践专科生 – 人人都是产品经理, 画原型图的前一步:设计站点地图 – 人人都是产品经理, 给 DeepSeek 的最后一封催更信 – 人人都是产品经理, 手把手教你用 Claude Code 搭建 AI 营销团队:5 个 Agent、12 项技能,独立完成研究、写作、设计全流程 – 人人都是产品经理, 你以为大模型在学语言?不,它在重新发明语言学 – 人人都是产品经理 所谓Skill,不过是AI时代的工业垃圾 – 人人都是产品经理, 聊一聊内容传播的几个方法 – 人人都是产品经理, 当平台开始吃掉生态:从 OpenClaw 被封杀,读懂 Anthropic 的这盘棋 – 人人都是产品经理, 你装了 10 个 AI 插件,Obsidian 还是一个文件夹 – 人人都是产品经理 关于AI智能体架构演进的系统性思考:从单体试水到多体协同的重构 – 人人都是产品经理, 当“人”变成Skill,我们又该何去何从? – 人人都是产品经理 Mythos 事件:前沿 AI 治理的意外实验 – 人人都是产品经理, 货代CRM:信用与风险管理怎么做,才能把坏账风险拦在放货之前? – 人人都是产品经理, 从HR收集自拍照到员工自助录入——我见证了园区人脸识别从”不可用”到”真好用”的全过程 – 人人都是产品经理 千问闯关AI混沌期:阿里画靶,吴嘉张弓,马云射箭? – 人人都是产品经理,
RAG 技术深度解析(二):检索与召回 —— 决定生成质量的核心工程环节
cheninx · 2025-12-09 · via 人人都是产品经理

在RAG技术中,检索与召回是关键环节。本文深入剖析了检索的多重机制,包括关键词、向量、知识图谱检索,并探讨了影响RAG系统性能的核心工程指标,助力企业级检索架构的优化。

在上一期中,我们拆解了知识库构建的底层逻辑。本篇将进入RAG中最关键、最影响最终结果、也最容易被低估的部分:检索(Retrieval)与召回(Recall)。

在RAG中,模型不是在回答你的问题,而是在回答它所“看到的内容“,而这些“可见内容”完全由检索阶段决定。因此:

  • 检索错→模型必错
  • 检索不全→模型回答不完整
  • 检索太多→噪声淹没关键信息
  • 检索太慢→系统不可用

检索不是一个动作,而是一整套召回体系(RecallSystem)。

一、检索不是一个动作,而是“候选内容召回体系”

很多人理解的检索是“向量搜一下”“BM25 匹配一下”,但真实情况远比这复杂。在 RAG 中,检索系统需要同时满足:

  • 找到应该找的(召回率 Recall)、
  • 排除不该找的(准确率 Precision)、
  • 控制返回数量(Top-K)、
  • 保证延迟足够低(Latency)、
  • 保证 chunk 切分合理(Chunk Strategy)、
  • 兼容不同检索方式(Sparse / Dense / Graph)

检索真正的目标不是找到答案,而是:构建一个“大概率包含答案的候选集合”。

(具体名词解释在第三章)

二、检索方式的底层机制

为了让读者更容易理解,我们统一采用一个示例问题:“RAG 技术如何减少幻觉?”

下面对三种检索方式从“底层机制 → 具象例子 → 失败原因 → 解决方案”做系统讲解。

2.1 关键词检索(Sparse Retrieval):基于词项的离散空间匹配

底层机制

关键词检索(如 BM25)的数学本质是:将文本表示为高维稀疏向量,通过词项重合度与 IDF 进行评分。

它擅长处理:专有名词、技术概念、术语非常明确的领域(法律、API 文档)

例如 BM25 的计算:

具象示例

用户问:“如何减少模型幻觉?”

文本 A 写:

“RAG 通过知识库降低幻觉风险。”

→ 匹配成功 文本 B 写:“提高事实性可减少错误内容。”

→ 因未出现“幻觉”二字 → 匹配失败

Sparse 检索完全依赖词项重叠,因此表达方式变化会导致召回失败。

为什么会失败?(底层原因)

1. 不理解同义词

2. 不理解语义

3. 用户表达方式与文档表达方式不一致

4. 内容语言风格差异大

解决方案

1. Query Expansion(同义词扩展)

2. Sparse + Dense 混合检索 3. 构建领域术语词典

2.2 向量检索(Dense Retrieval):embedding 构建连续语义空间

底层机制

向量检索依赖 embedding 模型将文本压缩为向量:距离近 = 语义相似;距离远 = 语义不同。

embedding 的核心是“语义压缩”,它不看字面,而是看价值密度最高的语义特征。

具象示例

“减少幻觉” embedding ≈ “减少错误内容” embedding → 因为模型认为两者语义接近,因此能召回表达不同但语义相似的内容。

Dense 会失败的根本原因(非常关键)

1. embedding 会稀释关键信息:mean pooling 会把所有词平均化,重要术语的权重被淹没

2. embedding 的优化目标 ≠ RAG 的任务需求:它判断的是“语义是否相似”,不是“能否回答问题”

3. 向量排序不稳定:相似度差距极小 → Top-K 排名可能随机波动,导致关键文本被漏召

解决方案

1. Cross-Encoder rerank

2. Multi-query 扩展

3. 更强 embedding 模型

4. 语义分块(semantic chunking)

5. 增大 Top-K

2.3 知识图谱检索(Graph Retrieval):基于关系结构的推理式检索

底层机制

知识图谱由实体、关系、属性构成可计算图结构,支持多跳推理、逻辑链路扩展、邻域检索。

具象示例

图谱中可能存在:RAG → 引入知识库 → 增强事实性 → 减少幻觉

用户问“如何减少幻觉”,图谱检索可直接沿路径返回结果。

为什么图谱强但难落地?

1. NER(实体抽取)成本高

2. RE(关系抽取)难

3. 实体消歧复杂

4. 图谱维护成本高

5. 对领域理解要求高

解决方案

1. 图谱 + Dense 融合

2. 构建局部图谱(Local KG)

3. 半自动关系抽取

三、检索工程指标:RAG 系统成败的关键

RAG 的绝大多数错误都不是模型造成的,而是检索阶段的问题。以下五大指标是系统能否稳定的核心。

3.1 召回率 Recall:找到了多少应该找到的?

为什么 Recall 会低?

1. embedding 忽略关键术语

2. chunk 切得太碎或切断语义

3. Top-K 排序不稳定

4. 用户/文档表达差异大

5. embedding 模型表达能力弱

提升策略

1. Sparse + Dense 融合

2. Query Expansion

3. 提高 Top-K

4. 语义分块

5. 更强 embedding 模型

3.2 准确率 Precision:召回内容中真正有用的比例

Dense 常召回“看似相关但无用”的段落——典型语义偏差。

Why?

1. 语义相似 ≠ 任务相关

2. Top-K 过大噪声暴增

3. chunk 过碎导致 embedding 歧义

提升策略

1. Cross-Encoder 精排

2. 控制 Top-K

3. 语义 chunking

3.3 Top-K:RAG 可以调用多少内容?

K 太小 → Recall 不够;K 太大 → Precision 崩溃。最佳方法是:“相似度断层法(score gap)”。

3.4 检索延迟 Latency:系统体验的底层硬性指标

延迟来源包括:embedding 推理、ANN 向量搜索、rerank、IO。

优化方式包括:GPU embedding、HNSW 参数调优、缓存策略。

3.5 Chunk 策略:embedding 的土壤决定检索效果上限

chunk 切错 = 整个 RAG 崩盘。

最佳策略:语义分块(自动分段)、20–30% 重叠、动态 chunk、术语优先策略。

四、企业级检索架构:为什么最终都走向组合检索?

几乎所有成熟产品都采用:

Sparse(术语召回)+ Dense(语义召回)+ Graph(逻辑推理)→ 合并候选 → Cross-Encoder 精排 → Top-K → 增强(Augmentation)→ 生成(Generation)

这是一种“分工明确、互相补足”的架构。

五、全文总结

1. 检索不是搜索,而是构建“模型可用的候选集合”。

2. 召回率决定“能不能答对”,准确率决定“会不会答偏”。

3. Sparse / Dense / Graph 构建的是完全不同的相似性空间。

4. Top-K 是 RAG 效果最重要的旋钮。

5. Chunk 质量决定 embedding 上限。

6. 最终方案一定是多检索方式融合 + 精排。

RAG 的成功,70% 取决于检索,20% 取决于增强,10% 取决于模型。

(后续章节:增强/生成 待补充……)

本文由 @cheninx 原创发布于人人都是产品经理。未经作者许可,禁止转载

题图来自Unsplash,基于CC0协议