惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

博客园 - 聂微东
MyScale Blog
MyScale Blog
The GitHub Blog
The GitHub Blog
C
Check Point Blog
M
MIT News - Artificial intelligence
U
Unit 42
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
H
Help Net Security
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
D
DataBreaches.Net
大猫的无限游戏
大猫的无限游戏
D
Docker
Last Week in AI
Last Week in AI
IT之家
IT之家
F
Fortinet All Blogs
A
About on SuperTechFans
P
Proofpoint News Feed
The Cloudflare Blog
酷 壳 – CoolShell
酷 壳 – CoolShell
B
Blog RSS Feed
博客园_首页
月光博客
月光博客
博客园 - 司徒正美
Y
Y Combinator Blog

人人都是产品经理

为什么你的产品找不到差异化?90%的失败都卡在第一步上(下) – 人人都是产品经理, 3年从30万到1300万用户、获2200万美元融资,这个AI教育产品用“抽卡”破解了获客难题 – 人人都是产品经理, 园区招商系统怎么做才能真正帮到去化?我加了这一个功能,推广链接转发400次阅读过万 – 人人都是产品经理, AI大事件:OpenAI发完网络安全模型又搞药物研发,小鹏汽车要抓”DeepSeek时刻” – 人人都是产品经理, 电商不是卖货,是一场更残酷的产品经理实战 – 人人都是产品经理, 没想到,活动营销又回来了! – 人人都是产品经理, 为何All-in海外KOC:一场关于AI时代窗口期的豪赌 – 人人都是产品经理, 重新理解企业的内部协作 – 人人都是产品经理, 苹果的 AI 战略到底是什么? – 人人都是产品经理, 医疗智能体·第2讲——合规护城河:等保、PIPL与HIPAA的架构实战 – 人人都是产品经理, 向量知识库五步法:从“答非所问”到“精准回复” – 人人都是产品经理, 鸿蒙PC三方库构建总指挥HPKBUILD(sha)库为例 – 人人都是产品经理, 何时该用LLM?AI产品经理的LLM设计指南 – 人人都是产品经理, 医疗信息领域的需求方、决策方、准入方以及关注点(二) – 人人都是产品经理, 即梦涨价:一场被误读的「傲慢」 – 人人都是产品经理, 面试AI PM必答题:Hermes和OpenClaw的区别,如何讲清楚业务价值 – 人人都是产品经理, AI的下一张船票:世界模型——AI产品经理必须理解的技术拐点 – 人人都是产品经理, 小红书做GEO,怎么让AI信你?记住这 3 个重要信息 – 人人都是产品经理, 5 家印度 AI 初创公司,看看印度 AI 再做什么 – 人人都是产品经理, AI项目跨团队协作:产品技术业务如何不打架 – 人人都是产品经理, Agentic Workflow(智能体工作流):让AI从”答案生成器”变成”数字员工” – 人人都是产品经理, lycium_plusplus 项目全景解读:OpenHarmony 三方库构建的“大管家” – 人人都是产品经理, 从爆单救火到前置履约:两套预采策略,把生鲜大促履约效率拉满 – 人人都是产品经理, 什么时候该补货?我用一轮数据做了一个决定 – 人人都是产品经理, 从“机械兜底”到“动态分流”:AI客服重复进线治理的4大底层逻辑 – 人人都是产品经理, 抖音拼效率,红书拼洞察 – 人人都是产品经理, 全民狂欢与退潮——为什么龙虾这波热潮冷却得如此之快? – 人人都是产品经理, Stripe押注!MPP重塑全球支付 – 人人都是产品经理, 小红书GEO:AI引用你的内容,不是因为你对,而是因为你看起来可信 – 人人都是产品经理, 前百度副总裁押注办公Agent,日韩付费爆发,Manus迎来强劲对手 – 人人都是产品经理,
为什么你的提示词(prompt)总是不稳定?来看看我从打标签中...
Aaron · 2026-01-26 · via 人人都是产品经理

在大模型生成内容、打标签、调 Prompt 等实操工作中,即便打标签这类简单应用,也极易遭遇准确率偏低、Prompt 臃肿复杂、泛化能力弱等问题。作者结合实战踩坑经历,总结出 6 条核心教训,从构建完整判断逻辑、分而治之做分类,到让模型理解底层逻辑、补充项目上下文等,揭示大模型落地的关键并非单纯的 Prompt 技巧,而是对业务的深度理解、对模型边界的清晰认知和对系统设计的整体把握。

前段时间做了大量大模型生成内容、大模型打标签、评估、调 prompt 工作,如用大模型给内容打上诈骗手法、作弊渠道等,这是一个很简单的应用场景,但依然会遇到很多问题。

如准确率上不去、prompt 越写越长越写越复杂、泛化能力太弱、逻辑之间存在冲突…

根据踩过的坑,总结了这些点教训

01 打标签本质上是不断补漏洞的过程

每发现一个误判的 case,我就在 prompt 里加一条规则;每发现一个漏判的 case,再加一条规则。

就这样,prompt 变成了一张打满补丁的网。

后来我才明白,打标签不是简单告诉大模型”这是 A,那是 B”,而是要帮它建立一套完整的判断逻辑——什么是边界、什么情况下会冲突、不同条件之间的优先级怎么排,而且需要强调 prompt 骨架,弱化细节,才能提升泛化能力。

这需要真正理解业务,而不是机械地堆砌 if-else 规则。

02 分而治之比一锅端更有效

我一开始想让大模型一步到位,直接从客诉文本中提取所有标签。

但效果很差。后来想起之前做内容安全的经验:识别危险标识时,会先把小图切出来,再用精准模型识别。

然后我改了思路:先让大模型判断客诉的大类,然后再根据不同类别,用不同的 prompt 做二级分类。

准确率从 60%+,提升至接近 90%。

03 让模型理解”为什么”比告诉它”怎么做”更重要

之前写 prompt,总是纠结于输出格式、标签名称这些表面问题。

但后来发现,真正重要的是让大模型理解背后的逻辑——为什么这条客诉应该被标记为诈骗?是因为提到了转账?还是因为语气异常?

当我把 prompt 的重点从”怎么说”转向”怎么想”之后,效果明显提升。

04 模型需要上下文

整个项目是一个复杂的多 Agent 协作项目,整个闭环有二十多处调用大模型,打标签只是其中一环节

最开始每个环节的 prompt 都是独立的,效果一般。后来在每个环节的 prompt 里都补充了项目背景:我们为什么做这个项目、这个环节在整个流程中扮演什么角色、它的输出会被下游如何使用,让他理解这个项目,效果好很多。

这就像老板给你派活,如果只说”你去做这个”,你可能做得一塌糊涂;但如果告诉你项目的来龙去脉、你做的事情对整体的意义,你就会做得更好。

大模型也一样,它需要理解上下文。

05 中间层要产出证据,不是结论

在那个风控项目中,系统有多层大模型调用。一开始让每层模型都输出”结论”,但到最后推理时,反倒因为数据缺失细节,导致大模型反而没法做推理了——因为中间层只给了它结果,没给推理过程。

后来调整策略:中间层输出”支撑证据”,也就是给机器看的推理过程;只有最后一层才输出给人看的”结论”。

06 接受不完美,但要让不完美可控

大模型一定会出错,这是它的原理决定的。

所以关键不是追求”零错误”,而是通过机制设计,让错误变得可控、可接受。

同时也要花精力说服业务方接受这个现实——大模型不是万能的,它的价值在于提升效率,而不是完全替代人。

打标签看似简单,实则复杂。它考验的不是 prompt 技巧,而是对业务的理解、对模型边界的认知、对系统设计的把握。

本文由人人都是产品经理作者【曾俊AI实战笔记】,微信公众号:【曾俊AI实战笔记】,原创/授权 发布于人人都是产品经理,未经许可,禁止转载。

题图来自Unsplash,基于 CC0 协议。