惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
V
Visual Studio Blog
The GitHub Blog
The GitHub Blog
Apple Machine Learning Research
Apple Machine Learning Research
J
Java Code Geeks
T
Tailwind CSS Blog
大猫的无限游戏
大猫的无限游戏
Jina AI
Jina AI
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
Hugging Face - Blog
Hugging Face - Blog
WordPress大学
WordPress大学
宝玉的分享
宝玉的分享
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
罗磊的独立博客
人人都是产品经理
人人都是产品经理
H
Heimdal Security Blog
Last Week in AI
Last Week in AI
博客园 - 【当耐特】
Cyberwarzone
Cyberwarzone
Google DeepMind News
Google DeepMind News
雷峰网
雷峰网
Hacker News: Ask HN
Hacker News: Ask HN
Webroot Blog
Webroot Blog
Microsoft Azure Blog
Microsoft Azure Blog
MyScale Blog
MyScale Blog
A
About on SuperTechFans
V2EX - 技术
V2EX - 技术
小众软件
小众软件
博客园 - Franky
博客园 - 司徒正美
P
Privacy International News Feed
爱范儿
爱范儿
U
Unit 42
博客园 - 叶小钗
The Hacker News
The Hacker News
C
Check Point Blog
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
Simon Willison's Weblog
Simon Willison's Weblog
N
News and Events Feed by Topic
D
Docker
T
Threatpost
MongoDB | Blog
MongoDB | Blog
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
H
Help Net Security
L
LINUX DO - 最新话题
Security Latest
Security Latest
T
The Exploit Database - CXSecurity.com
S
SegmentFault 最新的问题
A
Arctic Wolf
Spread Privacy
Spread Privacy

人人都是产品经理

为什么你的产品找不到差异化?90%的失败都卡在第一步上(下) – 人人都是产品经理, 3年从30万到1300万用户、获2200万美元融资,这个AI教育产品用“抽卡”破解了获客难题 – 人人都是产品经理, 园区招商系统怎么做才能真正帮到去化?我加了这一个功能,推广链接转发400次阅读过万 – 人人都是产品经理, AI大事件:OpenAI发完网络安全模型又搞药物研发,小鹏汽车要抓”DeepSeek时刻” – 人人都是产品经理, 电商不是卖货,是一场更残酷的产品经理实战 – 人人都是产品经理, 没想到,活动营销又回来了! – 人人都是产品经理, 为何All-in海外KOC:一场关于AI时代窗口期的豪赌 – 人人都是产品经理, 重新理解企业的内部协作 – 人人都是产品经理, 苹果的 AI 战略到底是什么? – 人人都是产品经理, 医疗智能体·第2讲——合规护城河:等保、PIPL与HIPAA的架构实战 – 人人都是产品经理, 向量知识库五步法:从“答非所问”到“精准回复” – 人人都是产品经理, 鸿蒙PC三方库构建总指挥HPKBUILD(sha)库为例 – 人人都是产品经理, 何时该用LLM?AI产品经理的LLM设计指南 – 人人都是产品经理, 医疗信息领域的需求方、决策方、准入方以及关注点(二) – 人人都是产品经理, 即梦涨价:一场被误读的「傲慢」 – 人人都是产品经理, 面试AI PM必答题:Hermes和OpenClaw的区别,如何讲清楚业务价值 – 人人都是产品经理, AI的下一张船票:世界模型——AI产品经理必须理解的技术拐点 – 人人都是产品经理, 小红书做GEO,怎么让AI信你?记住这 3 个重要信息 – 人人都是产品经理, 5 家印度 AI 初创公司,看看印度 AI 再做什么 – 人人都是产品经理, AI项目跨团队协作:产品技术业务如何不打架 – 人人都是产品经理, Agentic Workflow(智能体工作流):让AI从”答案生成器”变成”数字员工” – 人人都是产品经理, lycium_plusplus 项目全景解读:OpenHarmony 三方库构建的“大管家” – 人人都是产品经理, 从爆单救火到前置履约:两套预采策略,把生鲜大促履约效率拉满 – 人人都是产品经理, 什么时候该补货?我用一轮数据做了一个决定 – 人人都是产品经理, 从“机械兜底”到“动态分流”:AI客服重复进线治理的4大底层逻辑 – 人人都是产品经理, 抖音拼效率,红书拼洞察 – 人人都是产品经理, 全民狂欢与退潮——为什么龙虾这波热潮冷却得如此之快? – 人人都是产品经理, Stripe押注!MPP重塑全球支付 – 人人都是产品经理, 小红书GEO:AI引用你的内容,不是因为你对,而是因为你看起来可信 – 人人都是产品经理, 前百度副总裁押注办公Agent,日韩付费爆发,Manus迎来强劲对手 – 人人都是产品经理, 企事业单位数字化的业务供需本质 – 人人都是产品经理, 医疗智能体·第1讲——医疗信息化重构:从“辅助软件”到“自主智能体”的范式转移 – 人人都是产品经理, 粉丝量就是空气!!! – 人人都是产品经理, 用户说“薯片碎了”,机器回“要买吗?”:意图识别的翻车与破局 – 人人都是产品经理, RAG召回准确率从75到90 我做对了这三件事 – 人人都是产品经理, AI大事件:Anthropic改收费、OpenAI发安全版、手术机器人纳入医保、阿里发布”秒悟” – 人人都是产品经理, Chrome 推出 Skills 新功能,Agent 重塑上网方式 – 人人都是产品经理, GitHub前创始人拿了a16z的1700万美元,做Agent时代的Git – 人人都是产品经理 拷贝或克隆其他 Flutter OH 项目到本地后无法运行 – 人人都是产品经理, 优惠券设计:优惠券创建 – 人人都是产品经理, 不用死磕文档!AI 助手 1 小时搞定飞书 CLI 安装 + 配置 + 知识库 – 人人都是产品经理, 用小龙虾做竞品分析报告:从2天到20分钟,我是怎么做到的 – 人人都是产品经理 用小龙虾做市场分析报告:搞懂这3个公式,市场规模不再靠猜 – 人人都是产品经理, 你早就在做 Harness 工程,只是不知道它叫这个名字 – 人人都是产品经理, Think Long就够?你可能想多了! – 人人都是产品经理, 货代SRM实战:供应商准入怎么做,才能让资源池不是通讯录而是可交付网络? – 人人都是产品经理, 如何做好用户调研?详解基本技巧 – 人人都是产品经理, 木鸟、途家、美团对打,平台春天行动开“卷” – 人人都是产品经理, 入职才发现公司不靠谱?小红书从业者求职避坑指南 – 人人都是产品经理, 美国 AI 三巨头联手封堵,中国 AI 突围之路在何方 – 人人都是产品经理, 小红书,放在需求对面的镜子 – 人人都是产品经理, AI 会带来大规模失业吗? – 人人都是产品经理, 从出单到补货前,我第一次犹豫:该不该放大? – 人人都是产品经理, Flutter 三方库鸿蒙化适配:5 种高效检查方式,快速判断是否需要适配 – 人人都是产品经理, 从做产品进阶拿结果:医美机构产品经理转岗科室运营经理 – 人人都是产品经理, 阿里HappyHorse,一场关于“Token经济”的阳谋 – 人人都是产品经理, To B AI:客户留存落地的观察与思考 – 人人都是产品经理, AI产品的“生命线”——数据采集、标注、清洗的产品化设计 – 人人都是产品经理, 谈谈AI Agent(二):当“孩子”能自己“体验世界”时,你该学什么? – 人人都是产品经理, UI/UX设计师的3层能力进阶,前两层让你活下来,第三层…才是真正的分水岭 – 人人都是产品经理, 2分钟 → 30秒,效率提升75%:B端产品经理如何用「规则枷锁」驯服AI幻觉? – 人人都是产品经理, 还没来得及学OpenClaw,来了个更猛的:Hermes Agent – 人人都是产品经理, AI日报:宇树机器人跑出10m/s刷新世界纪录 – 人人都是产品经理, 一文说透基金互金如何用情绪价值引导用户决策做转化 – 人人都是产品经理, 当浏览器开始替你”看”网页:AI 浏览器正在亲手拆掉它脚下的那张网 – 人人都是产品经理, 0代码,一天时间我Vibe Coding了个网站 – 人人都是产品经理, Hermes 和 OpenClaw 之争,Agent 的能力应该“装上去”还是“长出来”? – 人人都是产品经理 视频生成的“桌子”,字节Seedance 2掀完,阿里快乐马掀 – 人人都是产品经理, 从听不懂到完全信任:我的 Codex 深度产品体验 – 人人都是产品经理, 当虚拟偶像有了北京户口,与真人偶像还有什么区别? – 人人都是产品经理, 会说,远远比会做更重要 —— 对 SBTI 爆火现象的五层观察 – 人人都是产品经理, AI产品经理必看:当“搭环境”比“选模型”更重要,你的认知还在2024年吗? – 人人都是产品经理, 2026年AI产品商业化核心逻辑:从功能demo到规模化营收的3个必破卡点 – 人人都是产品经理, 京东围绕供应链,卷起裤腿下场的那些事儿 – 人人都是产品经理, SBTI一夜刷屏:它赢在了“太会说人话” – 人人都是产品经理, 折扣零售的真相:不是便宜,而是价值感! – 人人都是产品经理, 和甲方吵了一架,最后加钱做了——我学到的ToB产品经理生存法则 – 人人都是产品经理, 和几位小红书操盘手聊了8小时,干货全在这 – 人人都是产品经理, 智谱GLM-5.1登场,开源模型首超Opus4.6!!! – 人人都是产品经理 Anthropic收入凭什么反超OpenAI,终于有人把这事说清楚了 – 人人都是产品经理, 史上最有故事感的技术报告——Claude最强模型Mythos 7个极其精彩的细节 – 人人都是产品经理, 模型不是壁垒,Harness 也不是 – 人人都是产品经理, 抖音本地生活业务思考21 – 人人都是产品经理, Superpowers:145k Star的AI编码框架,到底是什么来头? Superpowers:145k Star的AI编码框架,到底是什么来头? – 人人都是产品经理, OpenAI 的路走错了,Anthropic Harness 解法启示:模型需要实践专科生 – 人人都是产品经理, 画原型图的前一步:设计站点地图 – 人人都是产品经理, 给 DeepSeek 的最后一封催更信 – 人人都是产品经理, 手把手教你用 Claude Code 搭建 AI 营销团队:5 个 Agent、12 项技能,独立完成研究、写作、设计全流程 – 人人都是产品经理, 你以为大模型在学语言?不,它在重新发明语言学 – 人人都是产品经理 所谓Skill,不过是AI时代的工业垃圾 – 人人都是产品经理, 聊一聊内容传播的几个方法 – 人人都是产品经理, 当平台开始吃掉生态:从 OpenClaw 被封杀,读懂 Anthropic 的这盘棋 – 人人都是产品经理, 你装了 10 个 AI 插件,Obsidian 还是一个文件夹 – 人人都是产品经理 关于AI智能体架构演进的系统性思考:从单体试水到多体协同的重构 – 人人都是产品经理, 当“人”变成Skill,我们又该何去何从? – 人人都是产品经理 Mythos 事件:前沿 AI 治理的意外实验 – 人人都是产品经理, 货代CRM:信用与风险管理怎么做,才能把坏账风险拦在放货之前? – 人人都是产品经理, 从HR收集自拍照到员工自助录入——我见证了园区人脸识别从”不可用”到”真好用”的全过程 – 人人都是产品经理 千问闯关AI混沌期:阿里画靶,吴嘉张弓,马云射箭? – 人人都是产品经理,
别再用 DAU 骗自己了:AI 原生产品的 5 个核心数据指标
图灵共振 · 2026-01-26 · via 人人都是产品经理

DAU不再适用于衡量AI产品的成功,这篇文章揭示了5个关键指标——从Token价值转化率(LTV-T)到提示词摩擦效率(PFE),帮助你真正评估AI产品是否在创造价值而非浪费算力。通过真实案例和数据分析,作者分享了如何量化用户惊喜时刻、降低产品不友好度、提升任务闭环触发率的实操方法论。

前言:为什么 DAU 在 AI 时代失效了?

最近和几个做AI产品的朋友聊天,发现大家还在用移动互联网那套指标看数据。早上一来就刷DAU,晚上盯着留存率,开会时把这些数字念得震天响。但仔细一问,用户虽然每天都来,却没几个真正完成任务的。这让我想起去年做的一个对话类产品,DAU看着很漂亮,结果一看后台日志,全是用户在反复输入”换一个””再生成一次”这种无效操作

移动互联网时代,DAU确实是个硬指标。用户每天打开App,哪怕只是刷几分钟信息流,对平台来说都是价值。因为那时的产品逻辑是”占领用户时间”,时长就是金钱。但AI产品完全不一样啊,用户不是来打发时间的,他是带着具体问题来的。你想想,如果一个用户每天打开你的AI工具十次,每次都因为结果不满意而重新调整提示词,这到底是留存好还是产品烂

我见过最夸张的案例是一个代码生成工具,DAU曲线涨得特别好看。后来我们深入分析对话日志,发现60%的用户会话都超过8轮,不是因为用户粘性高,而是AI生成的代码总有bug,用户不得不反复修改提示词。这种情况下,DAU越高反而说明产品越失败,因为你在浪费用户时间和公司算力

AI产品的核心逻辑应该是”任务达成”而不是”时长消耗”。用户用一次就能解决问题,下次有需要时还会回来,这才是健康的状态。如果用户必须天天来,每次来都得折腾半天,那不是粘性,是产品在折磨用户。所以今天想和大家聊聊,到底该用什么指标来衡量AI原生产品的好坏

指标一:LTV-T (Life Time Value per Token)

单位 Token 价值转化率

这个指标是我去年带团队做模型优化时被逼出来的。当时我们的产品用户量在涨,Token消耗也跟着涨,但收入增长却跟不上。老板天天问我为什么成本上去了收益没上去,我只好带着数据团队扒了三个月的日志,最后发现问题出在”无效对话”上

LTV-T的定义其实很简单,就是用户每消耗1000个Token产生的业务收益,或者核心行为次数。这里的核心行为得根据你的产品来定,可能是保存图片,可能是导出代码,也可能是点击购买。关键是要找到那个能真正体现用户价值的行为,而不是随便什么点击都算

我们当时发现一个很有意思的现象,有个用户群体特别活跃,每天都要和AI聊上几十轮,Token消耗是平均值的三倍。但他们的核心转化率却只有平均值的一半。后来一看对话内容,全是在闲聊,问AI”你觉得今天天气怎么样””推荐部电影吧”。这些对话虽然消耗了Token,却没产生任何商业价值

分析这个指标有个小技巧,就是看Token消耗曲线和核心行为曲线的相关性。如果两条线同步增长,说明你的产品在健康运转。如果Token消耗涨得飞快,核心行为却没动静,那就要小心了,可能是你的Prompt设计有问题,或者模型理解能力不够,导致用户需要反复沟通才能达到目的

我现在每周都会让数据团队出一份LTV-T报告,按用户分群来看。哪些用户群体的Token价值高,哪些低,为什么。有一次我们发现企业用户的LTV-T是个人用户的五倍,后来就调整了产品策略,给企业用户提供更精准的服务,果然收入很快就上来了

PM洞察:这个指标能帮你判断,你的产品是在通过AI真正解决问题,还是在浪费昂贵的算力资源陪用户”;闲聊”。很多时候我们太关注模型能力,却忘了商业本质是投入产出比。Token就是AI产品的”燃料”,烧得越多不代表跑得越快,关键是每单位燃料能产生多少动力

对了,计算LTV-T时一定要注意时间范围。短期看可能某类用户的Token价值很高,但长期跟踪下来可能会发现他们的生命周期很短。我们之前有个活动带来了一批高消耗用户,LTV-T看起来很漂亮,但三个月后这些用户几乎都流失了。后来才发现他们只是为了活动福利来的,并不是产品的目标用户

还有个容易踩的坑是只看整体LTV-T,忽略了不同场景的差异。我们的产品有文档生成和图片生成两个功能,刚开始把所有Token消耗混在一起算,怎么都找不到优化方向。后来分开计算才发现,文档场景的LTV-T是图片场景的两倍,但图片场景的Token消耗却占了总量的60%。这才针对性地优化了图片生成的Prompt模板,把更多算力分配给高价值的文档场景

指标二:AHA-C (Aha-moment Conversation Depth)

“惊喜时刻”的对话深度

这个指标来源于我自己的一次使用体验。去年试用一个AI写作工具,前两轮对话感觉平平无奇,心想”也就这样吧”。到第三轮,AI突然理解了我想要的风格,生成的内容让我忍不住拍了下桌子。就是那个瞬间,我从”试试看”的心态变成了”这个工具真好用”的认知

AHA-C衡量的就是用户在第几次对话(Turn)时表现出高频的正面反馈或完成核心任务。这里的”正面反馈”包括点赞、收藏、分享,或者直接使用生成结果。我们发现,一旦用户在某个对话轮次产生了”哇塞”的感觉,他们的留存率会提升至少300%

分析这个指标有个”短路分析”的方法。如果大多数用户在第二轮对话就流失了,说明你的Prompt或者模型响应没击中痛点。就像相亲一样,前两轮聊不投机,后面基本就没机会了。我们之前有个产品,新用户平均对话轮次只有2.3轮,后来发现是初始引导的Prompt太复杂,用户不知道该怎么输入,直接就走了

理想的AI产品应该有一个明显的”魔法区间”。我们观察了很多成功的AI产品,发现这个区间大多在第4-6轮对话。在这个阶段,用户和AI已经建立了一定的默契,开始进行深度共创。就像两个人从陌生到熟悉,终于能顺畅地交流想法了

怎么找到自己产品的”魔法区间”呢?我们当时做了个小实验,给不同用户群体设置了不同的对话引导策略。有的群体在前几轮就给复杂任务,有的则循序渐进。结果发现,对普通用户来说,从简单任务开始,逐步增加复杂度,更容易让他们达到AHA时刻

PM洞察:找到那个让用户”哇塞”的临界点,并设法缩短达到这个点的路径。很多产品把功能做得很复杂,想让用户一次体验所有亮点,结果反而把用户吓跑了。不如聚焦核心价值,让用户尽快感受到产品的魔力

我们还发现一个有趣的现象,AHA时刻的出现和用户的预期管理有很大关系。如果用户一开始对AI的期望很高,可能需要更惊艳的表现才能让他们产生惊喜。反之,如果用户只是抱着试试看的心态,一点小惊喜就可能让他们印象深刻。所以在产品宣传和用户引导时,管理好预期非常重要

有个团队分享过他们的经验,他们在产品中加入了一个”小惊喜”功能,在用户进行到第5轮对话时,AI会主动提出一个用户没想到但很有用的建议。这个简单的设计让他们的AHA-C指标提升了40%。有时候,惊喜不需要多么复杂的技术,而是对用户心理的精准把握

跟踪AHA-C时一定要结合用户分群。不同类型的用户对”惊喜”的定义可能完全不同。专业用户可能因为AI解决了某个技术难题而惊喜,普通用户则可能因为AI听懂了他们模糊的需求而感动。所以不能用统一的标准来衡量所有用户的AHA时刻

指标三:USR (User Self-Correction Rate)

用户自我纠错率

这个指标是我最不愿意看到升高的指标。USR高,说明用户在帮你干活啊!他们在帮你纠正AI的错误,帮你完善提示词,这本来是产品经理和算法团队该做的事

USR的定义是用户在对话过程中通过”;换种说法””重新生成”或手动修改AI结果的比例。我们内部把这个指标叫做”产品不友好度”,因为它直接反映了用户使用产品的顺畅程度。如果用户需要不断纠错,那说明产品体验肯定有问题

高纠错率通常指向两个问题:要么是模型幻觉,要么是Prompt偏差。我们之前有个法律相关的AI产品,用户纠错率一直居高不下。后来分析纠错文本发现,AI经常编造一些不存在的法律条款。这就是典型的模型幻觉问题,需要通过RAG技术引入真实的法律数据库来解决

另一种情况是Prompt偏差。比如你的产品默认用正式语气生成内容,但用户其实需要口语化的表达。这时候用户就会不断纠正”说得通俗点””不要这么严肃”。这种问题解决起来相对简单,调整Prompt模板或者增加语气选择功能就能改善

分析USR的关键是深入研究用户纠错的具体内容。我们建立了一个纠错文本分类体系,把用户的修改分为事实纠错、语气调整、格式修正、内容补充等几类。通过这个体系,我们能快速定位产品的薄弱环节

有一次我们发现”格式修正”类的纠错突然增加,仔细一看,原来是某个版本更新后,代码生成的缩进格式出了问题。用户不得不手动调整缩进,这直接导致了那周的USR上升了15%。如果没有这个指标,我们可能要等到用户投诉才会发现问题

PM洞察:这个指标是衡量产品”好用度”最直接的负向指标。用户越不需要纠错,说明产品越懂用户。很多团队沉迷于提升模型性能,却忽略了用户在实际使用中的挫折感。USR就像一面镜子,能照出产品最真实的体验问题

降低USR有个小技巧,就是把用户的常见纠错模式固化到Prompt模板中。比如很多用户会说”不要用专业术语”,我们就在系统提示词里加入”用通俗易懂的语言解释”。这样一来,AI生成的内容就能提前规避这些常见问题,用户自然就不需要频繁纠错了

我们还做过一个对比实验,给一组用户提供”重新生成”按钮,给另一组用户提供更细致的调整选项,比如”更简洁””更详细””更专业”。结果发现后者的USR明显更低。这说明给用户明确的调整方向,比让他们自己琢磨怎么表达要有效得多

跟踪USR时要注意区分主动纠错和被动纠错。有些用户天生就喜欢反复修改,追求完美,这种主动纠错不一定是产品问题。而有些用户是因为AI完全没理解需求,不得不纠错,这才是需要重点解决的问题。所以我们会结合用户反馈和行为数据来综合判断USR升高的原因

指标四:TTR (Task Completion Trigger Rate)

任务闭环触发率

这是我最看重的一个指标。AI不应该只是个聊天框,它应该能帮用户完成实际任务。我见过太多AI产品,聊得天花乱坠,最后用户还是得自己动手把AI的输出整理成可用的格式,这种产品本质上只是个高级搜索引擎

TTR衡量的是在所有对话Session中,成功触发并完成预设功能的比例。这里的预设功能可以是一键生成PPT、自动订票、代码运行成功,或者任何能直接解决用户问题的功能。关键是要有明确的任务结果,而不只是信息输出

我们之前做过一个内容创作AI,初期版本只能生成文本。虽然用户评价不错,但TTR一直很低,因为用户还得自己把文本排版、配图、转换成可发布的格式。后来我们加入了”一键生成图文”功能,用户可以直接导出适合不同平台的内容格式,TTR一下子提升了60%

分析TTR的一个重要维度是对比”纯文本回复”与”触发组件/动作”的比例。如果你的产品大部分对话都停留在文本交互阶段,说明AI还只是个”咨询者”,没有成为”执行者”。真正的AI原生产品应该能理解用户意图,并主动提供完成任务的路径

提高TTR的关键是场景化设计。我们发现,当AI能识别用户当前的任务场景,并提供针对性的功能入口时,用户更愿意触发后续操作。比如当用户说”帮我写一份会议纪要”时,AI不仅生成文本,还会提供”导出Word””添加待办事项””分享给参会人”等功能选项

我们还做过一个有趣的尝试,在AI回复中加入”下一步行动建议”。比如生成完报告后,AI会问”需要我帮你生成演示文稿吗”。这个简单的引导让TTR提升了35%。很多时候用户不是不想完成任务闭环,而是不知道AI能帮他们做更多

PM洞察:衡量AI是否真正从”;咨询者”变成了”执行者”。这是区分AI工具和AI玩具的关键指标。用户用AI不是为了聊天,而是为了解决问题。能帮用户把事情做完,而不只是说清楚,这才是AI产品的核心价值

跟踪TTR时要注意任务完成的质量。不能只看触发率,还要看用户对任务结果的满意度。我们曾经为了提升TTR,简化了某个功能的触发条件,结果触发率上去了,但用户投诉也增加了,因为生成的结果质量下降了。所以TTR必须和任务完成质量结合起来看

不同类型的任务,TTR的基准值也不同。简单任务如生成一段文本,TTR可能很容易达到80%以上。但复杂任务如自动完成数据分析并生成报告,TTR能达到50%就已经很不错了。所以设定TTR目标时,要结合任务复杂度和用户预期来综合考虑

还有一个容易被忽略的点是任务失败分析。我们会详细记录那些触发了功能但没有完成任务的案例,分析失败原因。有时候是技术限制,有时候是用户操作问题,有时候是场景判断错误。这些分析对产品迭代非常有价值,能帮我们找到提升TTR的具体方向

指标五:PFE (Prompt Friction Efficiency)

提示词摩擦效率

这个指标来源于我和我妈用AI产品的对比。我可以写一段几百字的提示词,精确控制AI的输出结果。但我妈用同样的产品,只会说”帮我写个通知”,结果自然不理想。这让我意识到,提示词门槛是AI产品普及的最大障碍之一

PFE衡量的是用户为了获得理想结果所输入的Prompt平均长度与修改次数。长度越长,修改次数越多,说明摩擦感越大,用户使用起来越费劲。想象一下,如果用户需要写500字的Prompt才能得到好结果,这个产品的门槛就太高了,普通用户根本用不转

分析PFE有个很简单的方法,就是看新用户第一次使用时的Prompt质量。我们发现,新用户平均要修改3-4次Prompt才能得到满意结果。而那些能一次就生成好结果的用户,往往是有AI使用经验的”Prompt工程师”,这显然不是我们的目标用户

降低PFE的关键是通过UI/UX设计来简化提示词输入。结构化输入就是个好方法,比如用表单、下拉菜单、多选框来收集用户需求,而不是让用户自由输入。我们把一个自由写作功能改成结构化输入后,用户的Prompt平均长度从180字降到了60字,修改次数从3.2次降到了1.5次

另一个有效的方法是提供预设模板。针对常见场景,我们设计了不同的Prompt模板,用户只需要填写关键信息就能生成高质量内容。比如写邮件的模板,用户只需要输入收件人、主题、核心内容,AI就能自动生成完整的邮件,还会根据收件人和场景调整语气

我们还做过一个”Prompt建议”功能,当用户输入的提示词不够清晰时,AI会主动提供优化建议。比如用户输入”写一篇关于环保的文章”,系统会提示”你希望文章侧重哪个方面?比如塑料污染、碳排放还是可再生能源?”。这个功能让PFE降低了28%

PM洞察:优秀的AI产品应该通过UI/UX来降低这种”;摩擦感”。技术再先进,如果普通用户用不明白,也只能是实验室里的玩具。让AI适应人,而不是让人适应AI,这才是产品设计的真谛

分析PFE时要注意区分不同用户群体的需求。专业用户可能喜欢自由输入Prompt,享受调教AI的过程。但普通用户更希望”傻瓜式”操作,不需要学习就能用好。所以我们的产品后来做了模式切换,专业模式保留完整的Prompt输入,新手模式则提供全结构化引导

还有个有趣的发现,移动端用户的PFE普遍高于PC端用户。因为手机输入更麻烦,用户不愿意写长Prompt。所以针对移动端,我们特别优化了语音输入和快捷指令功能,用户说几句话或者点几个按钮就能完成复杂任务,大大降低了移动端的使用摩擦

跟踪PFE时,我们不仅看长度和修改次数,还会分析用户放弃率。有些用户在反复修改Prompt后还是得不到满意结果,就会直接放弃使用。通过分析这些放弃案例,我们能找到那些让用户最受挫的场景,优先进行优化

总结:从“流量思维”转向“交付思维”

做AI产品这几年,最大的感受就是思维方式的转变。以前做移动互联网产品,总想着怎么把用户拉进来,怎么让他们多停留一会儿。现在做AI产品,想的是怎么让用户用得爽,怎么帮他们高效完成任务

这五个指标其实代表了一种新的产品思维——交付思维。不再关注用户来了多少,停留了多久,而是关注用户获得了什么价值,AI真正解决了什么问题。LTV-T看的是价值转化效率,AHA-C看的是用户体验临界点,USR看的是产品友好度,TTR看的是任务完成能力,PFE看的是使用门槛

初级PM可能还在盯着DAU、留存率、平均停留时长这些传统指标。但AI Native PM应该更关注Token投产比、纠错分布、任务闭环率这些能反映AI核心价值的指标。这不是说传统指标完全没用,而是它们不能单独作为衡量AI产品好坏的标准

我见过太多团队陷入”指标陷阱”,为了提升某个数字而牺牲用户体验。比如为了提高DAU,故意设计一些每日任务让用户完成,结果用户烦了,核心功能反而没人用了。AI产品应该回归本质,用技术解决实际问题,而不是玩数字游戏

最后想分享一个小故事。我们团队有个不成文的规定,每个季度都要做一次”用户替身”活动,产品经理亲自用自己的产品完成一项真实任务。有一次我用我们的AI工具帮我妈生成旅游攻略,结果改了七次Prompt还是不满意。那一刻我才真正理解了PFE指标的意义,也明白了我们的产品离”好用”还有多远

AI产品的竞争,最终是解决问题能力的竞争。数据指标只是手段,不是目的。希望这五个指标能帮你更清晰地看到产品的真实价值,做出真正能解决用户问题的AI产品

本文由 @图灵共振 原创发布于人人都是产品经理。未经作者许可,禁止转载

题图来自Pexels,基于CC0协议