惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

云风的 BLOG
云风的 BLOG
Blog — PlanetScale
Blog — PlanetScale
博客园 - 【当耐特】
博客园_首页
The GitHub Blog
The GitHub Blog
月光博客
月光博客
Hugging Face - Blog
Hugging Face - Blog
有赞技术团队
有赞技术团队
博客园 - 三生石上(FineUI控件)
D
Docker
Stack Overflow Blog
Stack Overflow Blog
WordPress大学
WordPress大学
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
Apple Machine Learning Research
Apple Machine Learning Research
Vercel News
Vercel News
酷 壳 – CoolShell
酷 壳 – CoolShell
雷峰网
雷峰网
小众软件
小众软件
I
InfoQ
A
About on SuperTechFans
T
The Blog of Author Tim Ferriss
S
SegmentFault 最新的问题
Microsoft Azure Blog
Microsoft Azure Blog
博客园 - Franky

人人都是产品经理

为什么你的产品找不到差异化?90%的失败都卡在第一步上(下) – 人人都是产品经理, 3年从30万到1300万用户、获2200万美元融资,这个AI教育产品用“抽卡”破解了获客难题 – 人人都是产品经理, 园区招商系统怎么做才能真正帮到去化?我加了这一个功能,推广链接转发400次阅读过万 – 人人都是产品经理, AI大事件:OpenAI发完网络安全模型又搞药物研发,小鹏汽车要抓”DeepSeek时刻” – 人人都是产品经理, 电商不是卖货,是一场更残酷的产品经理实战 – 人人都是产品经理, 没想到,活动营销又回来了! – 人人都是产品经理, 为何All-in海外KOC:一场关于AI时代窗口期的豪赌 – 人人都是产品经理, 重新理解企业的内部协作 – 人人都是产品经理, 苹果的 AI 战略到底是什么? – 人人都是产品经理, 医疗智能体·第2讲——合规护城河:等保、PIPL与HIPAA的架构实战 – 人人都是产品经理, 向量知识库五步法:从“答非所问”到“精准回复” – 人人都是产品经理, 鸿蒙PC三方库构建总指挥HPKBUILD(sha)库为例 – 人人都是产品经理, 何时该用LLM?AI产品经理的LLM设计指南 – 人人都是产品经理, 医疗信息领域的需求方、决策方、准入方以及关注点(二) – 人人都是产品经理, 即梦涨价:一场被误读的「傲慢」 – 人人都是产品经理, 面试AI PM必答题:Hermes和OpenClaw的区别,如何讲清楚业务价值 – 人人都是产品经理, AI的下一张船票:世界模型——AI产品经理必须理解的技术拐点 – 人人都是产品经理, 小红书做GEO,怎么让AI信你?记住这 3 个重要信息 – 人人都是产品经理, 5 家印度 AI 初创公司,看看印度 AI 再做什么 – 人人都是产品经理, AI项目跨团队协作:产品技术业务如何不打架 – 人人都是产品经理, Agentic Workflow(智能体工作流):让AI从”答案生成器”变成”数字员工” – 人人都是产品经理, lycium_plusplus 项目全景解读:OpenHarmony 三方库构建的“大管家” – 人人都是产品经理, 从爆单救火到前置履约:两套预采策略,把生鲜大促履约效率拉满 – 人人都是产品经理, 什么时候该补货?我用一轮数据做了一个决定 – 人人都是产品经理, 从“机械兜底”到“动态分流”:AI客服重复进线治理的4大底层逻辑 – 人人都是产品经理, 抖音拼效率,红书拼洞察 – 人人都是产品经理, 全民狂欢与退潮——为什么龙虾这波热潮冷却得如此之快? – 人人都是产品经理, Stripe押注!MPP重塑全球支付 – 人人都是产品经理, 小红书GEO:AI引用你的内容,不是因为你对,而是因为你看起来可信 – 人人都是产品经理, 前百度副总裁押注办公Agent,日韩付费爆发,Manus迎来强劲对手 – 人人都是产品经理,
Agent开发平台数据运营体系:企业如何衡量大模型投入产出比ROI?
shannon · 2024-08-26 · via 人人都是产品经理

大模型到底为公司带来了多大的好处?为应用大模型,采购了第三方的AgentBuilder平台,或者自研搭建了大模型应用平台,效果咋样?企业内部的员工会用了吗?还是依赖外部的第三方提供解决方案呢?用大模型时,需要考虑信息安全相关的事儿,权限粒度能满足要求吗?违规碰触拦得住吗?……一连串的问题,让数据来回答……

1.大模型落地stakeholders&成本

企业都想在这波技术生产力变革中,不被落下,无论是自动驾驶、具身智能、机器人还是内部的IT系统,迎来了“换脑子”的机会。都想干,怎么入手呢?一般大模型落地需要五个角色的人彼此协作。如果是外采第三方MaaS平台,那么3、4、5就由第三方公司出人。

2.Agent开发平台产品功能MAP

要评估自建、还是外采,那么先来看下,Agent开发平台,应该有哪些必备的“能力”。搭建这样一个平台,贵公司需要多久?投入多少成本/资源?

3.Agent平台数据运营

3.1 ROI

ROI=W/(XorY+Z+M+N+O)

3.2 平台运营:有数据可用

节约成本:每个月做数据清洗、数据查询、口径对齐、取数等工作,2*15=30人天/月

3.3 平台运营:需要的数据

有了这些数据,可以回答下面一系列问题:

  1. 高层可以了解,各层级部门应用大模型的进展C
  2. 高层可以了解,当前员工用大模型的情况F

还可以了解:

  1. 昨天,员工跟大模型交流对话了多少轮?消耗多少token(需要花多少钱)?大模型回复了多少token(代替人回答问题)?大模型累计服务时长是多少?X/8小时,相当于一天里,有多少名虚拟数字员工在代替人干活~~
  2. 上周,营销Agent,一共生产多少篇营销图文/视频等,投放到各个渠道的效果怎么样,热度、用户回复、传播效果与大上周、或者与人工产出文案同环比,为小程序、APP拉新、促活引流效果如何……
  3. 7月,销售助手Agent,累计应答多少次销售问询,以更好的给用户做售前解答。售后服务Agent,累计应答多少次售后服务同学,以更快捷的协助用户解决问题……
  4. 7月,零件Agent,累计应答多少次零件在库问询/同类零件可替代问询,发出多少个零件的库存红线采购预警,以确保供应链最优,成本最优……
  5. Q2,舆情监控Agent,一共搜集到多少个外部渠道的用户呼声,其中有多少是正面舆情,多少是负面舆情。有多少做了即时回复,有多少通过人工处理~~

所有的环节,数字化+智能化的协作是大模型让企业动起来的表征……

4.举例:大模型安全识别、拦截、放行数据分析漏斗图

计算公式:

1.输入拦截率=输入拦截次数/用户输入总量=5+(4+X2)/1

2.输出拦截率=输出拦截次数/大模型输出总量=11+(X2+10)/1

3.漏拦截率=漏拦截次数/(拦截次数-误拦截次数+漏拦截次数)=4+X2+10/(5+11-6-X1-12+4+X2+10)

4.误拦截率=误拦截次数/拦截次数=(6+X1+12)/5+11

受作者领域认知深度所限及技术无时无刻不在更新迭代,业界对LLM、AGI、Agent、GPT……的衍生应用必定是珠零锦粲。无法在一篇中尽现全貌,未来可能会彻底推翻当下的种种尝试而不得知。能为大家带去一点点新的启发,以深感欣慰。文中难免有纰漏或不准确的地方,欢迎大家批评指正。撰写中参考网络上各位同仁的最新观点,拿来主义未打招呼,还望见谅。若有任何建议或意见,欢迎联系作者探讨。

作者:shucay、佳琪、小正

本文由@shucay 授权发布于人人都是产品经理,未经许可,禁止转载

该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务。