惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

B
Blog RSS Feed
博客园_首页
N
News | PayPal Newsroom
有赞技术团队
有赞技术团队
The Hacker News
The Hacker News
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
The Cloudflare Blog
S
SegmentFault 最新的问题
Jina AI
Jina AI
人人都是产品经理
人人都是产品经理
P
Privacy & Cybersecurity Law Blog
AI
AI
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
Schneier on Security
Schneier on Security
博客园 - 三生石上(FineUI控件)
月光博客
月光博客
量子位
Forbes - Security
Forbes - Security
爱范儿
爱范儿
云风的 BLOG
云风的 BLOG
SecWiki News
SecWiki News
Last Week in AI
Last Week in AI
酷 壳 – CoolShell
酷 壳 – CoolShell
T
Tor Project blog
Recorded Future
Recorded Future
A
About on SuperTechFans
J
Java Code Geeks
The Register - Security
The Register - Security
PCI Perspectives
PCI Perspectives
H
Hacker News: Front Page
V2EX - 技术
V2EX - 技术
S
Secure Thoughts
V
Vulnerabilities – Threatpost
Hacker News: Ask HN
Hacker News: Ask HN
MongoDB | Blog
MongoDB | Blog
N
Netflix TechBlog - Medium
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
Scott Helme
Scott Helme
T
The Exploit Database - CXSecurity.com
Y
Y Combinator Blog
AWS News Blog
AWS News Blog
D
Darknet – Hacking Tools, Hacker News & Cyber Security
IT之家
IT之家
T
The Blog of Author Tim Ferriss
G
Google Developers Blog
C
CERT Recently Published Vulnerability Notes
L
LangChain Blog
F
Full Disclosure
Application and Cybersecurity Blog
Application and Cybersecurity Blog
The GitHub Blog
The GitHub Blog

人人都是产品经理

为什么你的产品找不到差异化?90%的失败都卡在第一步上(下) – 人人都是产品经理, 3年从30万到1300万用户、获2200万美元融资,这个AI教育产品用“抽卡”破解了获客难题 – 人人都是产品经理, 园区招商系统怎么做才能真正帮到去化?我加了这一个功能,推广链接转发400次阅读过万 – 人人都是产品经理, AI大事件:OpenAI发完网络安全模型又搞药物研发,小鹏汽车要抓”DeepSeek时刻” – 人人都是产品经理, 电商不是卖货,是一场更残酷的产品经理实战 – 人人都是产品经理, 没想到,活动营销又回来了! – 人人都是产品经理, 为何All-in海外KOC:一场关于AI时代窗口期的豪赌 – 人人都是产品经理, 重新理解企业的内部协作 – 人人都是产品经理, 苹果的 AI 战略到底是什么? – 人人都是产品经理, 医疗智能体·第2讲——合规护城河:等保、PIPL与HIPAA的架构实战 – 人人都是产品经理, 向量知识库五步法:从“答非所问”到“精准回复” – 人人都是产品经理, 鸿蒙PC三方库构建总指挥HPKBUILD(sha)库为例 – 人人都是产品经理, 何时该用LLM?AI产品经理的LLM设计指南 – 人人都是产品经理, 医疗信息领域的需求方、决策方、准入方以及关注点(二) – 人人都是产品经理, 即梦涨价:一场被误读的「傲慢」 – 人人都是产品经理, 面试AI PM必答题:Hermes和OpenClaw的区别,如何讲清楚业务价值 – 人人都是产品经理, AI的下一张船票:世界模型——AI产品经理必须理解的技术拐点 – 人人都是产品经理, 小红书做GEO,怎么让AI信你?记住这 3 个重要信息 – 人人都是产品经理, 5 家印度 AI 初创公司,看看印度 AI 再做什么 – 人人都是产品经理, AI项目跨团队协作:产品技术业务如何不打架 – 人人都是产品经理, Agentic Workflow(智能体工作流):让AI从”答案生成器”变成”数字员工” – 人人都是产品经理, lycium_plusplus 项目全景解读:OpenHarmony 三方库构建的“大管家” – 人人都是产品经理, 从爆单救火到前置履约:两套预采策略,把生鲜大促履约效率拉满 – 人人都是产品经理, 什么时候该补货?我用一轮数据做了一个决定 – 人人都是产品经理, 从“机械兜底”到“动态分流”:AI客服重复进线治理的4大底层逻辑 – 人人都是产品经理, 抖音拼效率,红书拼洞察 – 人人都是产品经理, 全民狂欢与退潮——为什么龙虾这波热潮冷却得如此之快? – 人人都是产品经理, Stripe押注!MPP重塑全球支付 – 人人都是产品经理, 小红书GEO:AI引用你的内容,不是因为你对,而是因为你看起来可信 – 人人都是产品经理, 前百度副总裁押注办公Agent,日韩付费爆发,Manus迎来强劲对手 – 人人都是产品经理, 企事业单位数字化的业务供需本质 – 人人都是产品经理, 医疗智能体·第1讲——医疗信息化重构:从“辅助软件”到“自主智能体”的范式转移 – 人人都是产品经理, 粉丝量就是空气!!! – 人人都是产品经理, 用户说“薯片碎了”,机器回“要买吗?”:意图识别的翻车与破局 – 人人都是产品经理, RAG召回准确率从75到90 我做对了这三件事 – 人人都是产品经理, AI大事件:Anthropic改收费、OpenAI发安全版、手术机器人纳入医保、阿里发布”秒悟” – 人人都是产品经理, Chrome 推出 Skills 新功能,Agent 重塑上网方式 – 人人都是产品经理, GitHub前创始人拿了a16z的1700万美元,做Agent时代的Git – 人人都是产品经理 拷贝或克隆其他 Flutter OH 项目到本地后无法运行 – 人人都是产品经理, 优惠券设计:优惠券创建 – 人人都是产品经理, 不用死磕文档!AI 助手 1 小时搞定飞书 CLI 安装 + 配置 + 知识库 – 人人都是产品经理, 用小龙虾做竞品分析报告:从2天到20分钟,我是怎么做到的 – 人人都是产品经理 用小龙虾做市场分析报告:搞懂这3个公式,市场规模不再靠猜 – 人人都是产品经理, 你早就在做 Harness 工程,只是不知道它叫这个名字 – 人人都是产品经理, Think Long就够?你可能想多了! – 人人都是产品经理, 货代SRM实战:供应商准入怎么做,才能让资源池不是通讯录而是可交付网络? – 人人都是产品经理, 如何做好用户调研?详解基本技巧 – 人人都是产品经理, 木鸟、途家、美团对打,平台春天行动开“卷” – 人人都是产品经理, 入职才发现公司不靠谱?小红书从业者求职避坑指南 – 人人都是产品经理, 美国 AI 三巨头联手封堵,中国 AI 突围之路在何方 – 人人都是产品经理, 小红书,放在需求对面的镜子 – 人人都是产品经理, AI 会带来大规模失业吗? – 人人都是产品经理, 从出单到补货前,我第一次犹豫:该不该放大? – 人人都是产品经理, Flutter 三方库鸿蒙化适配:5 种高效检查方式,快速判断是否需要适配 – 人人都是产品经理, 从做产品进阶拿结果:医美机构产品经理转岗科室运营经理 – 人人都是产品经理, 阿里HappyHorse,一场关于“Token经济”的阳谋 – 人人都是产品经理, To B AI:客户留存落地的观察与思考 – 人人都是产品经理, AI产品的“生命线”——数据采集、标注、清洗的产品化设计 – 人人都是产品经理, 谈谈AI Agent(二):当“孩子”能自己“体验世界”时,你该学什么? – 人人都是产品经理, UI/UX设计师的3层能力进阶,前两层让你活下来,第三层…才是真正的分水岭 – 人人都是产品经理, 2分钟 → 30秒,效率提升75%:B端产品经理如何用「规则枷锁」驯服AI幻觉? – 人人都是产品经理, 还没来得及学OpenClaw,来了个更猛的:Hermes Agent – 人人都是产品经理, AI日报:宇树机器人跑出10m/s刷新世界纪录 – 人人都是产品经理, 一文说透基金互金如何用情绪价值引导用户决策做转化 – 人人都是产品经理, 当浏览器开始替你”看”网页:AI 浏览器正在亲手拆掉它脚下的那张网 – 人人都是产品经理, 0代码,一天时间我Vibe Coding了个网站 – 人人都是产品经理, Hermes 和 OpenClaw 之争,Agent 的能力应该“装上去”还是“长出来”? – 人人都是产品经理 视频生成的“桌子”,字节Seedance 2掀完,阿里快乐马掀 – 人人都是产品经理, 从听不懂到完全信任:我的 Codex 深度产品体验 – 人人都是产品经理, 当虚拟偶像有了北京户口,与真人偶像还有什么区别? – 人人都是产品经理, 会说,远远比会做更重要 —— 对 SBTI 爆火现象的五层观察 – 人人都是产品经理, AI产品经理必看:当“搭环境”比“选模型”更重要,你的认知还在2024年吗? – 人人都是产品经理, 2026年AI产品商业化核心逻辑:从功能demo到规模化营收的3个必破卡点 – 人人都是产品经理, 京东围绕供应链,卷起裤腿下场的那些事儿 – 人人都是产品经理, SBTI一夜刷屏:它赢在了“太会说人话” – 人人都是产品经理, 折扣零售的真相:不是便宜,而是价值感! – 人人都是产品经理, 和甲方吵了一架,最后加钱做了——我学到的ToB产品经理生存法则 – 人人都是产品经理, 和几位小红书操盘手聊了8小时,干货全在这 – 人人都是产品经理, 智谱GLM-5.1登场,开源模型首超Opus4.6!!! – 人人都是产品经理 Anthropic收入凭什么反超OpenAI,终于有人把这事说清楚了 – 人人都是产品经理, 史上最有故事感的技术报告——Claude最强模型Mythos 7个极其精彩的细节 – 人人都是产品经理, 模型不是壁垒,Harness 也不是 – 人人都是产品经理, 抖音本地生活业务思考21 – 人人都是产品经理, Superpowers:145k Star的AI编码框架,到底是什么来头? Superpowers:145k Star的AI编码框架,到底是什么来头? – 人人都是产品经理, OpenAI 的路走错了,Anthropic Harness 解法启示:模型需要实践专科生 – 人人都是产品经理, 画原型图的前一步:设计站点地图 – 人人都是产品经理, 给 DeepSeek 的最后一封催更信 – 人人都是产品经理, 手把手教你用 Claude Code 搭建 AI 营销团队:5 个 Agent、12 项技能,独立完成研究、写作、设计全流程 – 人人都是产品经理, 你以为大模型在学语言?不,它在重新发明语言学 – 人人都是产品经理 所谓Skill,不过是AI时代的工业垃圾 – 人人都是产品经理, 聊一聊内容传播的几个方法 – 人人都是产品经理, 当平台开始吃掉生态:从 OpenClaw 被封杀,读懂 Anthropic 的这盘棋 – 人人都是产品经理, 你装了 10 个 AI 插件,Obsidian 还是一个文件夹 – 人人都是产品经理 关于AI智能体架构演进的系统性思考:从单体试水到多体协同的重构 – 人人都是产品经理, 当“人”变成Skill,我们又该何去何从? – 人人都是产品经理 Mythos 事件:前沿 AI 治理的意外实验 – 人人都是产品经理, 货代CRM:信用与风险管理怎么做,才能把坏账风险拦在放货之前? – 人人都是产品经理, 从HR收集自拍照到员工自助录入——我见证了园区人脸识别从”不可用”到”真好用”的全过程 – 人人都是产品经理 千问闯关AI混沌期:阿里画靶,吴嘉张弓,马云射箭? – 人人都是产品经理,
Scale AI:大模型还需要数据标注吗?
海外独角兽 · 2023-04-07 · via 人人都是产品经理

AI行业每天都有很大的变化,而Scale AI的产品线可以很好的体现该行业的新动态,所以在本篇文章中作者针对数据标注在大模型中扮演什么角色、数据标注的商业模式、Scale AI 公司治理问题以及 Scale AI 未来发展情况等重要问题进行了讨论。一起来看下吧。

我们在 2021 年 7 月编译过一篇关于 Scale AI 的文章,但在过去一段时间,AI 行业每天都在发生十级地震,行业价值链也发生变化,因此我们认为有必要重新审视此前研究过的重要公司,所以把 Scale AI 拿出来重新研究。

Scale AI 2016 年成立,创始人为 Alexandr Wang 和 Lucy Guo,Lucy 现已离开公司。Scale AI 2019 年跻身独角兽行列,当前估值 73 亿美金,ARR 接近 3 亿美金。Scale AI 核心业务为数据标注,从自动驾驶场景起家,后切入政府、电商、机器人、大模型等场景,分别对应着过去 AI 行业几次大机会的出现。受益于 Alex 超强的个人能力及超强的团队执行力,Scale AI 在每波大趋势到来时都能快速捕捉机会,推出相应的产品,在细分领域迅速做到极高的市场份额。

目前,Scale AI 正非常激进地切入 MLOps 和 LLM 领域,提供各类工具、平台和服务。包括电商场景的图片生成工具 Scale Catalog,大语言模型开发者工具平台 Scale Spellbook,以及合成数据产品 Scale Synthetic 等等。但从调研结果看,这些新兴业务只是 Scale AI 寻找第二增长曲线的一些尝试,产品销售情况并不理想,最后能有稳定需求、贡献主要收入的还是数据标注业务。

除了更新公司业务情况,我们还针对数据标注在大模型中扮演什么角色、数据标注的商业模式、Scale AI 公司治理问题以及 Scale AI 未来发展情况等重要问题进行了讨论。

另外,我们认为 Scale AI 是观察 AI 行业机会的绝佳生态位。一旦行业有新动向都会体现在 Scale AI 的产品线中,且公开可见。Scale AI 的产品更新动态非常值得关注。

以下为本文目录,建议结合要点进行针对性阅读。

  1. 行业
  2. 产品
  3. 团队
  4. 竞争
  5. 当前结论与判断

一、行业

1. 行业介绍

数据标注(Data Labeling)为 Scale AI 的核心业务。数据标注位于模型开发的上游阶段,该过程需要先识别原始数据,然后为该数据添加一个或多个标签。数据类型包括结构化数据和非结构化数据,后者包括图像、视频、3D(LiDAR、雷达等)、文本和音频等。

Scale AI:大模型还需要数据标注吗?

来源:Scale AI 官网

数据标注的核心是质量和效率,对于数据标注的客户公司而言,数据标注并非公司核心业务,外包意愿强。客户标注数据主要通过内部自建团队、众包平台、与第三方数据标注创业公司合作。该赛道玩家除了 Scale AI 之外,还有 Dataloop、SuperAnnotate、Labelbox、Snorkel、V7、Appen 等。

同一客户公司内部的不同部门,可能会根据不同的需求和场景选择不同的数据标注玩家。早期,数据全部由人工手动标注,以构建和积累机器学习模型的训练数据集。尽管耗时且成本高昂,但手动标注数据确实在准确率等方面具有优势。数据标注公司往往在菲律宾、肯尼亚、委内瑞拉等劳动力价格较为低廉的国家或地区寻找合适的数据标注人员。

Scale AI:大模型还需要数据标注吗?

随着机器学习模型的发展,自动化数据标注的准确性提高,可以使用模型来辅助人工标注,比如模型预处理数据再发送给标注员;或人类作为审核员,审核并纠正模型给出的标注结果等等。与纯手动标记相比,AI 辅助标注加快数据标注的速度。目前,Scale AI 等数据标注公司都在努力减少数据标注过程中的人工参与比例。

Scale AI:大模型还需要数据标注吗?

Scale AI:大模型还需要数据标注吗?

上述两种方案是目前数据标注的主要形式,至于未来数据标注能否全部由模型代劳,我们目前的判断是 No,成熟场景也许可以,但未来总是会不断有新的场景出现,新事物往往需要先通过人工标注以积累数据、例子,然后才可能训练出可自动完成标注的模型。

2. 大模型是否还需要数据标注

在此前,机器学习需要有监督学习,需要标注大量数据。随着模型逐渐变大,对数据量的需求变大,标注数据的时间及成本变得无法控制,高质量的标注数据的生产速度难以满足大模型的需求。但无监督学习出现后,机器学习不需要明确目的的训练方式,也无法提前预测结果,因此不需要标注数据。

强化学习也不需要数据标注,强化学习的反馈不是通过标签或数值,而是通过奖励机制来学习一系列行为。预训练模型实现了有监督学习到无监督学习的跨越,OpenAI 的 GPT-1 到 GPT-3 也一直采用此路线,因此在过去一段时间内,不少人担心数据标注在大模型时代的价值。

但 ChatGPT 出现后,该顾虑有所缓解,ChatGPT 使用强化学习和人类反馈来使模型更好地与人类指令保持一致,即 RLHF (Reinforcement Learning from Human Feedback),这其中会涉及到非常多的数据标注工作。

RLHF 的数据标注与此前的用低成本劳动力完成的简单数据标注工作也有所不同,需要非常专业的人士来写词条,针对相应的问题和指令,给出符合人类逻辑与表达的高质量的答案。

据称 OpenAI 内部招了几十名 PhDs来做 RLHF 的标注,Scale 作为 OpenAI 的上游供应商,同样招聘了几十名 PhDs 在为 OpenAI 提供此类服务,具体的分工是 Scale 更多完成标注的动作,而 OpenAI 更多是进行质量检测。标注数据是 ChatGPT 效果区别于其他竞争对手的原因之一。Google 一位技术专家也表示,在 ChatGPT 出来后,Google 也在针对数据标注问题进行反思。

二、产品

1. 产品 Update

Scale AI 核心业务是数据标注,除此之外还有非常丰富的产品线。产品主要分成 4 大类:数据标注(Annotate)、管理和评估(Manage & Evaluate)、自动化(Automate)和合成(Generate)。

Scale AI:大模型还需要数据标注吗?

Scale 从自动驾驶领域的标注起家,在自动驾驶、地图等行业表现很好,两年前,公司 80-90% 的订单都来自自动驾驶(2D、3D、激光雷达等),该比例近年有所下降。

事实上,Scale AI 的标注产品研发及销售情况与底层的行业趋势及各行业发展情况有很大关系,在自动驾驶之后,Scale 的数据标注订单还来自政府、电商(零售商品目录)、机器人、大模型(RLHF)等领域,分别对应过去几年 AI 行业几波大的趋势和机会。每波大趋势将要到来时 Scale 都能很敏锐地捕捉到信号,快速招聘相应的人才,推出相应的产品,在细分领域迅速做到极高的市场份额。

除了数据标注外,值得关注的产品还包括:Scale Catalog、Scale Spellbook、Scale Synthetic。

  • Scale Catalog 主要针对电商和零售企业,除了提供标注服务,还能自动生成产品图,是 Scale 切入 Generative AI 应用领域的一款核心产品。
  • Scale Spellbook 是 Scale 近期投入较大的业务,汇集了 Scale 的核心人才,做一个基于大语言模型的 to 开发者的工具平台。
  • Scale Synthetic 是合成数据工具,随着模型参数不断变大,模态不断丰富,对数据量的要求越来越高,真实数据量已无法满足需求,合成数据开始受到关注。

从 Scale 的产品拓展情况来看,Scale 正非常激进地切入 MLOps 和 LLM 领域,提供各类工具、平台和服务。不过这只是 Scale 寻找第二增长曲线的一些尝试,产品销售情况并不理想,最后能有稳定需求、贡献主要收入的还是数据标注。

2. 客户与商业模式

Scale 的标注工人主要从委内瑞拉、肯尼亚、菲律宾等工资水平相对较低的国家招聘,客户主要为美国 enterprise 企业,商业模式就像全球化套利,毛利较高。

Scale AI:大模型还需要数据标注吗?

来源:Scale AI 官网

主要客户名单如下:

Scale AI:大模型还需要数据标注吗?

商业模式方面,Scale 官网针对每款产品给出了标准化定价,定价模式为 Consumption-base 的模式。如 Scale lmage 起价为每张图片 2 美分,每条标注 6 美分;Scale Video 起价为每帧视频 13 美分,每条标注 3 美分;Scale Text 起价为每项任务 5 美分,每条标注 3 美分;Scale Document Al 起价为每项任务 2 美分,每条标注 7 美分。

除此之外,还有针对 enterprise 的收费方式,即根据具体的企业级项目的数据量及服务进行收费。由于 Scale 的大部分客户都为 enterprise 客户,因此实际上大部分收入均为项目制收入,客单价几十万美金至几千万美金不等。Scale 2022 年收入预计为 2.9 亿美元,毛利约为 70%。公司 2021 年 4 月完成 $325M 的 E 轮融资,投资者包括 Dragoneer、Greenoaks、Tiger Global 等,估值达$7.3B。

三、团队

Scale AI 于 2016 年诞生于 Y Combinator 创业项目,创始人为 Alexandr Wang 和 Lucy Guo(2018 年 Lucy 离开 Scale AI,保留 6% 股权),两位创始人技术背景深厚。Alexandr Wang 出生于 1997 年,2014 年加入 Quora,并在 Quora 上结识 Lucy Guo,高中就收到很多硅谷科技公司的 offer,后在麻省理工学院攻读机器学习专业,选修的全是研究生级别的计算机课程,一年后毅然从麻省理工辍学。

2016 年,Alexandr Wang 和 Lucy Guo 在 YC 期间创办 Scale。Alexandr Wang 在 2011 年美国数学人才搜索 (USAMTS) 中获得铜牌,在 2012 年获得金牌;2013 年在美国数学奥林匹克竞赛中进入全国前 30 名,同时在 Who Wants to Be a Mathematical 比赛中获得第三名;2014 年参加了美国国家物理奥林匹克竞赛 (USAPhO) 并进入半决赛,在 2018 年登上了“30 under 30”的榜单。

Alexandr Wang 的履历非常亮眼,但大家对他的评价褒贬不一。他非常聪明、自信,能力强,善于维护外部关系,花费大量时间与硅谷关键人物建立关系。

他也十分擅长 branding 和 marketing,塑造很好的个人形象和企业形象,有观点认为 Scale 与其他竞对的差异性主要来自于 Alex 的宣传炒作,为公司带来了大量订单。

但或许是因为年纪太小的缘故,Alex 管理公司的经验相对欠缺,公司内部管理较为糟糕,很多人才流失或不愿加入 Scale,企业内部也存在各类矛盾。我们在几位离职高管访谈中听到了非常负面的评价,但也在不少员工访谈中感受到部分员工对 Alex 发自内心的欣赏。

团队整体方面,Scale 整体执行力非常强,工作节奏和企业文化非常激进,偏好招顶级院校的应届毕业生,聪明、勤奋、执行力强、肯加班,Scale 的“卷”在硅谷非常有名。

四、竞争

Scale 的竞争对手包括:公司内部自建的数据标注团队;谷歌、微软和亚马逊等科技大厂的数据标注服务;数据标注创业公司。

Scale AI:大模型还需要数据标注吗?

1. 类型一:公司内部自建的数据标注团队

由于某些数据比较敏感,有的公司会选择内部自建数据标注团队,作为 Scale 等外包方案的补充。例如 Airbnb 使用内部数据标注产品来标记隐私数据,并用于公司内部的机器学习模型,但是对于不敏感的数据,Airbnb 通常会外包给第三方供应商进行标注。原因有三:

  • 第三方供应商做数据标注可以比 Airbnb 内部自建团队更便宜;
  • 第三方供应商具有灵活性,可以根据 Airbnb 的需求灵活调整;
  • 数据标注并不是 Airbnb 的重点业务,第三方供应商的工具可以更准确高效地完成标注。

2. 类型二:谷歌、微软和亚马逊等科技大厂

对于 Scale 而言,这些科技巨头既是客户,也是竞争对手。谷歌、亚马逊、微软等科技大厂比其他任何供应商都具有优势,因为规模效应的存在以及头部公司拥有广泛的产品集合。例如,Scale 在 AWS 上处理和标注数据,如果客户想把 Scale 标注的数据储存在 S3 中,需要给 Scale 开通访问权限,再由 Scale 将标注好的数据放入客户的 S3 存储空间中,这一系列操作会造成额外的成本。

但如果客户数据本来就存储在谷歌、亚马逊和微软的云平台上,并使用他们的数据标注产品和服务,则无需进行访问授权、移动数据等步骤。

此外,微软、亚马逊、谷歌等科技大厂都希望客户能够在一个平台解决所有问题、采购他们的所有产品和服务,因此会在一揽子产品中,针对某个单一产品给一些折扣,甚至直接提供免费的工具,这会对 Scale 造成竞争压力。但微软等科技大厂大多只提供软件和工具,不提供人力服务,导致客户必须自己承担人力工作。而 Scale 提供人工标注数据以及其他的人力服务,在与科技大厂竞争中也具备一定的独特优势。

3. 类型三:数据标注创业公司

如 Dataloop、SuperAnnotate、Labelbox、Snorkel、V7、Appen 等。

Scale AI:大模型还需要数据标注吗?

Snorkel

Snorkel 提供了大量模板来让用户创建标注任务,也提供了托管服务。Snorkel 与 TensorFlow、Kubernetes 和 DAS 都有很好的集成。

Snorkel 和 Scale 都是数据标注领域较大的供应商,有专家认为 Snorkel 未来不会在与 Scale 完全相同的赛道中,但两者都会有不错的增长。相比 Scale,Snorkel 的优势在于更专注于文本和 NLP,以及成本较低,所以用户如果只是处理文本数据,一般会选择 Snorkel 而不是 Scale。Snorkel 的劣势在于视频、图像、地图等处理能力非常有限。

SuperAnnotate

SuperAnnotate 是数据标注行业重要的供应商之一。功能丰富,允许用户以 Python 等格式提取不同的标签,使用 SQL 对图像进行大量搜索,并将 SQL 与数据库合并。

相比 Scale,SuperAnnotate 的优势在于医疗行业和工作流程。在医疗方面,SuperAnnotate 符合 HIPAA 标准,而 Scale 并不符合。SuperAnnotate 在创建工作流方面能力更强,比如提供指令,在此方面,Scale 正在追赶,但并没有达到 SuperAnnotate 的水平。但整体来看,SuperAnnotate 的劣势在于标注质量不及 Scale。

Labelbox

Labelbox 的商业模式与 Scale 略有不同,Labelbox 是给用户提供平台,用户可以选择自己进行数据标注或使用其他服务,但客户需要采用 Labelbox 平台作为内部数据标记工具。Labelbox 通过美国国防部安全审查,也与各种组织展开合作,例如,Labelbox 与 GCP 是合作伙伴关系,正在推动 GCP 云和谷歌云。

五、当前结论与判断

1.为什么看好

(1)数据标注外包需求确定数据标注外包需求明显,给创业公司很大的发挥空间

一方面,从客户角度考虑,数据标注对于 AI 公司的员工而言属于脏活累活,会占用他们大量的时间,分散他们在算法等核心环节上的注意力,从主观角度看他们不愿意把时间花在标注上。

另一方面,从 ROI 角度考虑,大部分的数据标注工作对标注员的要求并不高,即美国的工人可以完成的工作肯尼亚的工人也可以完成,且质量差别不会很大。

因此,如果不是特别隐私的数据、或不需要类似 RLHF 场景的语义理解等其他能力,通过第三方交由低成本国家和地区的劳动力来完成标注工作 ROI 是更高的。因此,数据标注外包的需求十分明显,创业公司长期有机会。

(2)数据标注赛道的头部玩家,头部效应、品牌效应强

Scale 是数据标注赛道的绝对的头部玩家,如果我们认为人工标注和“自动化+人工”的标注方式在未来 5-10 年内会长期存在,那么目前来看 Scale 会一直保持领先。从最真实的客户和订单来看,美国的 enterprise 客户大多只认可 Scale 作为他们的第三方数据标注服务商,Scale 的客户可以说是美国 AI 各细分赛道的皇冠上的明珠,拥有最好的客户 base。

Scale 的销售团队在 pitch enterprise 客户时,所遇到的竞争对手几乎只有“大厂内部自建的团队”这一个解决方案,几乎没有遇到其他创业公司。

只有在 SMB 市场或面向非头部企业的销售中会遇到其他创业公司。头部效应和品牌效应非常明显。关于品牌效应还可以补充一个观点,有客户说到这样一句话:“Scale 和其他数据标注公司就像 iPhone 和安卓的关系。”Scale 品牌效应的形成也离不开 Alex 本人及团队极强的 PR 和 marketing 能力。

(3)规模效应已显现

数据标注赛道有规模效应。客户对数据标注的关注点主要在“质量”和“效率”两个方面,由于数据标注不是高技术含量的工作,因此经验对质量和效率的提升就起到关键作用。这里的经验又包括工人标注数据的经验,以及 Scale 对整套流程和体系的管理经验。

经验一定程度上也与规模和数量有很大联系,规模越大,标注的数据量越多,经验就越成熟、越丰富,标注数据的质量和效率就越高。

作为赛道的头部玩家,以及与 enterprise 客户合作,Scale 的订单量及数据量与其他竞对相比要大不少,再加上 Scale 在每波趋势刚刚兴起的时候,都能快速进入新兴领域,更早地获得“经验”,后续企业竞对便很难追上。

另一方面,Scale 将人工标注的经验沉淀为自动化的解决方案,在行业发展早期采用人工标注的方式,当行业成熟时已经能够训练出适配特定领域数据的自动化标注模型,变成“自动化+人工”的解决方案,大大提升效率。订单量和数据量足够大也能够更快速和高效地优化标注模型。因此,Scale 的规模效应非常明显。

(4)创始人与团队综合实力和执行力强

关于 Alex 在团队部分也有所介绍,一位非常聪明、激进、好胜心强的年轻人,且 Alex 不仅在技术方面有很强的天赋,在商业方面也有很强的能力,比如运营、品牌、营销、销售、社交能力等等,综合实力强劲。Scale 团队综合能力也非常优秀,尤其是运营能力,对数据标注整套流程和体系的管理。

Scale 的流程与管理体系、经验管理效果和效率都明显优于其他竞对企业,包括如何管理数据工人、如何给他们分工、如何进行激励或惩罚、如何检查质量、如何将数据交到客户手中、如何服务客户、又如何根据客户反馈重新标注数据提升标注质量等等,整个链路非常复杂,Scale 的高材生们能够把整套流程 handle 好,每一个环节都极其高效、流畅、准确。

而 Alex 也在很多事情上亲力亲为,或亲自监督。团队综合素质和执行力非常强。

2. 为什么不看好

(1)企业管理风险创始人与团队既是亮点也是风险

如团队部分所说,我们对创始人和团队进行 reference 后发现大家对 Alex 的评价十分极端且割裂,欣赏 Alex 的人觉得他是全能天才少年,不欣赏 Alex 的人又觉得 Alex 在公司管理方面存在非常大的问题。

这可能是我们最近两年的研究中遇到的第一个 reference 结果如此割裂的项目。企业管理和企业文化方面,Scale 给年轻人足够大的发展机会和发展空间、足够快速和清晰的上升的机会、足够多的激励,但同时在处理老员工的关系上存在很多问题,因此这其中存在较大的冲突与矛盾。

此外,Scale 高强度的工作、激进的管理方式,也导致了严重的人才流失,或是让很多人才在选择公司的时候就望而却步。我们认为企业管理与企业文化是 Scale 最大的 risk。

需求和增长风险数据标注需求受具体行业周期影响大,当每波 AI 趋势爆发的时候,就会有一次极其陡峭的增长,但当行业发展趋于稳定或趋于成熟后,增长曲线将开始平缓,直到下一波大趋势的爆发,需求和增长波动较大。

并且 Scale 多为项目制,项目的数量、周期、稳定程度和订单金额都有很大的不确定性,较难预测。数据标注业务本身重人力,靠堆人完成标注工作,属于施工队生意,短期内人效较难提升,也难有持续复利。

另一方面,Scale 团队一直在努力寻找第二增长曲线,在 MLOps、LLM tool、Generative AI 等方面均有涉及,但目前从结果看差强人意,依然没有找到第二条稳定的增长曲线。如果长期依靠数据标注业务,天花板将受限。如果想象空间和稳定的增长不存在,那么公司将来到二级市场将承担低估值的风险。

(2)供给端风险

Scale 此前布局供给端的国家和地区近年人力成本上涨速度快,最典型的是菲律宾等东南亚地区,菲律宾劳动力价格上涨后,Scale 也很少再到菲律宾招人。

供给端成本上涨,Scale 的毛利空间受挤压,而毛利是否稳定上升也是公司上市后投资者最看重的标准之一,如果毛利下降是非常不利的信号。除此之外,供给端招聘流程的规范性和稳定性也是我们关心的问题。

最后补充一个观点,我们认为 Scale 是观察 AI 行业机会的绝佳的生态位,一旦行业有新动向 Scale 都能很快捕捉到信号,并快速推出相应的数据标注产品,且公开可见。Scale 的产品创新值得持续关注。

作者:拾象;公众号:海外独角兽(ID:unicornobserver)

本文由 @海外独角兽 原创发布于人人都是产品经理。未经许可,禁止转载。

题图来自 Unsplash,基于CC0协议。

该文观点仅代表作者本人,人人都是产品经理平台仅提供信存储空间服务。