惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

D
DataBreaches.Net
IT之家
IT之家
博客园_首页
博客园 - 【当耐特】
V
V2EX
Apple Machine Learning Research
Apple Machine Learning Research
G
Google Developers Blog
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
Recent Announcements
Recent Announcements
F
Fortinet All Blogs
GbyAI
GbyAI
腾讯CDC
H
Hackread – Cybersecurity News, Data Breaches, AI and More
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
I
InfoQ
H
Help Net Security
T
Tailwind CSS Blog
B
Blog RSS Feed
Martin Fowler
Martin Fowler
人人都是产品经理
人人都是产品经理
The Cloudflare Blog
博客园 - 叶小钗
雷峰网
雷峰网
量子位

人人都是产品经理

为什么你的产品找不到差异化?90%的失败都卡在第一步上(下) – 人人都是产品经理, 3年从30万到1300万用户、获2200万美元融资,这个AI教育产品用“抽卡”破解了获客难题 – 人人都是产品经理, 园区招商系统怎么做才能真正帮到去化?我加了这一个功能,推广链接转发400次阅读过万 – 人人都是产品经理, AI大事件:OpenAI发完网络安全模型又搞药物研发,小鹏汽车要抓”DeepSeek时刻” – 人人都是产品经理, 电商不是卖货,是一场更残酷的产品经理实战 – 人人都是产品经理, 没想到,活动营销又回来了! – 人人都是产品经理, 为何All-in海外KOC:一场关于AI时代窗口期的豪赌 – 人人都是产品经理, 重新理解企业的内部协作 – 人人都是产品经理, 苹果的 AI 战略到底是什么? – 人人都是产品经理, 医疗智能体·第2讲——合规护城河:等保、PIPL与HIPAA的架构实战 – 人人都是产品经理, 向量知识库五步法:从“答非所问”到“精准回复” – 人人都是产品经理, 鸿蒙PC三方库构建总指挥HPKBUILD(sha)库为例 – 人人都是产品经理, 何时该用LLM?AI产品经理的LLM设计指南 – 人人都是产品经理, 医疗信息领域的需求方、决策方、准入方以及关注点(二) – 人人都是产品经理, 即梦涨价:一场被误读的「傲慢」 – 人人都是产品经理, 面试AI PM必答题:Hermes和OpenClaw的区别,如何讲清楚业务价值 – 人人都是产品经理, AI的下一张船票:世界模型——AI产品经理必须理解的技术拐点 – 人人都是产品经理, 小红书做GEO,怎么让AI信你?记住这 3 个重要信息 – 人人都是产品经理, 5 家印度 AI 初创公司,看看印度 AI 再做什么 – 人人都是产品经理, AI项目跨团队协作:产品技术业务如何不打架 – 人人都是产品经理, Agentic Workflow(智能体工作流):让AI从”答案生成器”变成”数字员工” – 人人都是产品经理, lycium_plusplus 项目全景解读:OpenHarmony 三方库构建的“大管家” – 人人都是产品经理, 从爆单救火到前置履约:两套预采策略,把生鲜大促履约效率拉满 – 人人都是产品经理, 什么时候该补货?我用一轮数据做了一个决定 – 人人都是产品经理, 从“机械兜底”到“动态分流”:AI客服重复进线治理的4大底层逻辑 – 人人都是产品经理, 抖音拼效率,红书拼洞察 – 人人都是产品经理, 全民狂欢与退潮——为什么龙虾这波热潮冷却得如此之快? – 人人都是产品经理, Stripe押注!MPP重塑全球支付 – 人人都是产品经理, 小红书GEO:AI引用你的内容,不是因为你对,而是因为你看起来可信 – 人人都是产品经理, 前百度副总裁押注办公Agent,日韩付费爆发,Manus迎来强劲对手 – 人人都是产品经理,
我们内测了文心一言,结果令人意想不到
硅兔赛跑 · 2023-03-17 · via 人人都是产品经理

3月16日下午,百度新一代大语言模型文心一言发布了。根据发布会上的展示,文心一言具备五种能力,分别是文学创作、商业文案创作、数理逻辑推算、中文理解、多模态生成,本文作者在进行测试后,对这五种能力进行了分析,一起来看一下吧。

文心一言的初体验,确实还没ready。

硬着头皮也好,万众期待也罢,北京时间3月16日下午,百度新一代大语言模型文心一言发布了。

怎么说呢,虽然一开始就知道可能会输给GPT-4(李厂长自己说:这个门槛有点高),但还是盼着文心一言好,盼着百度好,盼着中国首个生成式AI产品好。

但伴随着发布会的,是百度港股市值的大跳水,虽然最后回调了一波,但二级市场对中国版“ChatGPT”似乎信心不足。

我们内测了文心一言,结果令人意想不到

发布会期间百度股价实时数据

即使吸取了谷歌发布Bard时的前车之鉴,用提前准备好的录制视频展示,但依然没能阻止股价受挫。反而李厂长的皮带链接和容颜青春永驻,成了弹幕留言关注的焦点。

据百度透露,文心一言新闻发布会后三小时,企业版API调用服务测试的企业用户达6.5万,与百度智能云基于文心一言展开合作咨询达到5590条。

01 测试开始,有惊有喜

根据发布会上的展示,文心一言具备五种能力,包括了文学创作、商业文案创作、数理逻辑推算、中文理解、多模态生成。

硅兔君拿到了内测邀请码后,第一时间开始了测试。

1. 文学创作

发布会紧跟潮流,用最近热度上的《三体》,对文心一言的文学创作进行展示。提出的6个问题,文心一言都可以从容应答。

硅兔君用《哈利波特》再考了考他(毕竟都是史诗级巨作)。

对于《哈利波特》的创作背景和作者简介,文心一言刚开始给了一个“省事”的答案。

我们内测了文心一言,结果令人意想不到

但我并不满意,又问了一遍,这个版本就明显学术了很多。

我们内测了文心一言,结果令人意想不到

紧接着我问了发布会上同样的问题,让文心一言为续写《哈利波特》提供思路,答得还可以。

我们内测了文心一言,结果令人意想不到

硅兔君又问了个比较八卦的感情线问题:赫敏和哈利波特之间,有爱情吗?

文心一言给出的答案建议各大明星经纪公司参考一下,以后回应恋情别只会发律师函。

我们内测了文心一言,结果令人意想不到

2. 商业文案创作

针对商业文案创作这块,硅兔君就拿自己做个测试,提问:

如果要新建一个关于硅谷科技创投新闻的自媒体账号,融入“兔”这个字,可以给账号起个什么名字?

我们内测了文心一言,结果令人意想不到

文心一言给出的答案其实挺赞,考虑到硅谷的属性,甚至也有英文的名字。

VentureBuddies这个名字你别说,你还真别说~

在我给这个名字予以肯定后,让文心一言帮我写个简介,画风直接变成了英文,不过直接给我安上了“最近在居家办公”的设定,不知为何。

我们内测了文心一言,结果令人意想不到

说实话不咋地,乱七八糟的。

3. 逻辑数理

逻辑数理推算是生成式大模型的一道坎儿,不仅考数理,更考逻辑。

发布会上用了ChatGPT刚上线时翻车过的的鸡兔同笼,文心一言能发现问题中的错误并在纠正后正确回答出来。

可当硅兔君尝试问了几个小学生逻辑数学题,文心一言翻车了!

张老师15年前15岁,15年后多少岁?

我们内测了文心一言,结果令人意想不到

文心一言答错了,怕描述不够清楚又问一遍,依然令人遗憾……

(知道答案的朋友可以评论区见,看看多少人答对)

我们内测了文心一言,结果令人意想不到

接着问了个更绕的:

一个西瓜进价50元,卖了70元,老板收了100元假币,请问老板一共损失多少钱?

我们内测了文心一言,结果令人意想不到

这个问题同样问了ChatGPT,它一顿逻辑推理疯狂输出之后,给出了一个不同答案。

我们内测了文心一言,结果令人意想不到

事情变得很有意思了,你们说谁对?

4. 中文理解

在中文理解上,硅兔君用了常被错误理解的成语来提问,结果ChatGPT确实错误地学习了现代用法。

“差强人意”是什么意思?

正确答案:

我们内测了文心一言,结果令人意想不到

错误答案:

我们内测了文心一言,结果令人意想不到

一题见分晓,这一局文心一言完胜了。

5. 多模态生成

最后,也是最令人期待的多模态生成。硅兔君按照发布会的语言范本试了两次,都没有给出满意的答案,不得不说和GPT-4的差距不是一点半点。

我们内测了文心一言,结果令人意想不到

生成视频方面也没有实现,并且给出了“无法生成视频”的回复(难怪发布会上用的录像,不然大型翻车现场)。

我们内测了文心一言,结果令人意想不到

还有一个被忽略的点就是编程能力,在发布会上并没有展现,也是ChatGPT的优势之一。硅兔君让文心一言用C语言编一个小游戏,这是它给出的回答:

我们内测了文心一言,结果令人意想不到

02 文心一言 vs ChatGPT

作为一个人工智能语言模型,ChatGPT也存在一些缺点和局限性。以下是我对ChatGPT的缺点评价:

1. 知识库的深度和广度仍需要进一步提高:虽然ChatGPT可以回答各种领域的问题,但它的知识库还不够完备,有些问题可能无法找到合适的回答。

2. 生成式对话的质量还有待提高:尽管ChatGPT可以生成自然流畅的对话,但它的生成式对话还不如人类专业演员,有时可能会出现口误或重复等问题。

3. 某些情况下可能会出现错误或不准确的回答:由于训练数据的限制,ChatGPT在某些情况下可能无法正确理解用户的意图,或者回答内容可能不够准确或恰当。

4. 依赖于预先训练的数据集:目前的ChatGPT主要是基于文本进行对话生成的,如果未来想要扩展功能或使用场景,可能需要更多地依赖于预先训练的数据集,这会增加开发难度和维护成本。

5. 中文表达能力有待改进:作为一个英文名称为GPT的机器学习模型,其中文名称“小微”似乎并没有体现出与真实世界中的Micronesia相关的含义和特点,这可能会影响其普及程度和应用范围。

总之,尽管ChatGPT在许多方面都表现出色,但它也存在一些缺点和局限性。

以上是文心一言对ChatGPT的评价,把人家的缺点安排得明明白白。

麦克风交给ChatGPT,很遗憾,它好像还不知道文心一言的到来……

我们内测了文心一言,结果令人意想不到

总的来讲,百度这波发布,正如李彦宏所说:“因为有市场需求,百度各个产品线,大家都在等着用这样的技术。”

(都在催,不得不赶紧上线)

也如李彦宏所说:“怀胎十月,一朝分娩。”

(我们还只是个孩子)

不过全世界都知道前一天GPT-4的问世,在这个节骨眼上顶着压力发布产品的勇气还是值得肯定的。

硅兔君认为我们需要做的,是再给一些耐心。就如开头说的那样——我们都盼着它好。

作者:蔓蔓周

来源公众号:硅兔赛跑(ID:sv_race),10万创投人都关注的创新媒体,坐标硅谷

本文由人人都是产品经理合作媒体 @硅兔赛跑 授权发布,未经许可,禁止转载。

题图来自 Unsplash,基于 CC0 协议

该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务。