惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

量子位
WordPress大学
WordPress大学
小众软件
小众软件
云风的 BLOG
云风的 BLOG
IT之家
IT之家
人人都是产品经理
人人都是产品经理
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
Last Week in AI
Last Week in AI
博客园 - 【当耐特】
T
Tailwind CSS Blog
阮一峰的网络日志
阮一峰的网络日志
V
V2EX
宝玉的分享
宝玉的分享
博客园 - Franky
F
Fortinet All Blogs
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
GbyAI
GbyAI
Hugging Face - Blog
Hugging Face - Blog
Jina AI
Jina AI
D
Docker
博客园 - 聂微东
C
Check Point Blog
H
Help Net Security

人人都是产品经理

为什么你的产品找不到差异化?90%的失败都卡在第一步上(下) – 人人都是产品经理, 3年从30万到1300万用户、获2200万美元融资,这个AI教育产品用“抽卡”破解了获客难题 – 人人都是产品经理, 园区招商系统怎么做才能真正帮到去化?我加了这一个功能,推广链接转发400次阅读过万 – 人人都是产品经理, AI大事件:OpenAI发完网络安全模型又搞药物研发,小鹏汽车要抓”DeepSeek时刻” – 人人都是产品经理, 电商不是卖货,是一场更残酷的产品经理实战 – 人人都是产品经理, 没想到,活动营销又回来了! – 人人都是产品经理, 为何All-in海外KOC:一场关于AI时代窗口期的豪赌 – 人人都是产品经理, 重新理解企业的内部协作 – 人人都是产品经理, 苹果的 AI 战略到底是什么? – 人人都是产品经理, 医疗智能体·第2讲——合规护城河:等保、PIPL与HIPAA的架构实战 – 人人都是产品经理, 向量知识库五步法:从“答非所问”到“精准回复” – 人人都是产品经理, 鸿蒙PC三方库构建总指挥HPKBUILD(sha)库为例 – 人人都是产品经理, 何时该用LLM?AI产品经理的LLM设计指南 – 人人都是产品经理, 医疗信息领域的需求方、决策方、准入方以及关注点(二) – 人人都是产品经理, 即梦涨价:一场被误读的「傲慢」 – 人人都是产品经理, 面试AI PM必答题:Hermes和OpenClaw的区别,如何讲清楚业务价值 – 人人都是产品经理, AI的下一张船票:世界模型——AI产品经理必须理解的技术拐点 – 人人都是产品经理, 小红书做GEO,怎么让AI信你?记住这 3 个重要信息 – 人人都是产品经理, 5 家印度 AI 初创公司,看看印度 AI 再做什么 – 人人都是产品经理, AI项目跨团队协作:产品技术业务如何不打架 – 人人都是产品经理, Agentic Workflow(智能体工作流):让AI从”答案生成器”变成”数字员工” – 人人都是产品经理, lycium_plusplus 项目全景解读:OpenHarmony 三方库构建的“大管家” – 人人都是产品经理, 从爆单救火到前置履约:两套预采策略,把生鲜大促履约效率拉满 – 人人都是产品经理, 什么时候该补货?我用一轮数据做了一个决定 – 人人都是产品经理, 从“机械兜底”到“动态分流”:AI客服重复进线治理的4大底层逻辑 – 人人都是产品经理, 抖音拼效率,红书拼洞察 – 人人都是产品经理, 全民狂欢与退潮——为什么龙虾这波热潮冷却得如此之快? – 人人都是产品经理, Stripe押注!MPP重塑全球支付 – 人人都是产品经理, 小红书GEO:AI引用你的内容,不是因为你对,而是因为你看起来可信 – 人人都是产品经理, 前百度副总裁押注办公Agent,日韩付费爆发,Manus迎来强劲对手 – 人人都是产品经理,
ChatGPT大更新!OpenAI奉上程序员大礼包:API新增杀手级能力...
量子位 · 2023-06-15 · via 人人都是产品经理

ChatGPT又更新了,最核心的是推出了API新增函数调用(Function calling)能力,与网页版的插件类似,API也能使用外部工具了。有人认为,这是一个杀手级特性,也是自ChatGPT API发布以来最重要的更新。

ChatGPT一夜间再次进化,OpenAI一口气推出大量更新!

最核心的是API新增函数调用(Function calling)能力,与网页版的插件类似,API也能使用外部工具了。

这个能力被交到开发者手上,ChatGPT API原本不具备的能力也都能靠各种第三方服务解决了。

有人认为,这是一个杀手级特性,也是自ChatGPT API发布以来最重要的更新。

另外这次关于ChatGPT API的更新每一个都很重磅,不仅能力加量,价格还更低了:

  • 推出新版本gpt-4-0613和gpt-3.5-turbo-0613模型
  • gpt-3.5-turbo上下文长度增涨400%,从4k增长到16k
  • gpt-3.5-turbo输入token降价25%
  • 最先进embeddings model降价75%
  • GPT-4 API大规模开放,直到清空排队列表为止

消息到了国内,也有网友认为这是国内大模型面临的重大挑战。

一、何时使用工具,API自己决定

根据OpenAI官方介绍,函数调用同时支持新版GPT-4和GPT-3.5。

开发者只需要模型描述需要用到的函数,何时调用哪个函数都是模型根据提示词自己决定的,与ChatGPT调用插件的机制一样。

对于具体使用方法,官方给出了三个例子:

第一,聊天机器人调用外部API执行操作或回答问题,如“给某人发邮件”或“今天的天气如何?”。

第二,将自然语言转换为API调用或数据库查询,如“上个月有多少订单?”会自动生成SQL查询语句。

第三,从文本中自动提取结构化数据,如只需要定义好需要的“人名、生日、位置”,再给个网页链接,就可以自动提取一篇维基百科文章中提到的所有人物信息。

这一新功能让广大网友、特别是开发者为之欢呼,表示有了它工作效率将大大提高。

以前,想要让GPT调用函数需要借助LangChain的工具才能实现……尽管LangChain理论上拥有更高的运行效率,但可靠性要逊于经过专门调教的新GPT。

二、更新版本,更低价格

目前,新版本的模型已经逐步开始迭代。

最新版gpt-4-0613、gpt-3.5-turbo-0613与扩充上下文长度的gpt-4-32k-0613都支持函数调用。

gpt-3.5-turbo-16k不支持函数调用,提供4倍上下文长度,意味着一次请求可支持约20页文本。

旧模型也开始逐步废弃。

使用初始版本gpt-3.5-turbo、gpt-4的应用将于6月27日自动升级到新版本

需要更多时间过渡的开发者也可以手动指定继续使用旧版本,但9月13日之后所有旧版本请求将彻底废弃。

说完这个时间线,我们再来看看价格。

升级之后,OpenAI不仅没有让产品涨价,反而下调了价格。

首先是使用量最大的的gpt-3.5-turbo(4k token版)。

输入token的价格降低了25%,现在0.0015美元每千token,也就是1美元66.6万token。

而输出token每千token的价格则为0.002美元,也就是1美元50万token。

换算成英语文本的话,大致是1美元700页。

嵌入模型(embeddings model)的价格更是大跳水,直接降低了75%。

每千token只需0.0001美金,也就是1美元一千万token

此外,新推出的16K token版GPT3.5-Turbo提供了4K版本四倍的处理能力,但价格只有两倍。

输入及输出token的价格分别是0.003和0.004美元每千token。

另外还有少数网友反应,当月账单直接从100到降到几美分了,目前还不清楚具体什么情况。‍‍‍‍‍‍‍

最后,有需要的话也不要忘记去排队GPT-4 API的测试资格。

三、OpenAI捕“Chain”,微软在后

不少网友指出,OpenAI新出的“函数调用”基本就是Langchain里“Tools”的翻版。

也许接下来,OpenAI还会翻版Langchain的更多功能,如Chains和Indexes。

Langchain是大模型领域最火的开源开发框架,能够把各种大模型能力整合起来快速构建应用程序。

团队最近也刚刚获得1000万美元种子轮融资。

虽然OpenAI的这次更新还不至于直接“杀死”Langchain这个创业项目。

但是开发者们本来需要LangChain才能实现一些功能,现在确实不再需要了。

再看Langchain一方的反应,求生欲也确实很强。

在OpenAI官推发布更新的10分钟之内,Langchain立马宣布“已经在做兼容工作了”。

并且不到一个小时就发布了新版本,支持官方新功能之外,还可以把开发者已经写好的tools转换成OpenAI的functions。

一众网友除了排队感叹这快得离谱的开发速度,还思考起一个无法回避的问题:

OpenAI把你的创业项目给做了怎么办?

对此,OpenAI首席执行官Sam Altman最近刚好做过一次表态。

在5月底Humanloop举办的交流会上,Altman曾表示:

除了ChatGPT类型的消费级应用之外,尽量避免与客户竞争。

现在看来,开发工具似乎不算在避免竞争的范围之内。

而与OpenAI形成竞争关系的除了创业公司,还有一个不可忽视的存在:

微软,OpenAI最大金主,通过Azure云也对外提供OpenAI API服务。

就在最近,有开发者反馈,从OpenAI官方API切换到微软Azure版本后,性能显著提升

具体来说:

  • median latency从15秒减少到3秒
  • 95th percentile latency从60秒减少到15秒
  • 平均每秒处理的token数量增加了三倍,从8个增加到24个。

再算上Azure给的一些折扣,甚至比原来还便宜了。

但微软Azure的更新速度一般要比OpenAI慢上几周。

开发阶段快速迭代用OpenAI,大规模部署转去微软Azure,你学到了么?

更新公告https://openai.com/blog/function-calling-and-other-api-updates

参考链接:[1]https://news.ycombinator.com/item?id=36313348[2]https://twitter.com/svpino/status/1668695130570903552[3]https://weibo.com/1727858283/N5cjr0jBq[4]https://twitter.com/LangChainAI/status/1668671302624747520[5]https://twitter.com/hwchase17/status/1668682373767020545[6]https://twitter.com/ItakGol/status/1668336193270865921

作者:梦晨、克雷西

来源公众号:量子位(ID:QbitAI),追踪人工智能新趋势,关注科技行业新突破

本文由人人都是产品经理合作媒体 @量子位 授权发布于人人都是产品经理,未经许可,禁止转载。

题图来自Unsplash,基于CC0协议。

该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务。