























💡 站外导读:在大模型参数军备竞赛愈演愈烈之际,高昂的推理成本与资源消耗成为企业落地AI的核心痛点。阿里通义此次开源的Qwen3-Next,直击这一行业难题,通过创新的混合架构与极致激活策略,在80B总参数中实现仅3B参数的轻量化激活,为高并发、长上下文场景提供了兼具性能与经济性的新范式,标志着大模型从“比大”向“比效”的关键转折。
Qwen3-Next是阿里通义开源的新一代混合架构大模型,包含指令版(Qwen3-Next-80B-A3B-Instruct )和思维版(Qwen3-Next-80B-A3B-Thinking)两个版本。模型用全球首创的Gated DeltaNet和Gated Attention混合架构,实现更快的处理速度、更强的效果和更省的资源消耗。模型总参数量达80B,每次推理仅激活约3B参数。模型预训练加速机制使长文生成速度显著提升。Qwen3-Next适用长上下文推理、高并发和低延迟需求场景,模型现已上线阿里云百炼支持API调用和QwenChat网页版支持在线体验。

混合架构:结合75%的Gated DeltaNet和25%的Gated Attention,平衡速度和精度。
Gated DeltaNet:用在处理长文本,提供快速的推理速度和线性增长的内存占用。
Gated Attention:负责精确召回关键信息,确保模型在处理长文本时不会丢失重点。
极致省钱架构:模型总参数量为80B,每次推理时仅激活约3B参数,显著降低计算成本。
预训练加速机制:通过原生MTP(Multi-Token Prediction)加速技术,模型在预训练阶段就能一次预测多个token,在生成长文本时减少推理步数,提高吞吐量。
专家系统(MoE):模型包含512个专家,每次处理请求时动态选择最相关的10个专家和1个共享专家来工作,实现负载均衡和资源优化。

智能客服:利用模型指令理解和执行能力,提供自动化的客户服务和支持。
内容生成:在新闻、博客、社交媒体等领域,能自动生成文章、故事或其他文本内容。
数据分析:数据分析人员分析大量文本数据,提取关键信息,支持市场研究和商业智能。
教育辅助:在教育领域,辅助学生学习,提供个性化教学内容和辅导。
法律咨询:法律人士分析法律文件,提供法律咨询和研究支持。
Qwen3-Next的发布,绝非一次简单的模型迭代,而是阿里在“高效大模型”这一前沿赛道上的关键落子。其混合架构(Gated DeltaNet+Gated Attention)与MoE专家系统的深度融合,本质上是在解构传统Transformer的“暴力计算”路径,转向更精细的“智能调度”范式。这背后是行业对模型边际成本与收益的重新审视——当通用能力逼近天花板,如何以更低的边际成本服务更广的垂直场景,将成为下一阶段的竞争焦点。阿里此举,既是对自身云服务成本结构的优化,也为开源社区提供了“够用、好用、省用”的新标杆,可能引发一波关于模型架构“轻量化重构”的行业思潮。
此内容由惯性聚合(RSS阅读器)自动聚合整理,仅供阅读参考。 原文来自 — 版权归原作者所有。