惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

量子位
B
Blog
Last Week in AI
Last Week in AI
Jina AI
Jina AI
WordPress大学
WordPress大学
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
宝玉的分享
宝玉的分享
T
Tailwind CSS Blog
P
Proofpoint News Feed
酷 壳 – CoolShell
酷 壳 – CoolShell
Google DeepMind News
Google DeepMind News
U
Unit 42
雷峰网
雷峰网
J
Java Code Geeks
Apple Machine Learning Research
Apple Machine Learning Research
MongoDB | Blog
MongoDB | Blog
F
Fortinet All Blogs
美团技术团队
Y
Y Combinator Blog
腾讯CDC
B
Blog RSS Feed
T
The Blog of Author Tim Ferriss
Microsoft Azure Blog
Microsoft Azure Blog
Recent Announcements
Recent Announcements

Prompt 语宙

kimi-thinking-preview – 月之暗面推出的多模态思考模型 pdf-craft – 开源 PDF 转 Markdown 工具 UltraMem – 字节豆包大模型团队推出的全新超稀疏模型架构 EasyControl – Tiamat AI 联合上海科大等开源的图像生成控制框架 GaussianCity – 南洋理工大学 S-Lab 团队推出的 3D 城市生成框架 X-Prompt – 用于多模态视频目标分割的通用框架 豆包大模型1.5 – 字节跳动推出的最新版大模型 GaussianAnything – 南洋理工 S-Lab 和上海 AI Lab 等推出的 3D 生成框架 Cube 3D – Roblox 推出的 AI 3D 生成模型 OpenMath-Nemotron – 英伟达开源的数学推理系列模型 MAI Transcribe-1.5 – 微软 MAI 推出的语音转文本模型 Seed1.5-Embedding – 字节跳动 Seed 团队推出的向量模型 2026世界杯人机大战引爆!联想携手DeepSeek等顶尖AI大模型,对战亿万球迷预测冠军 高考公平守护战!豆包、文心等主流大模型集体禁用拍题功能 ShotAdapter – Adobe联合UIUC推出的多镜头视频生成框架 Devstral – Mistral AI联合All Hands AI开源的编程专用AI模型 MMaDA – 字节联合普林斯顿大学等推出的多模态扩散模型 Software Copyright Materials Skill – 开源软著资料生成Skill Dulus – 开源的 CLI AI Agent,可驱动多模型工具调用 Reasonix – 专为 DeepSeek 推出的开源终端编程 Agent Mega-ASR – NTU、NUS、上海AI Lab开源的语音识别模型 CodeGraph – 开源代码知识图谱工具,加速代码理解和分析 MiniCPM5-1B – 面壁智能联合清华开源的端侧文本基座模型 Horizon – 开源 AI 信息聚合系统,构建专属新闻雷达 BitCPM-CANN – 面壁智能联合清华开源的端侧大模型 Xiaomi Auto World Model – 小米推出的辅助驾驶世界模型 opera-browser-cli – Opera Neon 开源的命令行工具 omp – 开源的 AI 终端编程智能体,能与 IDE 深度联动 Claude Opus 4.8 – Anthropic 推出的旗舰级大语言模型 Hy-Memory – 腾讯混元推出的 Agent 记忆插件
智谱GLM-4.6V多模态大模型开源:106B参数性能比肩235B,视觉...
站外新闻 · 2026-06-15 · via Prompt 语宙

💡 站外导读:当前多模态AI正从「看懂世界」向「操控世界」跃迁。行业核心痛点在于:视觉理解与工具执行间存在断层,长文档/视频处理成本高昂,中小模型性能瓶颈明显。智谱GLM-4.6V的发布直击这些痛点,通过原生视觉工具调用能力打通感知到行动的闭环,将9B轻量模型的性能提升至新高度,同时将旗舰模型成本压缩50%,为企业级多模态应用落地提供了切实可行的技术方案。

GLM-4.6V 是智谱推出的多模态大模型,包含面向云端与高性能集群场景的基础版GLM-4.6V(106B-A12B)和面向本地部署与低延迟应用的轻量版GLM-4.6V-Flash(9B)。模型支持长上下文(128k tokens),在视觉理解精度上达到同参数规模的顶尖水平,首次将工具调用能力原生融入视觉模型,实现从视觉感知到可执行行动的闭环。模型广泛应用于智能图文创作、识图购物、前端复刻和长文档 / 视频理解等场景,性能显著优于上一代GLM-4.5V,且成本降低 50%。

  • GLM-4.6V是什么
  • GLM-4.6V的主要功能
  • GLM-4.6V的性能表现
  • GLM-4.6V的模型亮点
  • 如何使用GLM-4.6V
  • GLM-4.6V的项目地址
  • GLM-4.6V的使用示例
  • GLM-4.6V的应用场景
      • 📝 站长洞察 (Editor’s Insight)

GLM-4.6V

GLM-4.6V的主要功能

  • 多模态理解与生成:模型能处理图像、视频、文本等多种输入形式,生成高质量的图文混排内容,适用于内容创作、社交媒体发布等场景。
  • 视觉驱动的工具调用:支持直接使用图像、截图等作为工具参数,无需文字描述,减少信息损失,同时能处理工具返回的多模态结果,如统计图表、网页截图等。
  • 长上下文处理:上下文窗口提升至 128k tokens,能处理长达 150 页的复杂文档或 1 小时的视频内容,支持跨文档对比分析和长视频关键事件定位。
  • 智能导购与比价:在电商场景中,可实现从图像识别到商品搜索、比价和导购清单生成的完整链路。
  • 前端复刻与交互调试:支持像素级前端复刻,能将设计稿快速转化为可运行的网页代码,支持基于截图的多轮视觉交互修改。
  • 多模态交互与推理:在复杂任务中,能结合视觉输入和文本信息进行推理,生成结构化的输出结果,适用多种业务场景。
  • 高性价比与灵活部署:相较于上一代模型成本降低 50%,支持云端、本地及多种硬件环境部署,满足不同场景需求。

GLM-4.6V的性能表现

经过超过 30 个主流多模态基准测试——包括 MMBench、MathVista 和 OCRBench 的严格检验,GLM-4.6V 相较于其前身版本实现了显著的性能飞跃。尤其在多模态交互、逻辑推理以及长上下文处理这几项核心能力上,该模型已确立了行业领先地位。

  • 9B 版本的 GLM-4.6V-Flash:整体表现超过 Qwen3-VL-8B(8B 参数量),在多模态任务中展现出更高的效率和性能。
  • 106B 参数、12B 激活的 GLM-4.6V:性能比肩 2 倍参数量的 Qwen3-VL-235B,证明其在参数效率上的显著优势,能在更少的计算资源下达到类似甚至更好的性能水平。

GLM-4.6V

GLM-4.6V的模型亮点

  • 自主调用工具:模型原生支持基于视觉输入的工具调用,能够处理图文混排、识图购物与导购以及 Agent 场景等更为复杂的视觉任务。
  • 128k 上下文窗口:理论上可理解 150 页复杂文档、200 页 PPT 或一小时视频,能够在单次推理中处理多个长文档或长视频。
  • 代码能力提升:前端复刻与多轮视觉交互修改能力优化,帮助开发者缩短「设计稿到可运行页面」的链路。
  • 同级别 SOTA:在同等参数规模下,模型在多模态交互、逻辑推理和长上下文等关键能力上取得 SOTA 表现。

如何使用GLM-4.6V

  • 本地部署:从 GitHub 或其他开源平台下载代码和模型权重,在本地电脑或服务器上运行。

  • 云端调用:访问智谱开放平台,注册账号,获取 API 密钥,通过网络请求调用云端模型。

  • 在线体验:直接访问 z.ai智谱清言 APP / 网页版,选择 GLM-4.6V 模型,上传图片或输入文字,点击“推理”查看结果。

  • 集成到应用:将模型通过 API 或本地部署的方式接入到自己的软件或系统中,实现特定功能。

  • 使用推理框架:在支持的框架(如 SGLang、transformers 等)中加载模型,结合硬件(如 GPU)运行。

GLM-4.6V的项目地址

  • GitHub仓库:https://github.com/zai-org/GLM-V
  • HuggingFace模型库:https://huggingface.co/collections/zai-org/glm-46v
  • 技术论文:https://z.ai/blog/glm-4.6v

GLM-4.6V的使用示例

案例:仅输入主题,生成图文资讯

搜索2025国际乒联混合团体世界杯里中国队的成绩,生成一片图文并茂的新闻介绍

案例:搜同款、比价、生成导购清单

GLM-4.6V的应用场景

  • 智能图文创作:输入主题或图文混杂资料,模型自动生成结构清晰、图文并茂的内容,适用于社交媒体、公众号等平台。

  • 视觉驱动购物:上传图片并发出指令,模型识别购物意图,搜索同款商品并生成导购清单,提升电商购物体验。

  • 前端开发辅助:上传网页截图或设计稿,模型精准复刻生成代码,支持多轮交互修改,加速前端开发流程。

  • 长文档与视频理解:处理长文档或长视频,支持跨文档对比分析和关键事件定位,助力复杂内容理解和研究。

  • 多模态智能客服:结合视觉和文本信息,提供精准解答和建议,支持多轮对话,提升客户服务效率。

📝 站长洞察 (Editor’s Insight)

GLM-4.6V的发布标志着多模态大模型进入「视觉Agent」新阶段。其核心突破在于:1)将工具调用能力原生植入视觉模型,实现了从“看”到“做”的闭环,这比单纯的视觉问答更具商业价值;2)通过MoE架构(106B总参数仅12B激活)实现了参数效率的极致优化,9B版本性能超越Qwen3-VL-8B,证明了“小模型大能力”的技术路径可行性;3)128K上下文窗口的工程化落地,解决了企业级长文档/视频处理的算力成本痛点。从行业趋势看,智谱正在推动多模态模型从“辅助理解”工具升级为“自主执行”系统。这不仅会影响内容创作、电商导购等消费场景,更将重构开发者工作流——前端复刻、代码调试等环节的自动化程度将大幅提升。建议关注其在企业服务、自动化办公领域的生态建设。