惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

aimingoo的专栏
aimingoo的专栏
WordPress大学
WordPress大学
阮一峰的网络日志
阮一峰的网络日志
博客园 - 司徒正美
月光博客
月光博客
宝玉的分享
宝玉的分享
Recent Announcements
Recent Announcements
小众软件
小众软件
H
Hackread – Cybersecurity News, Data Breaches, AI and More
美团技术团队
博客园 - 三生石上(FineUI控件)
A
About on SuperTechFans
J
Java Code Geeks
云风的 BLOG
云风的 BLOG
罗磊的独立博客
大猫的无限游戏
大猫的无限游戏
IT之家
IT之家
Vercel News
Vercel News
量子位
Martin Fowler
Martin Fowler
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
V
Visual Studio Blog
腾讯CDC
有赞技术团队
有赞技术团队

Prompt 语宙

kimi-thinking-preview – 月之暗面推出的多模态思考模型 pdf-craft – 开源 PDF 转 Markdown 工具 UltraMem – 字节豆包大模型团队推出的全新超稀疏模型架构 EasyControl – Tiamat AI 联合上海科大等开源的图像生成控制框架 GaussianCity – 南洋理工大学 S-Lab 团队推出的 3D 城市生成框架 X-Prompt – 用于多模态视频目标分割的通用框架 豆包大模型1.5 – 字节跳动推出的最新版大模型 GaussianAnything – 南洋理工 S-Lab 和上海 AI Lab 等推出的 3D 生成框架 Cube 3D – Roblox 推出的 AI 3D 生成模型 OpenMath-Nemotron – 英伟达开源的数学推理系列模型 MAI Transcribe-1.5 – 微软 MAI 推出的语音转文本模型 Seed1.5-Embedding – 字节跳动 Seed 团队推出的向量模型 2026世界杯人机大战引爆!联想携手DeepSeek等顶尖AI大模型,对战亿万球迷预测冠军 高考公平守护战!豆包、文心等主流大模型集体禁用拍题功能 ShotAdapter – Adobe联合UIUC推出的多镜头视频生成框架 Devstral – Mistral AI联合All Hands AI开源的编程专用AI模型 MMaDA – 字节联合普林斯顿大学等推出的多模态扩散模型 Software Copyright Materials Skill – 开源软著资料生成Skill Dulus – 开源的 CLI AI Agent,可驱动多模型工具调用 Reasonix – 专为 DeepSeek 推出的开源终端编程 Agent Mega-ASR – NTU、NUS、上海AI Lab开源的语音识别模型 CodeGraph – 开源代码知识图谱工具,加速代码理解和分析 MiniCPM5-1B – 面壁智能联合清华开源的端侧文本基座模型 Horizon – 开源 AI 信息聚合系统,构建专属新闻雷达 BitCPM-CANN – 面壁智能联合清华开源的端侧大模型 Xiaomi Auto World Model – 小米推出的辅助驾驶世界模型 opera-browser-cli – Opera Neon 开源的命令行工具 omp – 开源的 AI 终端编程智能体,能与 IDE 深度联动 Claude Opus 4.8 – Anthropic 推出的旗舰级大语言模型 Hy-Memory – 腾讯混元推出的 Agent 记忆插件
Qwen3-VL:阿里通义最强视觉语言模型发布,4B/8B版开源,全面...
站外新闻 · 2026-06-20 · via Prompt 语宙

💡 站外导读:在AI多模态竞赛白热化的今天,企业与开发者面临一个核心痛点:如何在有限的硬件成本下,获得性能顶尖、功能全面的视觉语言模型?阿里通义最新发布的Qwen3-VL系列,特别是其新开源的4B与8B版本,直击这一痛点。这些模型不仅保留了旗舰版的全部核心能力,更在多个权威基准测试中实现SOTA,以极小的参数量实现了对GPT-5 Mini、Claude4 Sonnet等顶尖闭源模型的全面超越,标志着高效能、低门槛的多模态AI应用新时代已经到来。

Qwen3-VL 是阿里通义推出的 Qwen 系列中最强大的视觉语言模型,具备卓越的多模态能力。模型能理解纯文本、图像和视频,支持长上下文、空间感知、代码生成等功能。Qwen3-VL-235B-A22B是该系列的旗舰模型,包含 Instruct 与 Thinking 两个版本, Instruct 版本在视觉感知任务中表现优异, Thinking 版本在多模态推理中达到领先水平。Qwen3-VL 能像人类一样操作界面、进行复杂推理、生成创意文案,将设计图转化为代码。模型支持多语言 OCR 和长视频理解,广泛应用在教育、开发、自动化等领域,是当前多模态模型中的佼佼者。

  • Qwen3-VL是什么
  • Qwen3-VL的主要功能
  • Qwen3-VL的技术原理
  • Qwen3-VL的项目地址
  • Qwen3-VL的应用场景
      • 📝 站长洞察 (Editor’s Insight)

最新开源的多模态AI模型Qwen3-VL-30B-A3B,尽管激活参数仅30亿,却在STEM、视觉问答、OCR、视频理解以及智能体任务等多个前沿领域,展现出与GPT-5-Mini、Claude4-Sonnet等顶尖模型相当甚至更优的性能。该模型已推出FP8量化版本,并同步在Qwen Chat平台上线,供用户免费体验。

最新阿里通义千问团队推出了Qwen3-VL系列的4B与8B版本,这两个版本分别提供Instruct(指令)和Thinking(思维)版本。模型尺寸的缩减显著降低了显存(VRAM)的占用,使得开发者可以在更广泛的硬件设备上部署和运行模型,降低了使用门槛。完整保留了Qwen3-VL的全部核心功能,没有因尺寸减小而削弱功能。

  • Qwen3-VL-8B Instruct:在MIABench、OCRBench、SUNRGBD、ERQA、VideoMMMU、ScreenSpot等30项权威基准测试中取得了SOTA(行业最佳)成绩,超越了Gemini 2.5 Flash Lite、GPT-5 Nano以及Qwen2.5-VL-72B等顶尖模型。

  • Qwen3-VL-4B Instruct:以更少的参数量,在STEM、VQA、OCR、视频理解及Agent任务等测试中,能与Gemini 2.5 Flash Lite、GPT-5 Nano对打,展现出优秀的多模态性能。

  • Qwen3-VL-8B Thinking:在MathVision、MMStar、HallusionBench、MM-MT-Bench、CountBench等23项权威基准测试中取得了SOTA成绩,超越了Gemini 2.5 Flash Lite、GPT-5 Nano高版本以及其他同等级顶尖开源模型。

  • Qwen3-VL-4B Thinking:同样表现出“以小敌大”的成绩,在多模态性能方面表现优异。

Qwen3-VL

Qwen3-VL的主要功能

  • 视觉交互与任务执行:Qwen3-VL 能操作电脑和手机界面,识别图形用户界面(GUI)元素,理解按钮功能,调用工具并执行任务。在 OS World 等基准测试中表现卓越,通过工具调用显著提升细粒度感知任务的表现。
  • 强大的纯文本处理能力:从预训练初期开始, 融合文本与视觉模态的协同训练,持续强化文本处理能力。纯文本任务表现与 Qwen3-235B-A22B-2507 纯文本旗舰模型相当。
  • 视觉编程能力:支持根据图像或视频生成代码。
  • 空间感知与推理:2D 定位从绝对坐标升级为相对坐标,支持判断物体方位、视角变化和遮挡关系,能实现 3D 定位。
  • 长上下文与长视频理解:全系列模型原生支持 256K token 的上下文长度,可扩展至 100 万 token。模型能完整输入、全程记忆、精准检索,支持视频精确定位到秒级别。
  • 多模态推理与思考:Thinking 模型重点优化 STEM 和数学推理能力。面对专业学科问题,模型能捕捉细节、分析因果,给出有逻辑、有依据的答案。
  • 全面升级的视觉感知与识别:Qwen3-VL 能识别更丰富的对象类别,从名人、动漫角色、商品、地标到动植物等,满足日常生活和专业领域的“万物识别”需求。
  • 多语言 OCR 与复杂场景识别:OCR 支持的语言种类从 10 种扩展到 32 种,覆盖更多国家和地区。在复杂光线、模糊、倾斜等实拍场景下表现稳定,对生僻字、古籍字、专业术语的识别准确率显著提升,超长文档理解和精细结构还原能力进一步增强。

Qwen3-VL的技术原理

  • 多模态融合结合视觉(图像、视频)和语言(文本)模态,通过混合模态预训练,实现视觉和语言的深度融合。

  • 架构设计基于原生动态分辨率设计,结合 MRoPE-Interleave 技术,交错分布时间、高度和宽度信息,提升对长视频的理解能力。引入 DeepStack 技术,融合 ViT 多层次特征,提升视觉细节捕捉能力和图文对齐精度。

  • 视觉特征 token 化将 ViT 不同层的视觉特征进行 token 化,保留从底层到高层的丰富视觉信息,提升视觉理解能力。

  • 时间戳对齐机制基于“时间戳-视频帧”交错输入形式,实现帧级别的时间信息与视觉内容的细粒度对齐,提升视频语义感知和时间定位精度。

Qwen3-VL的项目地址

  • 项目官网:https://qwen.ai/blog?id=99f0335c4ad9ff6153e517418d48535ab6d8afef&from=research.latest-advancements-list
  • GitHub仓库:https://github.com/QwenLM/Qwen3-VL
  • HuggingFace模型库:https://huggingface.co/collections/Qwen/qwen3-vl-68d2a7c1b8a8afce4ebd2dbe
  • 官网体验Qwen Chat

Qwen3-VL的应用场景

  • 自动化办公与任务执行:模型操作电脑和手机界面,自动完成如打开应用、填写表单等任务,提高办公效率。

  • 视觉编程辅助:根据设计图生成网页代码,帮助开发者快速实现前端开发,提升开发效率。

  • 教育与学习辅导:在 STEM 学科问题解答上表现出色,能为学生提供详细的解题思路和答案,辅助学习。

  • 创意内容生成:根据图像或视频内容生成文案、故事等,为创作者提供灵感和素材,助力创意写作。

  • 复杂文档处理:模型能解析长文档和多页文件,提取关键信息,方便用户快速获取所需内容。

📝 站长洞察 (Editor’s Insight)

Qwen3-VL的发布,尤其是其轻量级开源版本的推出,绝非一次简单的产品迭代,而是阿里在‘AI基础设施’层面的一次精准卡位。它揭示了三个关键趋势:第一,‘以小博大’将成为开源模型的标准打法,通过极致的模型压缩与优化,在特定场景下实现对巨无霸模型的反超,这极大激活了边缘侧和私有化部署的生态。第二,视觉语言模型的竞争焦点正从‘单一识别’转向‘复杂任务执行’,如GUI操作与视觉编程,这预示着AI Agent(智能体)的实用化落地将因多模态能力的成熟而大幅加速。第三,中文社区在多模态赛道上已形成全球第一梯队的战斗力,Qwen3-VL在OCR、长视频理解等细分场景的深度优化,直接瞄准了产业级的硬需求。这不仅是技术的胜利,更是生态与战略的胜利。