惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

F
Fortinet All Blogs
Recent Announcements
Recent Announcements
H
Help Net Security
Y
Y Combinator Blog
酷 壳 – CoolShell
酷 壳 – CoolShell
有赞技术团队
有赞技术团队
小众软件
小众软件
Last Week in AI
Last Week in AI
U
Unit 42
Google DeepMind News
Google DeepMind News
博客园 - 司徒正美
H
Hackread – Cybersecurity News, Data Breaches, AI and More
J
Java Code Geeks
Microsoft Security Blog
Microsoft Security Blog
G
Google Developers Blog
N
Netflix TechBlog - Medium
Blog — PlanetScale
Blog — PlanetScale
云风的 BLOG
云风的 BLOG
V
V2EX
博客园 - 聂微东
人人都是产品经理
人人都是产品经理
博客园 - 三生石上(FineUI控件)
阮一峰的网络日志
阮一峰的网络日志
爱范儿
爱范儿

Prompt 语宙

kimi-thinking-preview – 月之暗面推出的多模态思考模型 pdf-craft – 开源 PDF 转 Markdown 工具 UltraMem – 字节豆包大模型团队推出的全新超稀疏模型架构 EasyControl – Tiamat AI 联合上海科大等开源的图像生成控制框架 GaussianCity – 南洋理工大学 S-Lab 团队推出的 3D 城市生成框架 X-Prompt – 用于多模态视频目标分割的通用框架 豆包大模型1.5 – 字节跳动推出的最新版大模型 GaussianAnything – 南洋理工 S-Lab 和上海 AI Lab 等推出的 3D 生成框架 Cube 3D – Roblox 推出的 AI 3D 生成模型 OpenMath-Nemotron – 英伟达开源的数学推理系列模型 MAI Transcribe-1.5 – 微软 MAI 推出的语音转文本模型 Seed1.5-Embedding – 字节跳动 Seed 团队推出的向量模型 2026世界杯人机大战引爆!联想携手DeepSeek等顶尖AI大模型,对战亿万球迷预测冠军 高考公平守护战!豆包、文心等主流大模型集体禁用拍题功能 ShotAdapter – Adobe联合UIUC推出的多镜头视频生成框架 Devstral – Mistral AI联合All Hands AI开源的编程专用AI模型 MMaDA – 字节联合普林斯顿大学等推出的多模态扩散模型 Software Copyright Materials Skill – 开源软著资料生成Skill Dulus – 开源的 CLI AI Agent,可驱动多模型工具调用 Reasonix – 专为 DeepSeek 推出的开源终端编程 Agent Mega-ASR – NTU、NUS、上海AI Lab开源的语音识别模型 CodeGraph – 开源代码知识图谱工具,加速代码理解和分析 MiniCPM5-1B – 面壁智能联合清华开源的端侧文本基座模型 Horizon – 开源 AI 信息聚合系统,构建专属新闻雷达 BitCPM-CANN – 面壁智能联合清华开源的端侧大模型 Xiaomi Auto World Model – 小米推出的辅助驾驶世界模型 opera-browser-cli – Opera Neon 开源的命令行工具 omp – 开源的 AI 终端编程智能体,能与 IDE 深度联动 Claude Opus 4.8 – Anthropic 推出的旗舰级大语言模型 Hy-Memory – 腾讯混元推出的 Agent 记忆插件
DeepMind推出CoF:视频模型的‘思维链’,让AI像人一样逐帧思考...
站外新闻 · 2026-06-20 · via Prompt 语宙

💡 站外导读:在AI从语言迈向视觉的进程中,视频模型如何像人一样进行逻辑推理和规划,一直是行业核心痛点。传统视频生成模型擅长模仿,但缺乏‘思考’能力,难以处理需要多步规划的复杂任务。DeepMind最新提出的CoF(帧链)技术,借鉴了语言模型中的链式思维,通过逐帧生成视频来实现视觉推理,为视频AI注入了真正的‘思考’能力,标志着视觉通用人工智能(VGAI)的重要探索。

CoF(Chain-of-Frames,帧链)是DeepMind推出的新概念,类比于语言模型中的“链式思维”(Chain-of-Thought,CoT)。CoF使视频模型能在时间和空间上进行推理,通过逐帧生成视频解决复杂的视觉任务。例如,Veo 3模型用CoF解决迷宫问题、完成对称性任务或进行简单的视觉类比推理,能力类似于语言模型通过符号推理解决问题,CoF是通过生成连贯的视频帧实现视觉推理,展示了视频模型在通用视觉理解方面的潜力。

  • CoF是什么
  • CoF的主要功能
  • CoF的技术原理
  • CoF的项目地址
  • CoF的应用场景
      • 📝 站长洞察 (Editor’s Insight)

CoF

CoF的主要功能

  • 视觉推理:通过逐帧生成视频,CoF能逐步解决问题,例如在迷宫中找到路径、完成对称性任务或进行视觉类比推理。

  • 跨时空操作:对视频中的对象进行操作,例如移动、变形或改变对象的属性,同时保持视频的连贯性。

  • 通用视觉理解:CoF帮助视频模型理解物理规则、抽象关系及视觉世界的动态变化,实现通用视觉任务的零样本学习。

  • 生成连贯视频:CoF确保生成的视频在时间和空间上是连贯的,使模型能生成符合逻辑和物理规则的视频内容。

CoF的技术原理

  • 生成模型:CoF依赖大规模的生成模型,模型通过海量数据进行训练,学习视频的时空结构和动态变化。

  • 提示驱动:通过自然语言提示(prompt)和初始图像,模型被引导生成符合任务要求的视频。提示帮助模型理解任务目标,初始图像提供视频的第一帧。

  • 逐帧推理:模型逐帧生成视频,每一步都基于前一帧的状态和提示进行推理。逐帧生成的方式类似于语言模型中的链式思维(CoT)。

  • 物理和逻辑约束:CoF生成的视频需要符合物理规则和逻辑一致性。例如,物体的运动需要符合物理定律,视频中的对象不能违反现实世界的约束。

  • 优化和反馈:通过多次尝试和优化,模型能生成更准确的视频。例如,通过多次生成、选择最优结果,提高任务的成功率。

CoF的项目地址

  • 技术论文:https://papers-pdfs.assets.alphaxiv.org/2509.20328v1.pdf

CoF的应用场景

  • 迷宫求解:CoF能生成视频,展示一个物体如何在迷宫中找到从起点到终点的路径,逐帧规划最优路线。
  • 视觉对称性任务:CoF能生成对称的图案或图像,通过逐帧填充空白部分,完成对称图形的绘制。
  • 物理模拟:模拟物理现象,如物体的运动、碰撞和浮力等,生成符合物理规律的视频。
  • 图像编辑:用在图像编辑任务,例如背景移除、风格转换、颜色化等,通过逐帧生成视频逐步完成编辑。
  • 视觉类比:解决视觉类比问题,例如生成缺失的部分完成一个视觉类比,通过逐帧推理找到正确的解决方案。

📝 站长洞察 (Editor’s Insight)

CoF的发布远不止一项新功能,它揭示了多模态AI演进的关键范式转移:推理能力正从语言域向视觉域迁徙。DeepMind巧妙地将已被验证的‘链式思维’(CoT)范式视频化、帧化,让视频模型从单纯的‘预测下一帧’升级为‘规划下一帧’。这解决了视觉AI的‘黑箱’难题,使其推理过程变得可观察、可调试。尽管目前仍处于概念验证阶段,但其展现的物理模拟与零样本学习能力,预示着未来在具身智能、自动驾驶模拟、乃至影视特效制作中的颠覆性应用。行业应密切关注这一路线,它可能比单纯的视频生成更具长期价值,是迈向通用视觉智能的务实一步。