惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

S
Securelist
C
Cybersecurity and Infrastructure Security Agency CISA
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
S
Security Affairs
Hacker News: Ask HN
Hacker News: Ask HN
L
Lohrmann on Cybersecurity
PCI Perspectives
PCI Perspectives
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
C
Cyber Attacks, Cyber Crime and Cyber Security
Recent Commits to openclaw:main
Recent Commits to openclaw:main
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
MyScale Blog
MyScale Blog
月光博客
月光博客
W
WeLiveSecurity
T
Threat Research - Cisco Blogs
Martin Fowler
Martin Fowler
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
Recorded Future
Recorded Future
The GitHub Blog
The GitHub Blog
Webroot Blog
Webroot Blog
Security Archives - TechRepublic
Security Archives - TechRepublic
TaoSecurity Blog
TaoSecurity Blog
P
Proofpoint News Feed
Google DeepMind News
Google DeepMind News
F
Full Disclosure
U
Unit 42
Jina AI
Jina AI
博客园 - 司徒正美
阮一峰的网络日志
阮一峰的网络日志
L
LINUX DO - 最新话题
宝玉的分享
宝玉的分享
大猫的无限游戏
大猫的无限游戏
The Hacker News
The Hacker News
The Last Watchdog
The Last Watchdog
T
Troy Hunt's Blog
腾讯CDC
T
Threatpost
H
Hacker News: Front Page
P
Palo Alto Networks Blog
博客园 - 聂微东
Last Week in AI
Last Week in AI
有赞技术团队
有赞技术团队
Help Net Security
Help Net Security
L
LINUX DO - 热门话题
N
News and Events Feed by Topic
人人都是产品经理
人人都是产品经理
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
Application and Cybersecurity Blog
Application and Cybersecurity Blog
Spread Privacy
Spread Privacy

博客园_首页

Plist 二进制格式 Milvus 和 PGVector,哪个更好? OpenClaw 已过时?在 VS Code 中运行 Hermes Agent! 第30篇文章:一个大三计科生的自白 Manim如何在数学公式中完美显示中文? Docker 部署 RocketMQ 5 并发编程核心概念辨析 C#事务处理最佳实践:别再让“主表存了、明细丢了”的破事发生 CLI 是什么?为什么大厂突然集体卷命令行? 【从0到1构建一个ClaudeAgent】协作-自主Agent UIImageView 设置图片不生效的原因排查 最小二乘问题详解20:无先验约束下的增量式SFM自由网平差 痞子衡嵌入式:大话双核i.MXRT1180之XIP应用里借助MU实现可靠Flash IAP的方法 AI Chat 封装, SemanticKerne.AiProvider.Unified 已发布 Windows下右键编辑js文件无法打开记事本——在注册表中使用环境变量 在后台服务中使用 Scoped 服务,为什么总是报错? H200 安装驱动并使用sglang启动模型 wireshark 抓包Trap上报告警内容 我用 AI 辅助开发了一系列小工具(2):图片压缩工具 [A Primer On MC and CC] 2.1 Memory Consistency 1 - 指令重排序和 SC 模型 Oracle数据库SCN推进技术详解与实践指南 玩转控件:封装个带图片的Label控件 Claude Code 4.7 真正该升级的不是模型,而是你的工作流 前端小白一句话,AI 帮我做了个颜值拉满的桌面媒体播放器。当代码不再是门槛,一句话编程就是现实。 5. WorkBuddy: 小龙虾的灵魂三件套,让你的小龙虾不只是工具 SQLite 分片方案实战:三种分片策略的深度对比 告别简陋 UI!一款基于 Fluent Design 和基于 WinUI 的开源免费、现代化的 Avalonia UI 控件库 关于二进制排列组合枚举的总结 AI开发-python-LangGraph框架(3-27-LangGraph从零实现大模型智能决策工作流) ElasticSearch主分片和副本分片概念详解 【002】HTTPS 粗解:证书、TLS 握手与对后端配置的影响 Hermes Agent 一周暴涨五万 Star,但我劝你别急着追 明明连接的是Redis的DB0,为什么能查到DB3的数据? 【从0到1构建一个ClaudeAgent】协作-Agent团队 熟悉电子元器件之后,电子小白下一步该怎么走? MAF快速入门(23)通过C#类定义Skills .NET 高级开发 | 手写一个对象映射框架 FastAPI数据库ORM怎么选?我肝了三个Demo后,终于不再纠结了 mysqldump 参数拾遗:在遗忘与铭记之间 C# .NET 周刊|2026年3月5期 Claude code入门 - 陈彦斌 一文学习入门 ThingsBoard 开源物联网平台 GitHub 热门项目 | 2026年04月16日 如何为GIT设置全局勾子,为每次提交追加信息 Number.isFinite和isFinite与isNaN()和Number.isNaN的区别 PortSwigger SQL注入LAB2 推荐一个测试人必备的Skills,从功能到性能全搞定(附详细实操和安装下载方式) 筑基期:掌握Odoo基础核心知识点02(Odoo XML 开发方式详解) GLM模型这么火,咱们用vllm也咧一个呗! 深入理解 AbortController:从底层原理到跨语言设计哲学 字符串学习笔记 多租户系统框架的基础模块设计和分析设计 Apache SeaTunnel Zeta 为什么能做到“又快又稳”? AI开发-python-LangGraph框架(3-26-LangGraph基本概念及第一个简单样例) Vue 3 组件通信,别只会用 Props 和 Emits 了,这几个狠活儿你得看看 ElasticSearch7.X版本配置密码 用Manim实现动态交点计算--从一个动点问题说起 团结引擎+Addressable+Instant Game打包抖音小游戏 function call 实战:让 LLM 自动判断 pod 异常、调用日志工具并完成故障分析 bubseek —— 让 Agent 的足迹,变成团队的洞察 通过 C# 读取并导出 PDF 书签 如何用 GitHub Actions 实现 Steam 自动化发布 【从0到1构建一个ClaudeAgent】并发-后台任务 .NET 高级开发 | 定制 ASP.NET Core 框架 电子小白:什么是运算放大器(运放) zero2Agent:面向大厂面试的 Agent 工程教程,从概念到生产的完整学习路线 堆上的ORW HC32F460 USB CDC通信异常:非对齐访问异常排查 20260413-Hyperbridge 攻击事件:发生在默克尔山上的验证绕过 那些喊着AI 要淘汰你的人,正在靠你的焦虑赚大钱! 深度学习进阶(八)Swin Transformer 最小二乘问题详解19:带先验约束的增量式SFM优化与实现 SnapTranslate 3.0 正式发布:全局划词翻译 + 完整英语学习闭环,一站式搞定查词、记词、复习 工作的意义、工作的困难认知再思考 .NET + AI 进阶实战:基于类的技能开发 - 打造可治理的 Agent 能力模块 【从0到1构建一个ClaudeAgent】规划与协调-技能 上周热点回顾(4.6-4.12) 电子小白的工具三件套:面包板、杜邦线、万能板 单表五亿数据的查询优化 | Mysql、StarRocks 2. WorkBuddy:从“我是谁”到“帮我干活” C# 如何减少代码运行时间:7 个实战技巧 基于HelixToolkit.SharpDX 渲染3D模型 - 笺上知微 从零开始的双臂具身VLA起源及现阶段发展综述 - SkyXZ 记对 xonsh shell 的使用, 脚本编写, 迁移及调优 - pluvium27 受够了Vibe Coding的失控?换个起点,让AI事半功倍 从开始配置漏洞环境到漏洞复现流程 - 難しい 关于10年工作经验的程序员对OpenClaw的实战经验分享以及看法 - 虚无境 Any metadata 的内存布局 C# .NET 周刊|2026年3月2期 - InCerry 我帮你测过了,测试圈排名第二的 Skill 依然很牛逼 Skill Discovery | 无监督技能发现的经典工作总结 - MoonOut 上下文工程是什么?过时了么?一文讲明白! - 一枫说码 开了 TUN 模式还是直连?90% 的人都踩过这个坑 AScript扩展多种脚本语言 - rockey627 AI 学习笔记:Agent 的记忆机制 你能被装进一个文件里吗?——7 万人把同事"蒸馏"成了 AI - 我没有三颗心脏 Claude Code 通关手册(七):给 AI 装上技能包——Skills 完全指南 - 暮色之狐 在浏览器中快速编辑代码:VSCode Web 集成实践 - Newbe36524 蒸馏自己 skill?基于 Deepseek 的蒸馏器,丐版蒸馏方式,简单便捷 - To_Carpe_Diem Spring AI Aliababa和AgentScope,哪个更好? - 苏三说技术
读懂计算机视觉CV、语言感知(ASR/TTS)、多模态,就能理解AI是如何“看到”与“听到”世界的
岳小哥AI · 2026-06-18 · via 博客园_首页

早上通勤,你掏出手机刷脸解锁;进公司,人脸识别门禁自动开门;开完会,钉钉自动生成会议纪要;下午用AI帮你审合同,几秒钟标出了三处风险条款。

这一切,用的是AI同一种能力:感知

感知,是AI认识世界的起点。它不靠眼睛、耳朵和皮肤,靠的是摄像头、麦克风和文字输入,通过一套精密的算法大脑,把外部世界的信息转化为它能理解的语言。

这篇文章,我们就来拆解AI的感知能力:它是怎么"看见"图像的,怎么"听懂"语音的,又是怎么把视觉、声音和文字同时整合在一起理解的。

配图_AI感知世界三大通道_20260527_v1.0


AI是怎么"看见"世界的

人类要感知世界,需要依靠眼睛、耳朵、鼻子、嘴巴、皮肤这些感官器官,将外部世界的信息传递给大脑来识别。

感知,是AI认识世界的第一步。它不靠眼睛、耳朵和皮肤,靠的是摄像头、麦克风和文字输入,通过算法(即"大脑")来理解这些信息,从而实现AI对周围真实世界的感知。

AI的感知能力,按输入信息的形态,可以分为三大方向:

  • 视觉感知(CV):让AI能"看懂"图像和视频;
  • 语言感知(NLP / ASR):让AI能"读懂"文字和"听懂"语音;
  • 多模态感知(Multimodal Perception):让AI同时整合视觉、听觉、文字多种信息来理解世界。

配图_AI感知思考行动三步曲_20260527_v1.0

下面我们逐个展开。

视觉感知

今天AI看图的能力,某种程度上已经超过了大多数普通人。

在ImageNet挑战赛(AI图像识别能力的国际比赛)上,2010年AI的错误率还是28%,到了2017年直接下降到了2.3%。而人类的平均错误率是5%。这意味着,AI看图比人更准

这个能力实现的背后,是卷积神经网络(CNN,Convolutional Neural Network)这一关键技术的突破,通过模仿人类视觉皮层的处理方式,先识别图像边缘和形状,再组合成物体,最后判断"这是什么"。每一层网络只干一件简单的事,层层叠加,就识别出了复杂画面。

配图_CNN层层识别_20260527_v1.0

AI的视觉感知,早已渗透进我们日常生活与工作中。

图像分类(Image Classification)技术,让你在打开手机相册,搜索"猫"时,照片能够自动分类。人脸识别(Face Recognition)技术,让你对着快递柜摄像头刷脸,快递柜就会自动弹开让你取件。OCR(光学字符识别)配合机器翻译,让你出国旅游时,对着路牌拍一张,就能知道是什么意思。目标检测(Object Detection)SLAM同步定位与地图构建技术的结合,让你在用AR导航时,手机屏幕上叠加的箭头能实时跟随你的移动。

政企事业单位中的应用,同样比比皆是。

工厂里,比亚迪2024年宣布,其电池生产线已全面部署AI质检系统,能在0.2秒内发现肉眼难以察觉的划痕和凹陷,准确率99.7%。原来一条生产线需要8个质检员,现在只需2个。

医院里,腾讯觅影AI辅诊系统已在全国超过1000家医院上线,帮助医生分析肺结节、眼底病变、宫颈癌筛查等影像。2025年,国家药监局批准了超过50款AI医疗器械。

道路上,电子眼早已升级为AI眼,不只能记录违章,还能识别车窗遮阳帘、驾驶员打电话、不系安全带等行为。深圳2025年启用的"智慧交警"系统,能实时分析路面车流,动态调整红绿灯时长。

语言感知

比视觉更震撼的,是AI对语言的理解。

AI的语言感知,同样早已融入了我们日常生活与工作中。

你用微信发语音,转文字秒出,这是ASR(自动语音识别)。你打字时输入法给你推荐下一个词,精准得像是读懂了你的心思,这是语言模型预测(LM Prediction)。你把一段英文扔给翻译软件,中文译文流畅自然,这是NMT(神经机器翻译)。你和智能音箱说"帮我定个闹钟",它不仅听懂了,还真的帮你设好了,这是意图识别(Intent Recognition)

配图_语言感知全景_20260527_v1.0

随着AI语言感知核心技术的成熟,尤其是Transformer架构,让AI不再一个词一个词按顺序读,而是能"同时看到"整段话里所有内容,理解词与词之间的关联关系。这一整套技术体系,在AI领域被称为自然语言处理(NLP,Natural Language Processing),是AI感知能力中,最接近"真正理解"语言文字的领域。

基于Transformer架构大语言模型(LLM,Large Language Model),不仅能读懂一段话的含义,甚至理解其中的讽刺、幽默、隐喻,让这些曾经被认为是人类独有的语言理解能力,都已经在AI身上实现。AI不只是在"识别字词",还能"理解语义"。

你给AI一段合同,它能告诉你哪几条对你不利。幂律智能、秘塔科技等法律AI公司,用AI帮企业审查合同,效率提升80%以上。你给AI一段用户投诉,它能帮你分析用户的诉求到底是什么。京东的客服AI每天处理超过1000万条用户反馈,自动归类问题类型、识别用户情绪。你给AI一段代码报错,它能帮你定位问题出在哪。通义灵码、腾讯云CodeBuddy每天都在帮程序员Debug。

而这一块,也早已经是中美两国二分天下,国产大模型已经全面崛起。

2026年,字节豆包月活突破4.4亿,稳坐国内AI应用头把交椅。阿里通义千问Qwen3开源模型超300个,全球下载量破6亿次,衍生模型逾17万个,编程任务SWE-bench成功率高达70%。百度文心一言2025年发布4.0 Turbo版本,中文理解能力持续领先。智谱AI于2026年1月8日登陆香港联交所,市值528亿港元,成为"全球通用AI基座模型第一股",其GLM-4.7开源模型实测90%场景一次通过,成本仅为Claude的七分之一。

多模态感知

最新一代的AI,已经能够做到同时"看"图、"听"声音、"读"文字,把不同感知通道的信息整合起来理解。

配图_多模态文字图片声音对齐_20260527_v1.0

实现这一能力的是跨模态对齐(Cross-modal Alignment)这一核心技术。它让AI理解"一张猫的图片"和"猫"这个字在意义上是对应的,让文字、图片、声音在同一个语义空间里"对齐"。

这一项技术,早已出现在我们日常生活与工作中,以下是几个典型的场景:

美团大众点评的"AI相机",你拍一张菜单发给它,它不仅能认出上面写了什么,还能理解这道菜是什么风格、大概什么口味,帮你找到附近最推荐的同类餐厅。图像识别+信息检索的技术结合,让你扫一扫商品条形码,手机立刻弹出比价信息和用户评价。钉钉"AI会议纪要"2025年已服务超过3000万场会议,让你可以把会议录音丢给AI,让它帮你整理出逐字稿、摘要与待办事项。阿里巴巴的"通义万相"和百度的"一镜流影",在你给AI一张产品设计图后,就能自动生成营销文案、产品说明、甚至PPT,实现"一张图生成全套物料"的能力。


和你有什么关系?

了解了AI的感知能力,你的日常工作会变得轻松很多。

哪些感知类任务可以交给AI?看图识字、扫描录入、OCR批量处理,这些以前要花几小时手动录入的工作,现在丢给AI几秒完成;语音转文字、会议录音整理、口述内容转书面稿,让AI帮你把所有"听到的"变成"写下来的";产品图片识别、发票识别、报表识别,让AI帮你把"图片里的数据"提取出来;用户意图分析、投诉分类、反馈归类,让AI帮你把"大量零散的声音"整理成结构化结论。

人类在感知层面的不可替代是什么?你知道该让AI"看"什么、"听"什么、关注什么,方向判断永远在人这边;AI能识别出合同里的每一个条款,但哪条真正对你有风险、优先级是什么,需要人来判断;AI能转写出会议里说的每一个字,但说话人的真实意图、没说出来的那层意思,依然需要人来揣摩。

你的定位:感知任务交给AI,但感知的目的由你来定。AI负责高效接收信息,你负责决定接收什么、关注什么、对结果做出判断。

感知,是AI理解世界的起点,也是它能做几乎所有事情的前提。

从看图识物到听音识义,从单一通道到多模态融合,AI正在用越来越接近人类的方式感知这个世界,并悄悄渗透进了我们日常工作与生活的每一个角落。

你以为你在用工具,其实你已经在和一个"感知世界"的AI协作了。

而感知只是第一步。AI"看见"了世界之后,它是怎么"思考"的?