惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

N
News and Events Feed by Topic
S
Security @ Cisco Blogs
S
Secure Thoughts
Attack and Defense Labs
Attack and Defense Labs
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
Hacker News - Newest:
Hacker News - Newest: "LLM"
Recent Commits to openclaw:main
Recent Commits to openclaw:main
H
Hacker News: Front Page
博客园 - 叶小钗
H
Heimdal Security Blog
Microsoft Security Blog
Microsoft Security Blog
Forbes - Security
Forbes - Security
AI
AI
cs.CV updates on arXiv.org
cs.CV updates on arXiv.org
T
Troy Hunt's Blog
罗磊的独立博客
Application and Cybersecurity Blog
Application and Cybersecurity Blog
爱范儿
爱范儿
GbyAI
GbyAI
The Last Watchdog
The Last Watchdog
TaoSecurity Blog
TaoSecurity Blog
C
CXSECURITY Database RSS Feed - CXSecurity.com
D
DataBreaches.Net
Recent Announcements
Recent Announcements
Schneier on Security
Schneier on Security
C
Cisco Blogs
美团技术团队
D
Docker
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
WordPress大学
WordPress大学
月光博客
月光博客
雷峰网
雷峰网
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
H
Hackread – Cybersecurity News, Data Breaches, AI and More
A
Arctic Wolf
B
Blog RSS Feed
Cisco Talos Blog
Cisco Talos Blog
C
Cybersecurity and Infrastructure Security Agency CISA
V
Vulnerabilities – Threatpost
V2EX - 技术
V2EX - 技术
Y
Y Combinator Blog
N
News and Events Feed by Topic
www.infosecurity-magazine.com
www.infosecurity-magazine.com
W
WeLiveSecurity
Security Archives - TechRepublic
Security Archives - TechRepublic
G
GRAHAM CLULEY
Jina AI
Jina AI
Hugging Face - Blog
Hugging Face - Blog
酷 壳 – CoolShell
酷 壳 – CoolShell
The Hacker News
The Hacker News

人人都是产品经理

为什么你的产品找不到差异化?90%的失败都卡在第一步上(下) – 人人都是产品经理, 3年从30万到1300万用户、获2200万美元融资,这个AI教育产品用“抽卡”破解了获客难题 – 人人都是产品经理, 园区招商系统怎么做才能真正帮到去化?我加了这一个功能,推广链接转发400次阅读过万 – 人人都是产品经理, AI大事件:OpenAI发完网络安全模型又搞药物研发,小鹏汽车要抓”DeepSeek时刻” – 人人都是产品经理, 电商不是卖货,是一场更残酷的产品经理实战 – 人人都是产品经理, 没想到,活动营销又回来了! – 人人都是产品经理, 为何All-in海外KOC:一场关于AI时代窗口期的豪赌 – 人人都是产品经理, 重新理解企业的内部协作 – 人人都是产品经理, 苹果的 AI 战略到底是什么? – 人人都是产品经理, 医疗智能体·第2讲——合规护城河:等保、PIPL与HIPAA的架构实战 – 人人都是产品经理, 向量知识库五步法:从“答非所问”到“精准回复” – 人人都是产品经理, 鸿蒙PC三方库构建总指挥HPKBUILD(sha)库为例 – 人人都是产品经理, 何时该用LLM?AI产品经理的LLM设计指南 – 人人都是产品经理, 医疗信息领域的需求方、决策方、准入方以及关注点(二) – 人人都是产品经理, 即梦涨价:一场被误读的「傲慢」 – 人人都是产品经理, 面试AI PM必答题:Hermes和OpenClaw的区别,如何讲清楚业务价值 – 人人都是产品经理, AI的下一张船票:世界模型——AI产品经理必须理解的技术拐点 – 人人都是产品经理, 小红书做GEO,怎么让AI信你?记住这 3 个重要信息 – 人人都是产品经理, 5 家印度 AI 初创公司,看看印度 AI 再做什么 – 人人都是产品经理, AI项目跨团队协作:产品技术业务如何不打架 – 人人都是产品经理, Agentic Workflow(智能体工作流):让AI从”答案生成器”变成”数字员工” – 人人都是产品经理, lycium_plusplus 项目全景解读:OpenHarmony 三方库构建的“大管家” – 人人都是产品经理, 从爆单救火到前置履约:两套预采策略,把生鲜大促履约效率拉满 – 人人都是产品经理, 什么时候该补货?我用一轮数据做了一个决定 – 人人都是产品经理, 从“机械兜底”到“动态分流”:AI客服重复进线治理的4大底层逻辑 – 人人都是产品经理, 抖音拼效率,红书拼洞察 – 人人都是产品经理, 全民狂欢与退潮——为什么龙虾这波热潮冷却得如此之快? – 人人都是产品经理, Stripe押注!MPP重塑全球支付 – 人人都是产品经理, 小红书GEO:AI引用你的内容,不是因为你对,而是因为你看起来可信 – 人人都是产品经理, 前百度副总裁押注办公Agent,日韩付费爆发,Manus迎来强劲对手 – 人人都是产品经理, 企事业单位数字化的业务供需本质 – 人人都是产品经理, 医疗智能体·第1讲——医疗信息化重构:从“辅助软件”到“自主智能体”的范式转移 – 人人都是产品经理, 粉丝量就是空气!!! – 人人都是产品经理, 用户说“薯片碎了”,机器回“要买吗?”:意图识别的翻车与破局 – 人人都是产品经理, RAG召回准确率从75到90 我做对了这三件事 – 人人都是产品经理, AI大事件:Anthropic改收费、OpenAI发安全版、手术机器人纳入医保、阿里发布”秒悟” – 人人都是产品经理, Chrome 推出 Skills 新功能,Agent 重塑上网方式 – 人人都是产品经理, GitHub前创始人拿了a16z的1700万美元,做Agent时代的Git – 人人都是产品经理 拷贝或克隆其他 Flutter OH 项目到本地后无法运行 – 人人都是产品经理, 优惠券设计:优惠券创建 – 人人都是产品经理, 不用死磕文档!AI 助手 1 小时搞定飞书 CLI 安装 + 配置 + 知识库 – 人人都是产品经理, 用小龙虾做竞品分析报告:从2天到20分钟,我是怎么做到的 – 人人都是产品经理 用小龙虾做市场分析报告:搞懂这3个公式,市场规模不再靠猜 – 人人都是产品经理, 你早就在做 Harness 工程,只是不知道它叫这个名字 – 人人都是产品经理, Think Long就够?你可能想多了! – 人人都是产品经理, 货代SRM实战:供应商准入怎么做,才能让资源池不是通讯录而是可交付网络? – 人人都是产品经理, 如何做好用户调研?详解基本技巧 – 人人都是产品经理, 木鸟、途家、美团对打,平台春天行动开“卷” – 人人都是产品经理, 入职才发现公司不靠谱?小红书从业者求职避坑指南 – 人人都是产品经理, 美国 AI 三巨头联手封堵,中国 AI 突围之路在何方 – 人人都是产品经理, 小红书,放在需求对面的镜子 – 人人都是产品经理, AI 会带来大规模失业吗? – 人人都是产品经理, 从出单到补货前,我第一次犹豫:该不该放大? – 人人都是产品经理, Flutter 三方库鸿蒙化适配:5 种高效检查方式,快速判断是否需要适配 – 人人都是产品经理, 从做产品进阶拿结果:医美机构产品经理转岗科室运营经理 – 人人都是产品经理, 阿里HappyHorse,一场关于“Token经济”的阳谋 – 人人都是产品经理, To B AI:客户留存落地的观察与思考 – 人人都是产品经理, AI产品的“生命线”——数据采集、标注、清洗的产品化设计 – 人人都是产品经理, 谈谈AI Agent(二):当“孩子”能自己“体验世界”时,你该学什么? – 人人都是产品经理, UI/UX设计师的3层能力进阶,前两层让你活下来,第三层…才是真正的分水岭 – 人人都是产品经理, 2分钟 → 30秒,效率提升75%:B端产品经理如何用「规则枷锁」驯服AI幻觉? – 人人都是产品经理, 还没来得及学OpenClaw,来了个更猛的:Hermes Agent – 人人都是产品经理, AI日报:宇树机器人跑出10m/s刷新世界纪录 – 人人都是产品经理, 一文说透基金互金如何用情绪价值引导用户决策做转化 – 人人都是产品经理, 当浏览器开始替你”看”网页:AI 浏览器正在亲手拆掉它脚下的那张网 – 人人都是产品经理, 0代码,一天时间我Vibe Coding了个网站 – 人人都是产品经理, Hermes 和 OpenClaw 之争,Agent 的能力应该“装上去”还是“长出来”? – 人人都是产品经理 视频生成的“桌子”,字节Seedance 2掀完,阿里快乐马掀 – 人人都是产品经理, 从听不懂到完全信任:我的 Codex 深度产品体验 – 人人都是产品经理, 当虚拟偶像有了北京户口,与真人偶像还有什么区别? – 人人都是产品经理, 会说,远远比会做更重要 —— 对 SBTI 爆火现象的五层观察 – 人人都是产品经理, AI产品经理必看:当“搭环境”比“选模型”更重要,你的认知还在2024年吗? – 人人都是产品经理, 2026年AI产品商业化核心逻辑:从功能demo到规模化营收的3个必破卡点 – 人人都是产品经理, 京东围绕供应链,卷起裤腿下场的那些事儿 – 人人都是产品经理, SBTI一夜刷屏:它赢在了“太会说人话” – 人人都是产品经理, 折扣零售的真相:不是便宜,而是价值感! – 人人都是产品经理, 和甲方吵了一架,最后加钱做了——我学到的ToB产品经理生存法则 – 人人都是产品经理, 和几位小红书操盘手聊了8小时,干货全在这 – 人人都是产品经理, 智谱GLM-5.1登场,开源模型首超Opus4.6!!! – 人人都是产品经理 Anthropic收入凭什么反超OpenAI,终于有人把这事说清楚了 – 人人都是产品经理, 史上最有故事感的技术报告——Claude最强模型Mythos 7个极其精彩的细节 – 人人都是产品经理, 模型不是壁垒,Harness 也不是 – 人人都是产品经理, 抖音本地生活业务思考21 – 人人都是产品经理, Superpowers:145k Star的AI编码框架,到底是什么来头? Superpowers:145k Star的AI编码框架,到底是什么来头? – 人人都是产品经理, OpenAI 的路走错了,Anthropic Harness 解法启示:模型需要实践专科生 – 人人都是产品经理, 画原型图的前一步:设计站点地图 – 人人都是产品经理, 给 DeepSeek 的最后一封催更信 – 人人都是产品经理, 手把手教你用 Claude Code 搭建 AI 营销团队:5 个 Agent、12 项技能,独立完成研究、写作、设计全流程 – 人人都是产品经理, 你以为大模型在学语言?不,它在重新发明语言学 – 人人都是产品经理 所谓Skill,不过是AI时代的工业垃圾 – 人人都是产品经理, 聊一聊内容传播的几个方法 – 人人都是产品经理, 当平台开始吃掉生态:从 OpenClaw 被封杀,读懂 Anthropic 的这盘棋 – 人人都是产品经理, 你装了 10 个 AI 插件,Obsidian 还是一个文件夹 – 人人都是产品经理 关于AI智能体架构演进的系统性思考:从单体试水到多体协同的重构 – 人人都是产品经理, 当“人”变成Skill,我们又该何去何从? – 人人都是产品经理 Mythos 事件:前沿 AI 治理的意外实验 – 人人都是产品经理, 货代CRM:信用与风险管理怎么做,才能把坏账风险拦在放货之前? – 人人都是产品经理, 从HR收集自拍照到员工自助录入——我见证了园区人脸识别从”不可用”到”真好用”的全过程 – 人人都是产品经理 千问闯关AI混沌期:阿里画靶,吴嘉张弓,马云射箭? – 人人都是产品经理,
深度学习模型——CNN | 卷积神经网络
AI思·享@蓉77 · 2024-04-15 · via 人人都是产品经理

CNN,即一种专门用于处理具有类似网格结构数据的深度学习模型。怎么理解CNN的全流程?这篇文章里,作者对CNN的模型结构和每一层的具体步骤等内容做了详细解读,一起来看。

一、定义

Convolutional Neural Networks /ˌkɒnvəˈluːʃən(ə)l/ /ˈnjʊərəl/

是一种专门用于处理具有类似网格结构数据的深度学习模型 。

二、CNN模型结构

接下来我们通过一个情境来理解CNN的全流程:

假设我们现在有一款智能鉴定APP,主要进行艺术品鉴定。我们要通过APP判断其中一张图片是不是古董,现在我们来了解下APP是怎么工作的吧。

输入层:

用户上传了一张古董瓷瓶照片,这张照片就是进入CNN系统的”原材料”,输入层的作用就是接收这张图片数据,并将其转换为CNN神经网络可以理解的数字形式(通常是一个三维数组,即宽度、高度、颜色通道数)。

卷积层:

鉴定师们开始工作了,他们每人手持一把放大镜(卷积核),在瓷瓶照片上移动并聚焦(卷积运算),这些放大镜专门用来搜寻特定的纹饰、釉色或工艺特征(特征提取),每位鉴定师记录下各自发现的特征(注:在这里一位鉴定师只会去找一个特征),并且每人会生成一份详细的特征报告(卷积后特征图)。

激活函数:

每份特征报告完成后,都交由魔法学徒(激活函数)进行神秘加工。他们使用魔法药水(ReLU、Sigmoid等),对报告内容进行强化(正值保持或增大)或弱化(负值转为0或压缩到一定范围内),确保突出关键特征,隐藏无关或干扰信息。

池化层:

接下来,公司经理(池化层)审查这些经过魔法加工的特征报告。他们不需要关注每个细节,而是提取每个报告的核心摘要(如最大特征或平均特征值),这样既能减少冗余信息,又能确保关键特征得以保留,便于后续的全局分析。

全连接层:

到了决策阶段,所有精炼的特征摘要被送到公司高层(全连接层),高层领导们围坐一桌,每人面前都有一份长长的清单,上面列着所有可能影响鉴定结果的因素及其权重(神经元及其连接权重)。他们根据清单讨论、打分(加权求和),共同得出初步的鉴定结论(分类概率或回归值)。

比喻解释:

全连接层就像公司的高层领导团队,他们依据精炼的特征摘要,参考各自的判断清单,集体讨论并给出初步的鉴定意见。

激活函数(再次):

初步鉴定结论出炉后,还需要最后一道魔法加持(激活函数)。这次魔法学徒用另一种魔法药水(如Softmax或Sigmoid等),确保鉴定结论符合预期格式(如概率分布),并具有良好的区分度。

比喻解释:

再次使用的激活函数如同魔法学徒为鉴定结论施加的最后的魔法,确保结论既符合规范(概率分布),又具有明确的倾向性(区分度),便于用户理解。

输出层:

经过多重鉴定与魔法加工,最终的鉴定结果出炉。APP将结果显示给用户,告诉他们这张瓷瓶照片是真品的概率为90%,赝品的概率为10%,用户据此做出是否购买的决定

这个过程形象地展示了CNN如何通过层层处理,将原始图像转化为可供决策的分类或回归结果。

其中上面括号加粗内容,大家可以先有个印象,下文会对部分内容做出讲解。

其中我们发现激活函数会出现在多个位置,那到底正常应该放置在什么位置?怎么选择呢?

激活函数严格来说可以放在任何地方,但我们一般是将其放到卷积层和全连接层后,因为放到其它层一般意义不到;

如果放到池化层之后可以吗?为什么不建议?

可以放到池化层之后,不建议是因为根据上图结构我们看到池化层本身的功能就是降维和特征提取了,所以再增加非线性变换已经意义不大了。

暂时来说激活函数放置位置选择没有什么技巧,主要参考大神们发表的一些论文,跟着论文上做选择即可。

三、每一层具体步骤

1. 卷积层

1)准备输入数据:一张彩色图片

最终将彩色图片转换为CNN可以理解的数字形式,一般是三维数组(维度:长、宽、颜色)。

下图是一个三维数组展开的平面图, 5*5*3:5*5代表长宽;3代表R、G、B三个通道。

2)定义卷积核(滤波器)

设置滤波器大小:即滤波器的长宽,常见的大小有3*3、5*5。

设置步长:即滤波器在输入数据上滑动的间隔。

设置填充(Padding):即在输入数据的边界添加额外的零值像素的过程;目的:解决边界卷积造成的图像信息丢失情况。

设置选择卷积类型:类型包括标准卷积、转置卷积(用于上采样)、空洞卷积(用于扩大感受野)。

选择初始化方法:目的设置权重和偏置项 ;包括零初始化、随机初始化、Xavler初始化和He初始化。

考虑使用的卷积函数:一般用在卷积操作之后。

3)卷积操作

详细解释一下通过滤波器W0,和偏置项h0, 怎么卷积出最终结果1的。

R(0*1+0*1+0*-1)+ (0*-1+0*0+1*1)+ (0*-1+0*-1+1*0) = 1

G(0*-1+0*0+0*-1)+ (0*0+1*0+1*-1)+ (0*1+0*-1+2*0) = -1

B (0*0+0*1+0*0)+ (0*1+2*0+0*1)+ (0*0+0*-1+0*1) = 0

最终结果R(红色通道)+G(绿色通道)+B(蓝色通道)+b0(偏置项) 即 1 + (-1) + 0 + 1 = 1

4)滑动卷积核(滤波器)

根据步长为2,滑动卷积核,计算出其它值,计算方式同步骤3。

5)生成卷积特征图

生成特征图:通常指的是卷积操作完成后得到的最终结果矩阵。

6)应用激活函数

目的:在神经网络的层与层之间引入非线性,以便网络能够学习和表示复杂的函数。

常见的激活函数:ReLU、Sigmold、Tanh。

使用激活函数,对每个神经元(即每个输入矩阵中的值)应用非线性变换。

激活函数一般的位置:卷积层后、全连接层后。

2. 池化层

1)定义池化窗口

池化窗口 也称池化核,是一个小的矩形区域,用于从输入特征图中提取信息,一般是2*2 或 3*3。

2)选择池化操作

可选的池化操作有:最大池化和平均池化。

3)应用池化操作

输入特征图:指的是上一层卷积层生成的卷积特征图。

4)滑动池化窗口

池化窗口按照指定的步长在输入特征图上移动。

5)生成池化特征图

下图中给出了2种池化方法后的示意图;图b为最大池化,图c为平均池化。

6)将池化特征图传入下一层

下一层可能是卷积层,也可能是全连接层;可以看最开始 原理结构图。

下一层的输入矩阵:是池化后的特征图。

如果下一层是卷积层,它与第一次卷积的区别是什么?

  1. 输入数据不一致:第二次输入矩阵是第一次池化后的特征图矩阵。
  2. 卷积核不一致:主要是指卷积核权重不一致。

然后在依次按照卷积层、池化层的步骤进行卷积/池化操作。

2. 全连接层 | FC

1)接收特征图

输入矩阵:是所有池化后/或经过激活函数处理后的特征图,是一个多维向量。

维度有:

  • batch_size:批次大小
  • heigh:特征图的高度
  • width:特征图的宽度
  • channels:特征通道数量

2)展平特征图

目的:将多维特征图展平为一维特征图。

实现方式:将特征图中的每个通道”展开成一个长向量”,并将所有通道的向量连接在一起形成一个大的一维向量。

展平后的向量长度是 batch_size * height * width * channels

3)权重分配

全连接层中的每一个神经元(即一维向量中的每一个值),都与输入矩阵中的每个元素相连,并且每个连接都有一个对应的权重,这些权重构成了权重矩阵,反应了神经元对输入特征的重视程度。此外,每个神经元还有一个偏置项(Bias),用于调整器整体响应水平。

4)线性变换

对输入向量进行线性变换。

公式如下:

W:权重矩阵;x:输入向量;b:偏置向量

通过这个公式,我们对输入向量做线性变换,得到每个神经元的净输入(即得到全连接层的最终输出结果)。

5)激活函数应用(再次)

通过在次使用激活函数,进行最终的处理,可能结果保持不变(如ReLU的正区间),或将结果压缩到某个范围内(如Sigmoid、Tanh),确保输出符合规范,又具有明确的倾向性。

6)输出结果

是对输入数据的最终响应。在回归任务中,输出是一个连续值,表示预测的目标值。

四、相关概念

持续补充中……………

Padding

根据上面卷积过程,我们发现,卷积操作时会遇到在图像边界卷积造成图像信息丢失的问题,Padding操作的目的是为了解决此问题而提出的。

图像信息丢失? 比如我们在卷积计算时会 对应像素值*权重 ,此时如果权重为0就会造成实际像素值信息丢失情况。

实现Padding方法:

Same Padding:根据卷积核的大小,对输入图像矩阵进行边界补充(一般填充零值),使得卷积后得到的特征矩阵与输入矩阵大小一致。

Valid Padding:不需要进行padding操作。

自定义padding:使用公式计算得出,如下。

其中inputh 指 输入矩阵长度;kernelh 指卷积核长度;stride:卷积操作步长;outputh : 指卷积后矩阵的长度。

五、其它

1. 使用场景

图像识别(人脸识别、物体识别)、计算机视觉(包括自动驾驶、医疗影像分析)、自然语言处理(用于文本分类、情感分析等)、视频分析(如行为识别、视频内容理解等)、图像生成(如风格迁移、图像超分辨率等)。

一般主要用于图像处理?

通过以下三点可以确认更适合用于图片处理:

  1. 局部特征提取,降低了识别难度。
  2. 可应用于不同的图像识别任务,权重公用;比如 经过训练已经可识别出小狗,那这些神经元也可以应用于识别其它任何图像中的相似物体。
  3. 虽特征维度降低,但是保留了主要特征,这样做不仅不影响图像识别,反而减少了其它像素影响和处理的数据量。

2. 优点

  1. 特征提取能力强。
  2. 有效降维(将大数据量的图像降维成小数据量,同时保留关键特征)。
  3. 减少参数数量(通过共享权重,减少了模型的参数数量,提供了训练效率)。

3. 缺点

  1. 只能识别独立事件。
  2. 过拟合分险(如果没有足够的数据或者正则化措施,CNN可能会过拟合训练数据)。
  3. 解释性差。
  4. 计算量大,尤其在高分辨率图像上。
  5. 参数多(尽管通过共享权重减少了参数量,但是CNN仍需要大量的参数来学习复杂的特征)。

本文由 @Luna 原创发布于人人都是产品经理。未经作者许可,禁止转载。

题图来自Unsplash,基于CC0协议。

该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务。