惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
量子位
M
MIT News - Artificial intelligence
Y
Y Combinator Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
Google DeepMind News
Google DeepMind News
Hugging Face - Blog
Hugging Face - Blog
博客园_首页
雷峰网
雷峰网
I
InfoQ
罗磊的独立博客
博客园 - 聂微东
酷 壳 – CoolShell
酷 壳 – CoolShell
大猫的无限游戏
大猫的无限游戏
D
Docker
H
Hackread – Cybersecurity News, Data Breaches, AI and More
腾讯CDC
博客园 - 三生石上(FineUI控件)
The GitHub Blog
The GitHub Blog
K
Kaspersky official blog
P
Privacy & Cybersecurity Law Blog
S
SegmentFault 最新的问题
T
Threat Research - Cisco Blogs
H
Help Net Security
小众软件
小众软件
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
C
CERT Recently Published Vulnerability Notes
WordPress大学
WordPress大学
T
Tenable Blog
T
The Blog of Author Tim Ferriss
C
Cisco Blogs
Simon Willison's Weblog
Simon Willison's Weblog
博客园 - Franky
A
Arctic Wolf
T
Threatpost
Scott Helme
Scott Helme
C
Cybersecurity and Infrastructure Security Agency CISA
D
Darknet – Hacking Tools, Hacker News & Cyber Security
T
The Exploit Database - CXSecurity.com
G
GRAHAM CLULEY
Security Latest
Security Latest
Spread Privacy
Spread Privacy
L
LINUX DO - 热门话题
V
Vulnerabilities – Threatpost
P
Privacy International News Feed
S
Schneier on Security
Latest news
Latest news
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
C
Cyber Attacks, Cyber Crime and Cyber Security
C
CXSECURITY Database RSS Feed - CXSecurity.com

V2EX

我用 AI 写代码,但终端管理反而成了累赘——于是我做了 codux - V2EX [调研] 各位在公司都用什么 ide 和 agent 写代码? 老运维 share 一个运维平台 新电脑 brew install node 之后,一个小设置可以提升对供应链投毒的防御 - V2EX GLM-Coding 调用持续报错: z.ai 的 Lite 套餐几乎无法使用,官方 Pro/Max 是否稳定? - V2EX 上海漕河泾内推,本组有 2 个 hc,一个后端,一个前端,预算都是 20k 左右,不打卡,氛围好 如果 V2EX 上有一组不永久保存聊天记录(比如只保存 7 天或者 24 小时)的聊天室,那么会开启哪些有用或者有趣的可能? - V2EX gemini cli 貌似挂了,一直返回 403 - V2EX 第一次在自媒体上赚到钱 收集了最近在使用的低价 GPT, Gemini,邮箱等 AI 会员的小店合集 讨论个大实话:现在企业还在说 AI 编程提效 20%, 30%的,真的太落后,没用懂 AI。因为包括很多前沿公司,已经狂奔到提效 200%-500%的情况 [招聘][远程][币安] 前端/后端/QA/iOS/Android 至少 3 年以上经验 目前有大量 HC 欢迎投递 Chatgpt Pro 用量用不完的可以开这些设置 面试的时候好像遇到钓鱼了,给各位避个坑 cursor 年续费 22 号到期, 自动续费是否还是老的计次套餐呢 - V2EX 被两件破事毁掉的一下午,琐碎的内耗消磨人的精力 使用 Planet 存储 Codex 的会话或者重要信息 - V2EX 如果业务部门领导不要你开发功能,而是要求你教会它用 claude code 开发功能,你会怎么做? 分享一个 MacOS 接绿联 CM818 USB 转 DP 转接器使用感受 - V2EX 我的 HR 朋友 10 年老 Java ,非全大专,大家帮忙看看简历 开源了一个 AI 口语练习工具,音素级发音评分,完全免费可自部署 V2EX 上有哪些你觉得很有趣、印象深刻的妹纸? 字节为啥不出个国内版 Vercel? 有在大马的朋友吗? 问个运营商问题 你们在有领导的公司大群发过的最大胆的消息是什么 公司裁员,目前没有工作。想试试摆摊,做一个移动鲜啤打酒车 我的硬盘 Memblaze Pblaze 5 Linux 下不识别,给 Linux 内核提交了补丁, AI 说有望被合并 - V2EX 只有我一个人觉得 codex 不好用? 做了个 AI + 真人专家监督的广告投放平台 Auxora, 7 个品牌跑出 6x ROAS 如何走出至亲的离世 Claude Web 端貌似 claude-opus-4-7 偷偷上了? 现在 Apple 开发者帳號應該是用哪个地区会更好? - V2EX 用回测筛选因子的一点经验分享 给女儿 vibe 了一个故事类的 app,做完发现,这类应用似乎上线难度极大? - V2EX 手机格式化 bitget 钱包没了,里面开通的银行卡还有机会拿到吗 - V2EX [送码] TransVoice - 我的第一款 App 上架啦!实时转写+翻译+字幕,会议听课好助手! PictureHub 高清摄影作品的画廊 Planet 的第一个使用 macOS 26 SDK 构建的 Insider 版本 20260416-1 - V2EX 成都二手房是不是在涨价,有点坐不住了 - V2EX claude 生态(skill mcp plugin)等 Studio Display XDR VESA 适配器脱落 有在用印度区 applestore 的大哥嘛,请教一下礼品卡去哪里买呢 - V2EX 我好像知道京东家政爆火的原因了 - V2EX 薅了公司的 a 家 api key,用机场 ip 做代理容易被封吗 如何在初期就识别 HR 在刷 KPI,没打算招你? [分享]精心打造一个 AI 编程知识库(算法/设计模式/提示词/Skills),助力程序员转型 港版 iPhone 在国内支持联通 5GA 吗?在广东用 想办港卡 AI 对 it 行业影响太大了 我做了个把照片变成 iOS 小组件贴纸的 App ChatGPT Pro 5x 套餐 量真的很足! I have found a method to directly generate advertising video materials using scripts 在小城市开个店,给人写软件,有前途吗 chrome 最新的 147 版直接卡爆炸了 - V2EX 为什么厂家不在 skill/mcp 这类的工具中塞广告呢?这样不是可以大赚嘛? minimax 真是脸都不要了,工作日下午 14:00 定时开启 529,脸都不要了。训练模型居然占用用户使用时间 外资非核心部门 vs 另一家外资的核心部门,该跳吗? iTad 标签 扩展 加小动作 ? - V2EX 去年 H200 能买,不让买是代替快出来了? - V2EX AI 赛事通 - 2026 年 4 月中国区新增 AI 竞赛和黑客松汇总 - V2EX V2EX › 登录 现在安卓开发都在做啥 - V2EX 浏览器插件 沉浸式翻译 是不支持自定义模型了吗? - V2EX Codex 里的 GPT5.4 也能降智?上午让它改两个问题,改了一个小时了, plus 额度用了一半了还是没改好,和前几天用的体感完全不一样。要它改的问题也不复杂。服了。 目前有使用 claude code 的收到人脸认证的吗 - V2EX 分享一个自己做的 Nginx 管理工具,实时请求动态预览!(无奈市面上实在找不到好用的,自己撸了个) - V2EX claude code 崩了么? 今天在反重力上用 claude 一点都不丝滑,有同样的感受吗? opencode 消息周知插件 今天 claude opus 和前两天比,质的飞跃 - V2EX 999 包月价? - V2EX 一个版本, 50 项更新:我们几乎重做了整个播放页 本地大模型多大显存够用? GOGDNS 一款简易的私人 DNS 服务器 - V2EX API key (GLM) 怎么使用 claude code desktop ? Claude 这样订阅有问题吗 - V2EX 帮我爸找回了一篇赛博兰亭集序 求推荐稳定、高性价比使用 Claude Opus 4.6 的渠道/平台 搞个云端 claude code 防止 封号 - V2EX 用 Claude 要实名了,内地用户怎么办? OpenAI Plus 和 Team 都缩水了吗 海外 Android 手机有什么好用的国内第三方应用市场推荐吗 - V2EX 把电脑伪装成电视,用 DLNA 投屏拿到视频号直播流地址 - V2EX claude 认证莫慌 北京互联网法院有什么攻略么?起诉北京智谱华章科技股份有限公司退款可行么? - V2EX Claude 开始引入身份验证 求 vscode 做笔记软件的插件推荐 - V2EX 讯飞星辰的 Coding Plan 如何? Anthropic 宣布在 Claude 平台推行身份验证机制 科普一下低价 gpt 是怎么来的 有没有长期关注 Claude 的朋友,我建了一个 Channel 自动抓取 Claude Team 的推文 啃了那篇 54 页的 Agent Harness 综述, 给大伙讲个省流版 现在那家的 coding plan 还能买到 是不是最近会有什么更聪明的大模型要发布了呀? 用多了 AI 后,有没有觉得 AI 生成的文章有很强的既视感? 如何 实践 Harness 工程? 今日份 GPT 5.4 笑话 如何建一个自己的号池,让 cursor 真正实现 token 自由 写了三个月 Agent Harness,我终于敢让 Claude Code 全自动写代码了
都 2026 年了,为什么还有人觉得 AMD 比 Nvidia 更适合部署本地大模型?
babymonster · 2026-05-06 · via V2EX

这是一个创建于 38 天前的主题,其中的信息可能已经有所发展或是发生改变。

五一节假日期间,有一个同事想本地部署大模型,在群里询问,我们都给他推荐了 Nvidia 的卡,结果他去刷 B 站,选择了 AMD AI MAX+ 395 。

难道小白真的就这样被割韭菜吗?

  • 大模型
  • 部署
  • AMD

    130 条回复    2026-05-12 22:21:41 +08:00

    selca

    1

    selca      5 月 6 日

    详述具体差异是什么呢,为啥觉得 nvidia 更适合

    Gemini4422335

    3

    Gemini4422335      5 月 6 日   ❤️ 2

    因为同价位下 AMD AI MAX+ 395 可以用更大的显存,回血出内存也方便,最高 128G
    如果是 N 卡它到不了这么大,除非多卡,但是多卡又比 AMD 贵空间占的也多
    至于性能损失方面不是咱们这些专业选手,人家并不在意

    afkool

    5

    afkool      5 月 6 日 via Android

    推理来讲 395 便宜啊 128g 能跑大多数模型了
    他的竞争对手应该是 Mac mini 128g 这种
    Nvdia 是另一个赛道了吧……

    xiaomushen

    6

    xiaomushen      5 月 6 日

    你觉得人家没这个智商对比么?
    哪怕 Q4 量化,部署一个 dense ,又真正可用的本地模型,根据不同参数规模,你猜猜需要多大的显存?
    当然,如果你是推荐给他 H20/H200 之类的,当我没说。。。

    zhuoi

    8

    zhuoi      5 月 6 日

    安装个 rocm 你就明白 A 卡的坑了

    andlp

    10

    andlp      5 月 6 日

    本地个人用,部署这些模型差别不大.nvidia 贵,我还推荐你买最新的 nvidia 显卡,部署 deepseek v4 pro 呢

    ntedshen

    13

    ntedshen      5 月 6 日

    > 我们都给他推荐了 Nvidia 的卡,结果他去刷 B 站,选择了 AMD AI MAX+ 395

    你不妨说说你们都给他推了什么。。。

    twofox

    14

    twofox      5 月 6 日

    说说什么预算下,推荐了什么?

    padeoe

    16

    padeoe      5 月 6 日

    本地部署大模型务必买 NVIDIA Spark 呀,和 AMD 395 对标的产品,这俩我都买了,AMD AI MAX+ 395 预售阶段我就下单了,相比来说,比 AMD 395 贵几千块,但生态和性能强的不是一点。

    babymonster

    17

    babymonster      5 月 6 日

    @ntedshen Nvidia Jetson Orin 64GB 、Nvidia Jetson Thor T5000 、Nvidia DGX spark 这些?有啥问题吗?

    babymonster

    18

    babymonster      5 月 6 日

    @twofox 三四万左右,给他推荐了 Nvidia Jetson Orin 64GB 、Nvidia Jetson Thor T5000 、Nvidia DGX spark 这些等等

    kiwatokk

    20

    kiwatokk      5 月 6 日 via iPhone

    主要还是 n 卡有 cuda 吧

    padeoe

    21

    padeoe      5 月 6 日

    # 19 我是指 nvidia spark 和 amd 395 是同类型产品。推荐 Jetson 太业余了,我就问你推荐的这些你买过吗

    ikaros

    23

    ikaros      5 月 6 日   ❤️ 1

    如果只是跑 LLM 的话我之前的 AMD 显卡都是直接装 lmstudio 就可以用了,不知道有啥区别。

    ikaros

    24

    ikaros      5 月 6 日   ❤️ 2

    395 去年买 128G 只要 1W 出头(现在估计不到 2W),Nvidia 那个要 3W 多, 而且 395 可以装 Windows 玩游戏, nvidia 那个我记 CPU 用的是 ARM 的, 要我也选 AMD

    Bluecoda

    25

    Bluecoda      5 月 6 日

    就像苹果部署本地 LLM 一样,肯定也比不过 nv 吧?但是别人内存大啊,你 128GB 的 n 卡多少钱?苹果的多少钱?
    在飞机上用苹果 64GB 跑个本地 LLM ,设置可以不联网愉快写代码
    场景不同,你不能用你的场景套用别人的

    CS50

    28

    CS50      5 月 6 日

    不要对别人怎么花的钱有执念

    mooyo

    29

    mooyo      5 月 6 日

    rocm 真的是死了🐎了,还有 AMD AI CPU 的 NPU 在 Linux 下没有驱动也是死了🐎了。驱动还得填表发邮箱申请。

    xocus

    30

    xocus      5 月 6 日

    统一内存 128G ,只有 amd 的是 Windows 系统,其他 nvida 是 ubuntu ,mac 是苹果系统,是我,我也选 amd 的

    smlcgx

    31

    smlcgx      5 月 6 日

    这场景太经典了,又想本地推理,又想着性价比,最后选这个不意外

    不过话说回来,谁没交过学费啊

    jackqian

    34

    jackqian      5 月 6 日

    只适用于本地推理,又不需要自己训练,感觉区别不大吧

    jpyl0423

    35

    jpyl0423      5 月 6 日

    rocm 哪里有问题么,最近跑了个去码的任务还行

    zhanying

    37

    zhanying      5 月 6 日

    显存大,虽然速度慢好歹能跑,用 vulkan 后端就行了,rocm 纯坑

    knva

    38

    knva      5 月 6 日

    跑 llm amd 有什么问题吗? 一万多能买的 128G 的 nvidia 设备了?

    94

    39

    94      5 月 6 日

    一直不能理解个人跑本地模型的目的是什么。是搞开发?还是纯好奇想玩一玩。花两三万玩一下也太奢侈了吧。

    afkool

    40

    afkool      5 月 6 日

    @padeoe 对了大佬,多余问下,Mac 有啥好处?我看 395 ,哪怕屏幕素质高的笔记本 128G (比如玩家国度的幻)才 2 万。。Mac Studio 128G 都本着 4 万去了

    fredweili

    41

    fredweili      5 月 6 日

    没事别爱操心,别人买啥关你啥事?有钱自己去买自己玩

    meteora0tkvo

    42

    meteora0tkvo      5 月 6 日

    早几年前,训练 ai 只能用 nVidia 卡,现在才逐渐支持 amd 的卡而已

    fredweili

    43

    fredweili      5 月 6 日

    @afkool 苹果的东西一向是内存硬盘加价成金子,大家觉得好那是入门丐版,3000 多的不买 mac 你能找到哪怕能看到尾灯的?

    afkool

    44

    afkool      5 月 6 日

    @emberzhang 说错了。是 Mac Studio 。
    不过我看来看去。。。感觉还是买个 rog 幻 x 划算啊。也不重,出去玩日常还能玩。

    babymonster

    47

    babymonster      5 月 6 日

    @94 本地部署如果有 CUDA 的生态的话,这个可以做成无限 token 调用呀,生图生视频

    94

    49

    94      5 月 6 日

    @babymonster #47 ,算力差太大了吧…… 速度能看到交付的产物差,交付结果能看的就速度慢。
    现在本能跑能用(生产力提升)的就只有翻译能力或者对话吧。其他的差距太明显,要不然就是当玩具,绕过限制玩一下涩图生成?

    fcten

    50

    fcten      5 月 6 日

    395 1w2 能买到的时候是真划算,应该是本地部署性价比最高的选择了,现在的价格嘛也就那样。
    再好一点的选择是 M5 Max 128G 。

    想要用 N 卡的,我只推荐两个:4090 48G (双卡) 或 RTX PRO 6000 ,但是这两个均没有保修。小白慎重考虑。
    Jetson 系列和 DGX 系列都不适合个人使用,买来纯属吃灰,买前面的至少还能打游戏呢[doge]

    huaweii

    52

    huaweii      5 月 6 日 via Android

    @fcten 苦等 M5 max 和 ultra 的 mac studio

    zoozobib

    55

    zoozobib      5 月 6 日

    turboquant 、dflash 后的 395 更没优势了 , 吃的多和跑得快完全不是一个维度

    Daitabashi

    56

    Daitabashi      5 月 6 日

    英伟达的卡 显存是和算力绑定的 为了大显存买 5090 不合算
    AI Max 类似苹果的统一内存 想要多少焊多少 不用为用不到的计算性能买单

    diudiuu

    57

    diudiuu      5 月 6 日

    买 dgx spark 的也是韭菜啊

    MCVector

    60

    MCVector      5 月 6 日

    我买了两个 AMD AI Pro R9700 卡,感觉还行? Vulkan backend 性能有时比 ROCm 略好一点。

    geekvcn

    62

    geekvcn      5 月 6 日   ❤️ 1

    英伟达水军是真的多,AI 小白不懂装懂的也真是多。

    Curtion

    64

    Curtion      5 月 6 日

    我就买了 395 ,1.2w 的价格,128G 显存的还有哪个机器可以做到? 而且推理不一定要用 CUDA 啊,我连 ROCm 都没用,我用的是 vulkan 缺点就是用不了 DFlash, 跑 27B 稠密模型瓶颈在算力上, 但是可以相同速度跑 122B-A10B 的 MOE 模型

    neptuno

    65

    neptuno      5 月 6 日

    他可能也就想想,买回来更多是打游戏

    zycode

    66

    zycode      5 月 6 日

    主要是硬件性价比高,不过 rocm 确实是容易各种不兼容

    catazshadow

    67

    catazshadow      5 月 6 日 via Android

    Rocm 最大的坑是明年就不支持老卡了

    babymonster

    68

    babymonster      5 月 6 日

    @94 你用过 z-image 吗?我感觉他这个配合 ComfyUI 来生图还是挺好的呀,不光是生图像,什么 TTS 、ASR 都还好呀

    babymonster

    69

    babymonster      5 月 6 日

    @fcten 专业级显卡跟消费级显卡需要有打游戏的这个对比吗?那 H100 和 H20 难道这种显卡也要去打游戏吗?

    565656

    75

    565656      5 月 6 日

    AMD 的东西一生黑 我打游戏都买的 285K 没买 x3d ,之前就发现 AMD 待机的风扇就叫不停好讨厌

    adoal

    76

    adoal      5 月 6 日

    因为 Jetson 和 DGX 真的是只能“部署大模型”,除此之外对个人用户没啥用……

    jjx

    77

    jjx      5 月 6 日

    哎,一直想入手创 13pro 联名版 128g+1t, 看着它从 2 万涨到 3 万

    sherg98

    78

    sherg98      5 月 6 日

    很简单,大模型对显存的需求是刚性的,普通人也不可能去买很多张算力卡去组 gpu 服务器,AI MAX+ 395 虽然吐词速度不行但确实能跑,价格也相对来说比较友好

    sherg98

    79

    sherg98      5 月 6 日

    真相同显存不得上两张 4090 48g 或者保修的话 rtx pro 6000 ,这个价格差的就多了

    NiceKlaus

    80

    NiceKlaus      5 月 6 日

    本地部署 1w 左右能行吗,单显卡预算

    94

    81

    94      5 月 6 日

    @babymonster #68 ,可能还是你们有钱吧,几万花着不心疼。
    生图我就是上头的时候跟着突破限制的教程本地跑了一下,劲过去了之后就没在用过了。
    TTS 的话直接调 API 真的很廉价了,而且还有免费额度。ASR 本地跑小模型我的办公电脑没显卡也完全可以胜任。

    nrtEBH

    84

    nrtEBH      5 月 6 日

    为什么觉得 AMD AI MAX+ 395 是割韭菜 逻辑在哪里??
    本来就是各有擅长 用割韭菜来形容有点不够技术过于傲慢了

    Curtion

    85

    Curtion      5 月 6 日

    @babymonster #70 GPT-OSS-120B 是一个激活参数只有 5.1B 的 MOE 模型,可以跑,但是实际上这个模型不如 Qwen 3.6 27B ,不过 GPT-OSS-120B 速度确实会更快, 395 更适合 MOE 模型

    94

    86

    94      5 月 6 日   ❤️ 1

    @babymonster #68 ,接#81 ,所以如果现在非要找一个在本地跑的需求,可能就是跑一个 7b 左右的小模型来做 AI 翻译以减少开销?
    不过其实有大量的翻译需求,也是肯定是业务上面的需求,直接用公司给的额度安排翻译任务就好了。个人看文章翻译日常用各家翻译 API 的免费额度我都用不完的……

    如果是作为开发用途的,很明显能在本地跑的模型和线上的参数量级差太多了,是不会考虑的在本地跑的。所以非常不理解花大价钱买显卡、计算模块在本地跑模型的目的到底是为什么。

    babymonster

    87

    babymonster      5 月 6 日

    就这么说吧,如果你们去买的话,是会买 AMD max 395 还是英伟达的?

    Maybez007

    88

    Maybez007      5 月 6 日

    目前来看 AMD 、mac 确实比 NVIDIA 的方案便宜很多。所以选 NVIDIA 方案的原因是?

    lithiumii

    89

    lithiumii      5 月 6 日 via Android   ❤️ 1

    看内存带宽,DGX spark 跟 395 半斤八两(英伟达稍强一点点,但都远不如一个正经显卡)。跑 llm 推理的话反正都是 llama cpp 搞定,不像训练你还要自己折腾 ROCm 。所以哪个便宜买哪个。但买 amd 的好处是你还能获得一个标准的 x86 电脑当服务器用

    cheng6563

    90

    cheng6563      5 月 6 日

    道理都懂,问题是,5090 才几个 VRAM ?难道你还想买 H100 ?

    Miary

    91

    Miary      5 月 6 日

    又不搞训练,买 395 有什么问题?抛开预算谈方案都是扯淡。

    SakuraYuki

    95

    SakuraYuki      5 月 6 日

    买东西不看价格还行,黄狗的黄金显存是普通消费者能承受的?还是说 op 的 5070ti 有足够显存跑 128b ,普通人谁吃多了没事干买 DGX 专门就为了跑个 ai

    wclebb

    99

    wclebb      5 月 6 日

    主要还是看个人的预算方案吧。

    laminux29

    100

    laminux29      5 月 6 日

    各有各的优势。

    AMD 、MAC 主打一个性价比。如果你已经确定,你需要用的某款模型,能在这种平台上面稳定跑,那么选这些非 N 卡平台,性价比更高。

    但如果你经常换模型,或者自己搞各种与 AI 相关的开发,追求灵活性、兼容性、可调试性,那么必然要买 N 卡了。