惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

C
CXSECURITY Database RSS Feed - CXSecurity.com
K
Kaspersky official blog
A
Arctic Wolf
Attack and Defense Labs
Attack and Defense Labs
L
LINUX DO - 热门话题
N
News | PayPal Newsroom
cs.CV updates on arXiv.org
cs.CV updates on arXiv.org
L
Lohrmann on Cybersecurity
PCI Perspectives
PCI Perspectives
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
The Last Watchdog
The Last Watchdog
B
Blog RSS Feed
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
W
WeLiveSecurity
Know Your Adversary
Know Your Adversary
博客园 - Franky
T
Tenable Blog
T
Tailwind CSS Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
Help Net Security
Help Net Security
WordPress大学
WordPress大学
T
The Exploit Database - CXSecurity.com
www.infosecurity-magazine.com
www.infosecurity-magazine.com
博客园 - 司徒正美
阮一峰的网络日志
阮一峰的网络日志
D
Darknet – Hacking Tools, Hacker News & Cyber Security
H
Heimdal Security Blog
TaoSecurity Blog
TaoSecurity Blog
S
Security Affairs
J
Java Code Geeks
小众软件
小众软件
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
Apple Machine Learning Research
Apple Machine Learning Research
NISL@THU
NISL@THU
O
OpenAI News
The Cloudflare Blog
月光博客
月光博客
Google Online Security Blog
Google Online Security Blog
V
V2EX
罗磊的独立博客
美团技术团队
博客园 - 三生石上(FineUI控件)
Security Latest
Security Latest
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
C
Cyber Attacks, Cyber Crime and Cyber Security
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
Cyberwarzone
Cyberwarzone
L
LINUX DO - 最新话题
Hacker News - Newest:
Hacker News - Newest: "LLM"
大猫的无限游戏
大猫的无限游戏

V2EX - 技术

Local-first 软件收录站 从 X 上搬运来的白嫖 GPT Plus 教程 阿里云百炼 Coding Plan Pro 套餐 新增当日 token 限制 大家的 Claude 弹了 kyc 嘛 现在 Google 的 Gemini 和 AI 模式降智的厉害啊 用的 TAG 家的 T, ip 跳变是否影响使用 claude 同一 apple 账户能给不同 claude 账号充值么 做了个 Go 的 MCP Server 框架,一行代码把 Gin API 接入 AI - V2EX 请教各位,想回归技术,如何系统学习 Agent? OpenAI GPT-IMAGE-2 提示词合集 你是说, claude opus4.6 写代码的能力不如 gpt5.4? 关于智谱 Max 套餐要不要升级续费呢? App → CLI → App ? Github 账号被 404 了,现在没法恢复,求各位大佬指点 cursor 的次数套餐以后应该都用不了新模型了 - V2EX openrouter 使用国外模型 买了咸鱼低价 Gemini pro,账号差点被盗。突然发现国内诈骗成本为零 - V2EX Gemini 手机版客户端登陆总是在此国家/地区无法使用 gemini 感觉 gpt 这些低价渠道要爆了 claude code 和 codex 在 vibe coding 还有质的区别吗? 阿里 Coding Plan 一天三变, Lite 版本到期不能续费了 RAG 难以让人满意啊 2026 年了,这个世界还存在互联网精神🥹 两个账号阵亡,尼区 Claude Pro 订阅 分享下最近低价 GPT Codex 的来源(源头) OpenAI 发布 Codex 重大更新:支持自动操作电脑与长期任务自动化 使用 claude 从 0 开始开发一个校友会系统可行吗 同一个 appleid 可以给不同 chatGPT 账号订阅 plus 吗? 自动驾驶项目开发建议 终于, 降智几天之后, opus4.7 出来了 自己开发了个 VSCODE 扩展,可以接入自定义的模型,并且可以导出 Copilot 的聊天列表到其它设备上导入 - V2EX Claude 这对吗 某鱼上 codex 的价格这么便宜是否有猫腻? 🎉 Claude Opus 4.7 来啦~ 大家体验下来如何? 让 ai 重写了整个 git 的历史,强迫症被拯救了 [分享创造] 写了个自托管的 Chrome 同步服务器,书签密码再也不经过 Google 快讯, Claude Opus 4.7 已经可以使用。 Opus4.7 来了,网页版先上,桌面版本客户端暂时未看到 各位想本地部署大模型的看过来, 有台电脑想转让, 具体请查看截图, 价格请自己开价 这样用 ClaudeCode 怎么样? 我用 AI 写代码,但终端管理反而成了累赘——于是我做了 codux - V2EX [调研] 各位在公司都用什么 ide 和 agent 写代码? 丹麦国别域名(.dk)政策变更 - V2EX 目前付费订阅 chatgpt Plus 的最佳方式是什么? 老运维 share 一个运维平台 新电脑 brew install node 之后,一个小设置可以提升对供应链投毒的防御 - V2EX 看到有公司考核 token 指标,很好奇大家上个月的 AI 账单是多少 GLM-Coding 调用持续报错: z.ai 的 Lite 套餐几乎无法使用,官方 Pro/Max 是否稳定? - V2EX 现在还有什么渠道可以稳定安全地使用 Claude 吗? Chatgpt Pro 用量用不完的可以开这些设置 字节为啥不出个国内版 Vercel? 我的硬盘 Memblaze Pblaze 5 Linux 下不识别,给 Linux 内核提交了补丁, AI 说有望被合并 - V2EX Claude Web 端貌似 claude-opus-4-7 偷偷上了? 现在 Apple 开发者帳號應該是用哪个地区会更好? - V2EX ChatGPT Pro 5x 套餐 量真的很足! chrome 最新的 147 版直接卡爆炸了 - V2EX 为什么厂家不在 skill/mcp 这类的工具中塞广告呢?这样不是可以大赚嘛? minimax 真是脸都不要了,工作日下午 14:00 定时开启 529,脸都不要了。训练模型居然占用用户使用时间 iTad 标签 扩展 加小动作 ? - V2EX 去年 H200 能买,不让买是代替快出来了? - V2EX AI 赛事通 - 2026 年 4 月中国区新增 AI 竞赛和黑客松汇总 - V2EX 现在安卓开发都在做啥 - V2EX 浏览器插件 沉浸式翻译 是不支持自定义模型了吗? - V2EX Codex 里的 GPT5.4 也能降智?上午让它改两个问题,改了一个小时了, plus 额度用了一半了还是没改好,和前几天用的体感完全不一样。要它改的问题也不复杂。服了。 目前有使用 claude code 的收到人脸认证的吗 - V2EX 分享一个自己做的 Nginx 管理工具,实时请求动态预览!(无奈市面上实在找不到好用的,自己撸了个) - V2EX claude code 崩了么? 今天在反重力上用 claude 一点都不丝滑,有同样的感受吗? opencode 消息周知插件 今天 claude opus 和前两天比,质的飞跃 - V2EX 999 包月价? - V2EX 一个版本, 50 项更新:我们几乎重做了整个播放页 本地大模型多大显存够用? GOGDNS 一款简易的私人 DNS 服务器 - V2EX API key (GLM) 怎么使用 claude code desktop ? Claude 这样订阅有问题吗 - V2EX 帮我爸找回了一篇赛博兰亭集序 求推荐稳定、高性价比使用 Claude Opus 4.6 的渠道/平台 搞个云端 claude code 防止 封号 - V2EX 用 Claude 要实名了,内地用户怎么办? OpenAI Plus 和 Team 都缩水了吗 海外 Android 手机有什么好用的国内第三方应用市场推荐吗 - V2EX 把电脑伪装成电视,用 DLNA 投屏拿到视频号直播流地址 - V2EX claude 认证莫慌 北京互联网法院有什么攻略么?起诉北京智谱华章科技股份有限公司退款可行么? - V2EX Claude 开始引入身份验证 求 vscode 做笔记软件的插件推荐 - V2EX 讯飞星辰的 Coding Plan 如何? Anthropic 宣布在 Claude 平台推行身份验证机制 科普一下低价 gpt 是怎么来的 有没有长期关注 Claude 的朋友,我建了一个 Channel 自动抓取 Claude Team 的推文 啃了那篇 54 页的 Agent Harness 综述, 给大伙讲个省流版 现在那家的 coding plan 还能买到 是不是最近会有什么更聪明的大模型要发布了呀? 用多了 AI 后,有没有觉得 AI 生成的文章有很强的既视感? 如何 实践 Harness 工程? 今日份 GPT 5.4 笑话 如何建一个自己的号池,让 cursor 真正实现 token 自由 写了三个月 Agent Harness,我终于敢让 Claude Code 全自动写代码了 感叹一下 GLM 5.1 真的强
都 2026 年了,为什么还有人觉得 AMD 比 Nvidia 更适合部署本地大模型?
babymonster · 2026-05-06 · via V2EX - 技术

这是一个创建于 38 天前的主题,其中的信息可能已经有所发展或是发生改变。

五一节假日期间,有一个同事想本地部署大模型,在群里询问,我们都给他推荐了 Nvidia 的卡,结果他去刷 B 站,选择了 AMD AI MAX+ 395 。

难道小白真的就这样被割韭菜吗?

  • 大模型
  • 部署
  • AMD

    130 条回复    2026-05-12 22:21:41 +08:00

    selca

    1

    selca      5 月 6 日

    详述具体差异是什么呢,为啥觉得 nvidia 更适合

    Gemini4422335

    3

    Gemini4422335      5 月 6 日   ❤️ 2

    因为同价位下 AMD AI MAX+ 395 可以用更大的显存,回血出内存也方便,最高 128G
    如果是 N 卡它到不了这么大,除非多卡,但是多卡又比 AMD 贵空间占的也多
    至于性能损失方面不是咱们这些专业选手,人家并不在意

    afkool

    5

    afkool      5 月 6 日 via Android

    推理来讲 395 便宜啊 128g 能跑大多数模型了
    他的竞争对手应该是 Mac mini 128g 这种
    Nvdia 是另一个赛道了吧……

    xiaomushen

    6

    xiaomushen      5 月 6 日

    你觉得人家没这个智商对比么?
    哪怕 Q4 量化,部署一个 dense ,又真正可用的本地模型,根据不同参数规模,你猜猜需要多大的显存?
    当然,如果你是推荐给他 H20/H200 之类的,当我没说。。。

    zhuoi

    8

    zhuoi      5 月 6 日

    安装个 rocm 你就明白 A 卡的坑了

    andlp

    10

    andlp      5 月 6 日

    本地个人用,部署这些模型差别不大.nvidia 贵,我还推荐你买最新的 nvidia 显卡,部署 deepseek v4 pro 呢

    ntedshen

    13

    ntedshen      5 月 6 日

    > 我们都给他推荐了 Nvidia 的卡,结果他去刷 B 站,选择了 AMD AI MAX+ 395

    你不妨说说你们都给他推了什么。。。

    twofox

    14

    twofox      5 月 6 日

    说说什么预算下,推荐了什么?

    padeoe

    16

    padeoe      5 月 6 日

    本地部署大模型务必买 NVIDIA Spark 呀,和 AMD 395 对标的产品,这俩我都买了,AMD AI MAX+ 395 预售阶段我就下单了,相比来说,比 AMD 395 贵几千块,但生态和性能强的不是一点。

    babymonster

    17

    babymonster      5 月 6 日

    @ntedshen Nvidia Jetson Orin 64GB 、Nvidia Jetson Thor T5000 、Nvidia DGX spark 这些?有啥问题吗?

    babymonster

    18

    babymonster      5 月 6 日

    @twofox 三四万左右,给他推荐了 Nvidia Jetson Orin 64GB 、Nvidia Jetson Thor T5000 、Nvidia DGX spark 这些等等

    kiwatokk

    20

    kiwatokk      5 月 6 日 via iPhone

    主要还是 n 卡有 cuda 吧

    padeoe

    21

    padeoe      5 月 6 日

    # 19 我是指 nvidia spark 和 amd 395 是同类型产品。推荐 Jetson 太业余了,我就问你推荐的这些你买过吗

    ikaros

    23

    ikaros      5 月 6 日   ❤️ 1

    如果只是跑 LLM 的话我之前的 AMD 显卡都是直接装 lmstudio 就可以用了,不知道有啥区别。

    ikaros

    24

    ikaros      5 月 6 日   ❤️ 2

    395 去年买 128G 只要 1W 出头(现在估计不到 2W),Nvidia 那个要 3W 多, 而且 395 可以装 Windows 玩游戏, nvidia 那个我记 CPU 用的是 ARM 的, 要我也选 AMD

    Bluecoda

    25

    Bluecoda      5 月 6 日

    就像苹果部署本地 LLM 一样,肯定也比不过 nv 吧?但是别人内存大啊,你 128GB 的 n 卡多少钱?苹果的多少钱?
    在飞机上用苹果 64GB 跑个本地 LLM ,设置可以不联网愉快写代码
    场景不同,你不能用你的场景套用别人的

    CS50

    28

    CS50      5 月 6 日

    不要对别人怎么花的钱有执念

    mooyo

    29

    mooyo      5 月 6 日

    rocm 真的是死了🐎了,还有 AMD AI CPU 的 NPU 在 Linux 下没有驱动也是死了🐎了。驱动还得填表发邮箱申请。

    xocus

    30

    xocus      5 月 6 日

    统一内存 128G ,只有 amd 的是 Windows 系统,其他 nvida 是 ubuntu ,mac 是苹果系统,是我,我也选 amd 的

    smlcgx

    31

    smlcgx      5 月 6 日

    这场景太经典了,又想本地推理,又想着性价比,最后选这个不意外

    不过话说回来,谁没交过学费啊

    jackqian

    34

    jackqian      5 月 6 日

    只适用于本地推理,又不需要自己训练,感觉区别不大吧

    jpyl0423

    35

    jpyl0423      5 月 6 日

    rocm 哪里有问题么,最近跑了个去码的任务还行

    zhanying

    37

    zhanying      5 月 6 日

    显存大,虽然速度慢好歹能跑,用 vulkan 后端就行了,rocm 纯坑

    knva

    38

    knva      5 月 6 日

    跑 llm amd 有什么问题吗? 一万多能买的 128G 的 nvidia 设备了?

    94

    39

    94      5 月 6 日

    一直不能理解个人跑本地模型的目的是什么。是搞开发?还是纯好奇想玩一玩。花两三万玩一下也太奢侈了吧。

    afkool

    40

    afkool      5 月 6 日

    @padeoe 对了大佬,多余问下,Mac 有啥好处?我看 395 ,哪怕屏幕素质高的笔记本 128G (比如玩家国度的幻)才 2 万。。Mac Studio 128G 都本着 4 万去了

    fredweili

    41

    fredweili      5 月 6 日

    没事别爱操心,别人买啥关你啥事?有钱自己去买自己玩

    meteora0tkvo

    42

    meteora0tkvo      5 月 6 日

    早几年前,训练 ai 只能用 nVidia 卡,现在才逐渐支持 amd 的卡而已

    fredweili

    43

    fredweili      5 月 6 日

    @afkool 苹果的东西一向是内存硬盘加价成金子,大家觉得好那是入门丐版,3000 多的不买 mac 你能找到哪怕能看到尾灯的?

    afkool

    44

    afkool      5 月 6 日

    @emberzhang 说错了。是 Mac Studio 。
    不过我看来看去。。。感觉还是买个 rog 幻 x 划算啊。也不重,出去玩日常还能玩。

    babymonster

    47

    babymonster      5 月 6 日

    @94 本地部署如果有 CUDA 的生态的话,这个可以做成无限 token 调用呀,生图生视频

    94

    49

    94      5 月 6 日

    @babymonster #47 ,算力差太大了吧…… 速度能看到交付的产物差,交付结果能看的就速度慢。
    现在本能跑能用(生产力提升)的就只有翻译能力或者对话吧。其他的差距太明显,要不然就是当玩具,绕过限制玩一下涩图生成?

    fcten

    50

    fcten      5 月 6 日

    395 1w2 能买到的时候是真划算,应该是本地部署性价比最高的选择了,现在的价格嘛也就那样。
    再好一点的选择是 M5 Max 128G 。

    想要用 N 卡的,我只推荐两个:4090 48G (双卡) 或 RTX PRO 6000 ,但是这两个均没有保修。小白慎重考虑。
    Jetson 系列和 DGX 系列都不适合个人使用,买来纯属吃灰,买前面的至少还能打游戏呢[doge]

    huaweii

    52

    huaweii      5 月 6 日 via Android

    @fcten 苦等 M5 max 和 ultra 的 mac studio

    zoozobib

    55

    zoozobib      5 月 6 日

    turboquant 、dflash 后的 395 更没优势了 , 吃的多和跑得快完全不是一个维度

    Daitabashi

    56

    Daitabashi      5 月 6 日

    英伟达的卡 显存是和算力绑定的 为了大显存买 5090 不合算
    AI Max 类似苹果的统一内存 想要多少焊多少 不用为用不到的计算性能买单

    diudiuu

    57

    diudiuu      5 月 6 日

    买 dgx spark 的也是韭菜啊

    MCVector

    60

    MCVector      5 月 6 日

    我买了两个 AMD AI Pro R9700 卡,感觉还行? Vulkan backend 性能有时比 ROCm 略好一点。

    geekvcn

    62

    geekvcn      5 月 6 日   ❤️ 1

    英伟达水军是真的多,AI 小白不懂装懂的也真是多。

    Curtion

    64

    Curtion      5 月 6 日

    我就买了 395 ,1.2w 的价格,128G 显存的还有哪个机器可以做到? 而且推理不一定要用 CUDA 啊,我连 ROCm 都没用,我用的是 vulkan 缺点就是用不了 DFlash, 跑 27B 稠密模型瓶颈在算力上, 但是可以相同速度跑 122B-A10B 的 MOE 模型

    neptuno

    65

    neptuno      5 月 6 日

    他可能也就想想,买回来更多是打游戏

    zycode

    66

    zycode      5 月 6 日

    主要是硬件性价比高,不过 rocm 确实是容易各种不兼容

    catazshadow

    67

    catazshadow      5 月 6 日 via Android

    Rocm 最大的坑是明年就不支持老卡了

    babymonster

    68

    babymonster      5 月 6 日

    @94 你用过 z-image 吗?我感觉他这个配合 ComfyUI 来生图还是挺好的呀,不光是生图像,什么 TTS 、ASR 都还好呀

    babymonster

    69

    babymonster      5 月 6 日

    @fcten 专业级显卡跟消费级显卡需要有打游戏的这个对比吗?那 H100 和 H20 难道这种显卡也要去打游戏吗?

    565656

    75

    565656      5 月 6 日

    AMD 的东西一生黑 我打游戏都买的 285K 没买 x3d ,之前就发现 AMD 待机的风扇就叫不停好讨厌

    adoal

    76

    adoal      5 月 6 日

    因为 Jetson 和 DGX 真的是只能“部署大模型”,除此之外对个人用户没啥用……

    jjx

    77

    jjx      5 月 6 日

    哎,一直想入手创 13pro 联名版 128g+1t, 看着它从 2 万涨到 3 万

    sherg98

    78

    sherg98      5 月 6 日

    很简单,大模型对显存的需求是刚性的,普通人也不可能去买很多张算力卡去组 gpu 服务器,AI MAX+ 395 虽然吐词速度不行但确实能跑,价格也相对来说比较友好

    sherg98

    79

    sherg98      5 月 6 日

    真相同显存不得上两张 4090 48g 或者保修的话 rtx pro 6000 ,这个价格差的就多了

    NiceKlaus

    80

    NiceKlaus      5 月 6 日

    本地部署 1w 左右能行吗,单显卡预算

    94

    81

    94      5 月 6 日

    @babymonster #68 ,可能还是你们有钱吧,几万花着不心疼。
    生图我就是上头的时候跟着突破限制的教程本地跑了一下,劲过去了之后就没在用过了。
    TTS 的话直接调 API 真的很廉价了,而且还有免费额度。ASR 本地跑小模型我的办公电脑没显卡也完全可以胜任。

    nrtEBH

    84

    nrtEBH      5 月 6 日

    为什么觉得 AMD AI MAX+ 395 是割韭菜 逻辑在哪里??
    本来就是各有擅长 用割韭菜来形容有点不够技术过于傲慢了

    Curtion

    85

    Curtion      5 月 6 日

    @babymonster #70 GPT-OSS-120B 是一个激活参数只有 5.1B 的 MOE 模型,可以跑,但是实际上这个模型不如 Qwen 3.6 27B ,不过 GPT-OSS-120B 速度确实会更快, 395 更适合 MOE 模型

    94

    86

    94      5 月 6 日   ❤️ 1

    @babymonster #68 ,接#81 ,所以如果现在非要找一个在本地跑的需求,可能就是跑一个 7b 左右的小模型来做 AI 翻译以减少开销?
    不过其实有大量的翻译需求,也是肯定是业务上面的需求,直接用公司给的额度安排翻译任务就好了。个人看文章翻译日常用各家翻译 API 的免费额度我都用不完的……

    如果是作为开发用途的,很明显能在本地跑的模型和线上的参数量级差太多了,是不会考虑的在本地跑的。所以非常不理解花大价钱买显卡、计算模块在本地跑模型的目的到底是为什么。

    babymonster

    87

    babymonster      5 月 6 日

    就这么说吧,如果你们去买的话,是会买 AMD max 395 还是英伟达的?

    Maybez007

    88

    Maybez007      5 月 6 日

    目前来看 AMD 、mac 确实比 NVIDIA 的方案便宜很多。所以选 NVIDIA 方案的原因是?

    lithiumii

    89

    lithiumii      5 月 6 日 via Android   ❤️ 1

    看内存带宽,DGX spark 跟 395 半斤八两(英伟达稍强一点点,但都远不如一个正经显卡)。跑 llm 推理的话反正都是 llama cpp 搞定,不像训练你还要自己折腾 ROCm 。所以哪个便宜买哪个。但买 amd 的好处是你还能获得一个标准的 x86 电脑当服务器用

    cheng6563

    90

    cheng6563      5 月 6 日

    道理都懂,问题是,5090 才几个 VRAM ?难道你还想买 H100 ?

    Miary

    91

    Miary      5 月 6 日

    又不搞训练,买 395 有什么问题?抛开预算谈方案都是扯淡。

    SakuraYuki

    95

    SakuraYuki      5 月 6 日

    买东西不看价格还行,黄狗的黄金显存是普通消费者能承受的?还是说 op 的 5070ti 有足够显存跑 128b ,普通人谁吃多了没事干买 DGX 专门就为了跑个 ai

    wclebb

    99

    wclebb      5 月 6 日

    主要还是看个人的预算方案吧。

    laminux29

    100

    laminux29      5 月 6 日

    各有各的优势。

    AMD 、MAC 主打一个性价比。如果你已经确定,你需要用的某款模型,能在这种平台上面稳定跑,那么选这些非 N 卡平台,性价比更高。

    但如果你经常换模型,或者自己搞各种与 AI 相关的开发,追求灵活性、兼容性、可调试性,那么必然要买 N 卡了。