

























这是一个创建于 71 天前的主题,其中的信息可能已经有所发展或是发生改变。
今年内存是大概率不会降价了
随着价格的刺激和产能的提升,以及对本地大模型的需求,2 年以后 256G 内存能否得到普及?
256G 内存,加上本地模型的发展,应该可以在本地运行一些非常不错的 coding 模型了
2 dmanbu 4 月 4 日???但凡你了解一下硬件市场,就该知道现在内存开始跳水了 |
3 levn 4 月 4 日都用本地模型了,那企业高价买的那些内存显卡谁来使啊 |
4 decade0q 4 月 4 日 via iPhone内存前几天都开始降了😓 |
5 icyalala 4 月 4 日硬件提升,模型也在提升,最好的模型会越来越大 |
6 workbest 4 月 4 日如果 2 年后的本地大模型能达到今天的 opus 4.6 或者 gpt 5.4 的水平,我觉得已经足够了 |
7 l1ve 4 月 4 日@dmanbu 16G 的从 1000 到 700 ,不算跳水吧,并且还叠加季度末回款的影响 |
8 Gilfoyle26 4 月 4 日预言一波:其实和手机一样的发展路线,尽管每年都出新款,但是消费者已经无感了。 |
10 june4 4 月 4 日苹果底端 8G 内存机是十几年前了吧,现在还是 8G,说明内存基本不会涨 |
11 cjun 4 月 4 日 via Android云端的模型比本地模型更聪明,如果是省事,省时间,还是云端模型好吧 |
13 ntedshen 4 月 4 日我台式机一直是拉满的,不谈 所以, |
15 zerovoid 4 月 4 日除非本地部署的成本,低于云服务的成本很多,不然为什么我不用云服务呢, |
16 Very0ldMan 4 月 4 日chatGPT3.5 的时候,我就在想,如果以后开源的大模型能够有 3.5 的智力就好了。结果没想到现在 14B 的大模型已经超过 3.5 了😂😂 |
17 forisra 4 月 4 日@kongkongyzt 这个很难了,因为当时内存存储价格低本身也是当然上游厂商对行情误判,产能过剩结果就导致了历史性的低价。 未来就算价格崩了,我估计也很难崩到这个水平。毕竟按照正常的通胀率一年 2%-3%,十年通胀也有 30%了。 |
18 eastcukt 4 月 5 日 via Android端到端的小模型感觉是未来趋势,有基础智商配合 agent 作为私人助手完全够了。如果后期 memory 层能作用小模型进行微调就更是没必要全知大模型。 |
19 laminux29 4 月 5 日256G 内存,加上本地模型的发展,应该可以在本地运行一些非常不错的 coding 模型了 这是严重的错误判断。 现阶段,各大 Coding 模型,别说架构师了,连高级程序员的层次,都没法在每次 chat 中达到,而且还经常输出一些虽然能 work 但可维护性极差的代码。这个问题的根源还在于训练的数据、推理的算力与推理空间不足导致的,而这一切的训练与推理阶段,又都依赖超大内存,256GB 只是冰山一角,远远不够。 |
25 jark006 4 月 5 日你这个“非常不错的 coding 模型”最多相当于现在的顶级闭源模型(其实本地能跑 opus4.6 我也挺满足的😁👍),但那时会出现更加顶尖的闭源模型。 |
27 Very0ldMan 4 月 20 日@jackqian #26 GPT-3.5 在 2023 年的 MMLU (综合知识)得分大约在 70% 左右,而 Qwen3.5-14B 即使在量化后,在 MMLU 、GSM8K (数学)和 HumanEval (代码)上的得分依然高出一大截 |
此内容由惯性聚合(RSS阅读器)自动聚合整理,仅供阅读参考。 原文来自 — 版权归原作者所有。