
















AI技术不断发展,与之相应的,算力需求也不断增加。如何看待当前AI时代所面临的算力挑战呢?这篇文章里,作者分享了他的看法,一起来看一下。

今年春节我们见证了Sora的惊艳表现。现在的大模型,已经进入了新的发展阶段。从技术,到具体的应用场景,生成式AI正在更多领域,发挥出惊人的潜力。
麦肯锡报告显示,生成式AI每年将为全球经济增加4.4万亿美元的价值。生成式AI可自动化节省 60%到70%的员工时间来提高生产力。在2030年至2060年间,有近一半的工作将实现智能化水平。
但是不可否认的是,随着AI不断发展,它对于算力的需求会持续增加,这也让整个行业都处在“焦虑”之中,如何破解AI时代的算力危机,也成为行业必须面对的问题。
当下,大模型主导的生成式AI,尤其是GPT-4的发布,让人类社会看到了通用人工智能时代的曙光。这意味着,作为生产力工具甚至是数字时代的“新基建”的人工智能技术,不用再局限于单一或有限场景,而是能够在众多领域像人类一样进行思考、解决问题,并进行持续、快速的自我进化,因此,大模型主导的生成式AI,将拥有极为广阔的应用前景,有望赋能千行百业。
随着生成式人工智能的爆发,对企业和个人的价值带来了许多新的机遇和优势:
但是,值得注意的是,生成式 AI 对算力的需求通常较高,特别是在训练大型模型和处理大规模数据时。由于生成式 AI 模型通常具有复杂的结构和大量的参数,因此需要大量的计算资源来进行训练和推理。随着生成式 AI 技术的不断发展和应用,对算力的需求将会继续增加,需要更多的计算资源来支持。
随着AI技术的迅速发展,越来越多的人开始关注AI算力问题。AI算力问题指的是,在处理复杂的AI模型和算法时需要大量的计算资源,而这种计算资源又需要消耗大量的时间和能源。
以下是生成式 AI 对算力需求的一些方面:
模型训练:生成式 AI 模型的训练是一个非常计算密集的过程。这些模型通常由数百万甚至数十亿个参数组成,需要在大规模数据集上进行多轮迭代的训练。由于训练过程中需要进行大量的矩阵运算和梯度计算等计算密集型操作,因此需要强大的计算资源来加速训练过程。
例如,ChatGPT的训练参数达到了1750亿、训练数据45TB,每天生成45亿字的内容,支撑其算力至少需要上万颗英伟达的GPU A100,单次模型训练成本超过1200万美元。
推理和生成:一旦生成式AI模型训练完成,推理和生成过程也需要大量的计算资源。在推理过程中,模型需要根据输入数据生成相应的输出,这涉及复杂的矩阵运算和神经网络计算,因此需要强大的计算能力来保证推理速度和生成质量。
制造冲突性单个Token的推理过程整体运算量为 2×大模型参数量,因此大模型推理侧每日算力需求=每日调用大模型次数×每人平均查询Token数量×2×大模型参数量,仅以Google搜索引擎为例,每年调用次数至少超过2万亿,一旦和大模型结合,其AI 算力需求将十分可观。
模型优化和调整:生成式AI模型的优化和调整也需要大量的计算资源。在模型训练完成后,通常需要对模型进行调参、微调和优化,以进一步提高模型的性能和生成质量。这些过程也需要耗费大量的计算资源。
大规模数据处理:生成式AI模型通常需要在大规模数据集上进行训练和推理,因此需要强大的计算资源来处理和管理这些数据。这包括数据的存储、读取、预处理等过程,需要高效的计算资源来支持。
因此,我们看到,对于算力需求,随着AI技术的发展和应用场景的扩大,算力需求也在不断增加。AI模型的训练和推理都需要大量的计算资源支持,特别是深度学习模型等复杂模型需要更多的算力来训练和运行。
随着这个趋势的深入,半导体行业的收入叶城县指数级增长。Gartner预计,AI半导体收入将在预测期内继续保持两位数增长,2024年将增长25.6%,达到671亿美元(约4884.88亿元人民币),到2027年,AI芯片收入预计将比 2023 年的市场规模增长一倍以上,达到1194亿美元(当前约8692.32亿元人民币)。
因此,面对AI对于算力的需求以及算力市场的发展,算力行业也有一些措施来应对:
综上所述,随着 AI 技术的发展和应用,算力需求将会持续增加,算力行业应该通过提高硬件性能和效率、推动技术创新、拓展云计算服务、加强行业合作与共享等措施,应对这一趋势,实现行业的持续发展和进步。
我国算力产业规模快速增长,近5年平均增速超过30%,算力规模排名全球第二。各地根据自身资源禀赋特点和产业优势,纷纷制定规划,加快布局发展算力产业。
一方面,加快打通通道,推动数据快进快出,相继建成国家级互联网骨干直联点、国际互联网数据专用通道、根服务器镜像节点和国家顶级域名节点,加快建设全国“东数西算”南线主干道。另一方面,通过建设算力超市和算力调度平台,组织算力提供方、需求方和上下游企业进场对接。
相关数据显示,截至目前,全国在用数据中心机架总规模超过760万标准机架,算力总规模达到每秒1.97万亿亿次浮点运算(197EFLOPS),位居全球第二,服务器、计算机、智能手机等计算类产品产量全球第一,围绕算力枢纽节点建设130条干线光缆,算力应用广泛深入到政务、工业、交通、医疗等领域,不断催生新技术、新模式、新业态,算力赋能千行百业正向纵深推进,成为传统产业转型升级的重要支点,为经济高质量发展注入了强大动力。
当前,数字经济作为新经济形态,正成为重组全球要素资源、重塑全球经济结构、重构全球竞争格局的关键力量。当前,我国算力产业已初具规模,正加速向政务、工业、交通、医疗等领域拓展深化,推动互联网、大数据、人工智能与实体经济深度融合,持续赋能千行百业。
作者:贾桂鹏
来源公众号:元宇宙新声
本文由 @元宇宙新声 原创发布于人人都是产品经理。未经许可,禁止转载。
题图来自 Unsplash,基于 CC0 协议。
该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务。
此内容由惯性聚合(RSS阅读器)自动聚合整理,仅供阅读参考。 原文来自 — 版权归原作者所有。