从芯片盛会Hot Chips看AI基建:算力狂飙电力承压,英伟达、英特尔争相推出节能方案

当地时间8月26日,OpenAI硬件设施负责人Trevor Cai在Hot Chips 2024上发表了长达一小时的演讲,主题为“构建可扩展的AI基础设施”。他指出,OpenAI的一项重要观察结果是,扩大规模可以产生更好、更有用的人工智能(AI)。

作为全球芯片行业影响力最大的会议,Hot Chips于每年八月份在斯坦福大学举行。不同于其他行业会议以学术研究为主,Hot Chips是一场产业界的盛会,各大处理器公司会在每年的会上展现他们最新的产品以及在研的产品。

《每日经济新闻》记者注意到,AI浪潮推动数据中心激增,同时也伴随着能源需求的激增。在这样的背景下,此次的Hot Chips大会上,围绕人工智能的议题比以往任何一届都更加活跃。Trevor Cai的演讲着眼于解决能源和算力之间的问题,英特尔、IBM和英伟达等则是提出了更节能的技术方案。

摩根士丹利在8月份发布的研究预测称,生成式AI的电力需求将在未来几年内每年飙升75%,预计到2026年,其消耗的能源量将与西班牙在2022年的消耗量相当。科技巨头们该如何应对能源挑战?

英伟达公布Blackwell更多细节,英特尔们聚焦“节能方案”

当地时间8月26日,一年一度的半导体企业盛会Hot Chips 2024在斯坦福大学纪念礼堂举行,今年是第36届。

从会议第一天的情况来看,大部分的话题都集中在了更节能、安全且可扩展的大规模AI服务器部署方案上。

OpenAI硬件负责人Trevor Cai发表了“可预测的扩展和基础设施”主题演讲,谈到了提升计算能力所带来的可预测的扩展效益,这也是OpenAI自成立之初就关注的重点。一个重要的观察结果是,扩大规模可以产生更好、更有用的人工智能。“每次计算量翻倍,它都会得到更好的结果。模型的能力和计算资源的消耗是呈指数级别的上升的。自2018年以来,行业中前沿模型的计算量每年增长约4倍。”他说道。

最初,GPT-1只需几周的时间完成训练。如今,它已经扩展到需要庞大的GPU集群。因此,OpenAI认为AI的基础建设需要大量投资,因为计算能力的提升已经产生了超过8个数量级的效益。

似乎是为了呼应OpenAI的演讲,各大公司今天各自演讲也不约而同地提到了大规模部署AI服务器的计划方案。

IBM在大会上披露了即将推出的IBM Telum II处理器和IBM Spyre加速器的架构细节。新技术旨在显著扩展下一代IBM Z大型机系统的处理能力,通过一种新的AI集成方法帮助加速传统AI模型和大型语言AI模型的协同使用。IBM特别强调这次更新的先进I/O 技术旨在降低能耗和数据中心占用空间。

英伟达也在大会上放出了最新的AI集群架构Blackwell的相关消息。英伟达称,Blackwell拥有6项革命性技术,可支持多达10万亿参数的模型进行AI训练和实时大语言模型(LLM)推理。值得注意的是,英伟达的Quasar量化系统用于确定可以使用较低精度的内容,从而减少计算和存储。英伟达表示他们的宗旨就是在提高能源效率的同时为AI和加速计算性能提供新标准。

除此之外,英特尔、博通、海力士等公司的演讲中均提到了更节能的技术方案。

算力狂飙电力承压,科技巨头如何应对能源挑战?

科技巨头们着眼“更节能的”技术方案的根本原因在于,当前人工智能热潮正在增加更强大的处理器以及保持数据中心冷却所需的能源需求。

当前,微软、Alphabet和Meta等大型科技公司正在投资数十亿美元建设数据中心基础设施,以支持生成式人工智能,但数据中心的激增也伴随着能源需求的激增。

据彭博社报道,仅去年,大型科技公司就向数据中心设施投入了约1050亿美元。谷歌、苹果和特斯拉等公司不断通过新产品和服务增强AI能力。每项AI任务都需要巨大的计算能力,这意味着数据中心会消耗大量电力。国际能源署 (IEA)预测,到2026年,全球数据中心每年使用的能源量将相当于日本的电力消耗量。

Hugging Face的人工智能和气候负责人Sasha Luccioni提到,虽然训练AI模型需要耗费大量能源(例如,训练 GPT-3 模型耗费了大约1300兆瓦时的电力,而GPT-4的训练消耗是GPT3的50倍),但通常只进行一次。然而,由于查询量巨大,模型生成响应可能需要更多能源。

例如,当用户向 ChatGPT 等AI模型提问时,需要向数据中心发送请求,然后强大的处理器会生成响应。这个过程虽然很快,但消耗的能量也是巨大的。根据艾伦人工智能研究所的数据,对ChatGPT进行一次查询所消耗的电量相当于为灯泡点亮 20 分钟——是简单Google搜索耗电量的10倍以上。

然而,全球的电力资源有限,而数据中心需要持续稳定的电力供应来运行服务器和其他核心运营设备。如果能源供应不稳定,停机可能会给企业和其他用户造成重大经济损失。此外,巨大的能源消耗也引发了人们对环境的担忧。

为应对这一挑战,科技公司们开始寻找解决方案。

部分公司选择更清洁且高效的能源供给,如核能。亚马逊最近在宾夕法尼亚州东北部购买了一个价值6.5亿美元的核能数据中心园区设施,该设施将使用核反应堆产生的高达40%的电力,最终使亚马逊能够减少对当地电网的依赖。与此同时,微软聘请了核专家来带头寻找这种替代电源。微软还与核电站运营商签订了合同协议,为其位于弗吉尼亚州的一个数据中心提供电力。

除此之外,科技公司们不仅在前文所提到的一系列芯片节能技术进行努力,也在其他硬件设施和技术上下足了功夫。

谷歌正在开发人工智能专用芯片,例如张量处理单元(TPU),这些芯片针对人工智能任务进行了优化,而不是使用为游戏技术创建的图形处理单元(GPU)。

英伟达针对Blackwell芯片的直接液体冷却系统还宣布了一项研究,研究表明了如何重新利用从服务器中吸收的热量并将其回收到数据中心。据英伟达估计,冷却最多可减少数据中心设施耗电量28%。

然而,威斯康星大学麦迪逊分校的教授辛克莱提醒,杰文斯悖论在这里依然适用,即资源效率的提高往往会增加其总体利用率,而不是减少。“提高人工智能的效率,虽然减少了单次能耗,但整体使用率的增加最终会导致总体能耗的上升,”辛克莱解释道。这个悖论不仅适用于19世纪的火车煤炭使用,同样适用于当今的人工智能和电力消耗。

每日经济新闻

平台声明:该文观点仅代表作者本人,火星财经仅提供信息存储空间服务。发布者:火星财经,转转请注明出处:https://www.sengcheng.com/hangye/6241.html

(0)
火星财经的头像火星财经
上一篇 2024年8月28日 下午12:47
下一篇 2024年8月28日 下午2:07

相关推荐

  • 深读100

    英伟达没了市场优待权 仅仅高增长,已经不足以满足投资者的胃口了。投资者看着未来,不断地向英伟达讨要一个心安:AI浪潮会持续吗?高增长会持续持续再持续吗? (字母榜) 百元学平险“断缴”一年行不行 在给孩子买保险的过程中,应避免陷入一些误区。比如,对于部分家长而言,由于每年都给孩子花钱买学平险,但都没出险,存在“断缴”心理;也有家长一味地希望拉高保额。 (北京…

    2024年8月30日
    5100
  • 腾讯游戏持续霸榜、B站搅局,这个暑期档SLG狼烟四起:“减肝减氪”成突围利器

    刚刚过去的8月暑期档手游战况激烈,许多游戏也竞相推出新版本新活动来抓住玩家的视线,但是SLG(Simulation Game策略类游戏)品类悄悄地在这个火热的夏日跃升至流水榜单的高位。 点点数据于9月2日采集统计的数据显示,8月全球市场手游TOP100的总流水(仅计算移动端充值)超过440亿元。其中,中国厂商共54款产品上榜,流水合计预估290亿元,占总流水…

    2024年9月7日
    4500
  • 罗永浩:要“大肆炒作”尽快还清剩余5亿多债务!会在九个平台上同时运营账号,部分恢复婚丧嫁娶主持业务

    新浪科技讯 8月26日上午消息,罗永浩在其账号“罗永浩·钮祜禄”发文再谈“真还传”内情。罗永浩透露,接下来和团队会用一切合法合规合乎商业伦理的方式“大肆炒作”,开足马力以各种方式做大做强现金收入,尽快还掉剩余的5个多亿债务。 他谈到,马上会做的事情包括但不限于:1. 全面恢复社交媒体账号的更新和运营,这一次会在九个网络平台上同时运营;2. 部分恢复综艺节目的…

    2024年8月26日
    6200
  • 从设计默认值开始,给用户和产品带来更好的用户体验

    默认值是你的数字产品的默认基准设定值,这些填充设置的默认值虽然常常不多,但是换个角度来看,它更像是是设计师为设计作出一些基本的“决定”,帮助用户更快的让产品运行起来,上手使用。默认值对于产品和用户而言很重要,今天的文章,我们将会探讨设计师要如何设置默认值的样式、交互和字段细节,确保给用户和产品都能带来更好的用户体验。

    2017年4月17日
    5403
  • 德纳:树立中国周边战略全局观,坚决果断处理菲海警船滞留仙宾礁

      8月31日,仙宾礁泻湖内集结了中国海警4303舰、3104舰、5205舰,多艘大马力拖船包括南拖175、南拖185,以及征用了三十一艘渔船协同,就是要针对滞留仙宾礁的菲律宾9701海警船“马格巴努亚”号准备采取驱离行动。 8月31日上午,菲律宾9701号海警船突然主动起锚,然后在仙宾礁泻湖内持续进行船只机动。菲律宾海警船9701号想学仁爱礁非法坐滩的“马…

    2024年9月4日
    5500

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:sengchen@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信