您现在的位置是:首页 >技术交流 >ChatGPT训练一次要耗多少电?网站首页技术交流

ChatGPT训练一次要耗多少电?

了不起的云计算V 2024-08-26 00:01:02
简介ChatGPT训练一次要耗多少电?

如果开个玩笑:问ChatGPT最大的贡献是什么?

“我觉得它对全球变暖是有一定贡献的。”知名自然语言处理专家、计算机科学家吴军在4月接受某媒体采访时如是说。

随着ChatGPT引爆AIGC,国内外巨头纷纷推出自己的AI大模型,大家为人工智能所描绘的盛世图景欢呼时,也应留意到盘踞在其上方的阴影——电力成本。

根据斯坦福人工智能研究所(HAI)发布的《2023年人工智能指数报告》,OpenAI的GPT-3单次训练耗电量高达1287兆瓦时(1兆瓦时=1000千瓦时)。

这是什么概念呢?对此吴军打了个形象的比方:

“ChatGPT训练一次要耗多少电?大概是3000辆特斯拉电动汽车,每辆跑到20万英里,把它跑死,这么大的耗电量,才够训练一次,这是非常花钱的一件事。”

据美国国家环保署评定,特斯拉Model Y每百英里(161公里)耗电28千瓦时,1278兆瓦时相当于3000辆特斯拉,每辆跑满20万英里(32.2万公里)。而根据一般的经验法则,大多数司机认为20万英里大关是汽车寿命上限。

OpenAI曾发布报告指出,自2012年以来,AI训练应用的电力需求每3个月到4个月就会翻一倍。大规模AI训练和推理通常需要庞大的数据中心算力提供支持,其背后有大量电力供应和冷却系统昼夜运转,由此导致能源成本和温室气体排放增加。

考虑到IT部门的高能耗胃口,为了消除工作负载、硬件和数据足迹中的低效率,最大限度地节约能源和资金,企业需要将数据中心置于IT运营的核心地位,从整体视角重新评估运营各个方面,从而推进可持续发展、优化能源效率。降低能耗的整体方法可能包括以下策略:

01使用高效节能的设备

企业需要对所有 IT 设备进行全面评估,识别出能耗较高的设备,用更节能的产品替换它们。作为全球领先的数字化解决方案供应商,戴尔科技集团将可持续发展置于一切工作的核心,不断提高数据中心基础设施解决方案的标准,帮助客户实现可持续发展目标。

02智能能源管理和监控

根据戴尔创新指数调查,39%的受访者正在转向技术以获得对碳影响更高的可见度。机器遥测数据可以为高能效、高性能机器的最佳组合提供微调的见解,从而使设备只在需要时使用电力。戴尔PowerEdge家族智能运维工具可助力企业实现碳排放能源洞察,提高可持续性。

03按需使用服务

仅在需要时使用数据和能源服务,有助于削减所有系统始终以最大负荷运行的开销。企业通过即服务选项来消除过度配置造成的浪费,而且无需操心生命周期管理,从而节省了在停用和报废硬件上花费的时间。

越来越多的企业开始认识到“即服务”的价值,在戴尔创新指数调查中,42%的企业正在尝试将能源使用作为一种服务来管理能源消耗。

总结:日益突出的能源成本迫使企业重新审视其对能源效率的看法,他们正在意识到绿色可持续不仅有助于保护环境,而且还能节省成本。在整体推进可持续发展时,企业需要全力以赴,而不是简单地修修补补。对IT来说,现在是拥抱可持续发展的最佳时机,也是更加必要的时机。

风语者!平时喜欢研究各种技术,目前在从事后端开发工作,热爱生活、热爱工作。