原书出处
大语言模型-基础与前沿 (熊涛)
12 第12章 环境影响
估算模型从训练到完成所需的总时间。然后以千瓦时(kWh)为单位计算功耗。总功耗估算为GPU、CPU和DRAM的综合功耗。
研究人员将总功耗其乘以PUE——PUE考虑了支持计算基础设施(主要是冷却)所需的额外能源。根据Ascierto(2018)的数据,PUE系数为1.58,这是2018年全球数据中心的平均值。
模型在训练过程中特定实例所需的总功率p由以下公式给出: t p = 1.58(p + p + g × p)/1000 t
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/大语言模型-基础与前沿 (熊涛)/_epub-src/EPUB/xhtml/chapter14.xhtml
EPUB SHA-256:1bd3e387da1e881a4b6e0214f2c7df6e30d5cdbd1f602c69fc88edacffe6743d