RTX 5090 跑一天 AI,到底要耗多少电?我算给你看
很多人买 5090 之前都有个疑问:这卡跑 AI 费电吗?一天要多少电费?
今天我从底层算力架构出发,结合真实负载特性,给你算一笔明白账。不是简单拿 TDP 乘 24 小时那种小学生算法,是按真实 AI 任务的负载特征,分场景精细化推演。
一、先摆硬基准参数
硬件:RTX 5090 公版
官方 TDP:575W
第三方实测满载平均:560-570W
瞬时尖峰:最高 900W(不到 1ms,不影响平均功耗)
整机后台常驻功耗(CPU + 主板 + 内存 + 硬盘):42W
显存:32GB GDDR7,带宽 1792GB/s
这些都是英伟达官方 + Igor’s Lab、Tom’s Hardware 等第三方实测数据,不是我瞎编的。
二、分场景精细化推演
跑不同的 AI 任务,功耗差很多,不能一概而论。我挑了 5 个最常见的场景,从轻到重给你算。
场景 1:待机 / 轻负载(挂着不用,偶尔跑个小任务)
负载特征:
桌面待机、刷网页、写代码
偶尔跑个小脚本、推理个小模型
GPU 利用率 10-30%
推演数据:
GPU 平均功耗:80-120W
整机平均功耗:122-162W
单日 24 小时耗电:2.9-3.9 度
温度:40-50℃
显存占用:2-5GB
结论: 平时挂着不用,一天也就 3 度电左右,跟开个大灯泡差不多,没那么夸张。
场景 2:Stable Diffusion 画图(最常见的 AI 应用)
负载特征:
批量生成图片,512×512 到 2048×2048
SDXL + ControlNet + Lora
Tensor Core FP8 加速
不是持续 100% 满载,有加载、保存、预处理间隙
推演数据:
GPU 平均功耗:380-450W
整机平均功耗:422-492W
单日 24 小时耗电:10.1-11.8 度
温度:65-72℃
显存占用:12-20GB
带宽冲突系数:0.72(Tensor Core 和图形单元抢带宽)
关键细节:
画图不是持续满载,生成一张图跑几十秒,然后加载、保存、下一张,有间隙
分辨率越高,功耗越高,2K 图比 512 图功耗高 30% 左右
批量越大,平均功耗越高,因为间隙少了
结论: 一天啥也不干光画图,大概 10-12 度电,按工业电价 1 块钱一度,一天 10 块钱出头。
场景 3:大模型推理(7B / 13B / 32B)
现在最火的本地大模型,分三个量级:
7B 模型(Qwen2、Llama3 7B)
显存占用:5-8GB(4bit 量化)
GPU 平均功耗:250-320W
整机平均功耗:292-362W
单日耗电:7.0-8.7 度
温度:58-65℃
13B 模型
显存占用:10-14GB(4bit 量化)
GPU 平均功耗:320-400W
整机平均功耗:362-442W
单日耗电:8.7-10.6 度
温度:62-70℃
32B 模型(接近 5090 显存上限)
显存占用:22-28GB(4bit 量化)
GPU 平均功耗:400-480W
整机平均功耗:442-522W
单日耗电:10.6-12.5 度
温度:68-75℃
显存带宽利用率:85%+,开始出现带宽瓶颈
关键细节:
推理不是持续满载,是脉冲式的:生成 token 的时候忙,等用户输入的时候闲
上面算的是 “持续生成” 的平均功耗,正常聊天用的话功耗要低一半
模型越大,显存压力越大,带宽冲突越明显,功耗越高
结论: 日常用 7B 模型聊天,一天也就 5-6 度电;持续跑 32B 模型推理,一天 12 度左右。
场景 4:LoRA 微调训练(重度负载)
训练比推理费电多了,因为要反向传播、梯度更新,全卡都在跑。
负载特征:
7B/13B 模型 LoRA 微调
batch size 开到显存上限
持续满载,间隙极少
Tensor Core + CUDA + 显存全忙
推演数据:
GPU 平均功耗:500-550W
整机平均功耗:542-592W
单日 24 小时耗电:13.0-14.2 度
温度:72-78℃(接近 88℃降频阈值)
显存占用:20-28GB
带宽冲突系数:0.65(多单元抢带宽,有效带宽下降 35%)
关键细节:
训练是真的费电,基本接近 TDP 上限了
连续跑几天的话,显存碎片会慢慢累积,功耗还会再涨 5-10%
温度高了之后,会有轻微降频,功耗反而不会再涨,但性能会掉
结论: 全天跑微调训练,一天 13-14 度电,是所有场景里最费电的,但也没到离谱的程度。
场景 5:极限烤机(理论上限)
负载特征:
OCCT、FurMark 纯烤机
所有单元 100% 拉满
真实 AI 任务根本跑不到这么高
推演数据:
GPU 峰值功耗:575W(新驱动限制后)
整机峰值功耗:617W
理论单日上限:14.8 度
温度:85℃+,撞温度墙
结论: 理论上限一天 15 度不到,真实使用根本跑不到这么高。
三、真实使用一天:混合负载推演
没人会 24 小时跑同一种任务,真实情况是混合的:
8 小时:上班挂着,偶尔用一下(轻负载)
8 小时:跑 SD 画图 + 大模型推理(中等负载)
8 小时:后台跑 LoRA 微调(重度负载)
加权平均计算:
轻负载 8 小时:(122+162)/2 × 8 ÷ 1000 = 1.14 度
中等负载 8 小时:(422+492)/2 × 8 ÷ 1000 = 3.66 度
重度负载 8 小时:(542+592)/2 × 8 ÷ 1000 = 4.54 度
全天合计:≈ 9.3 度电
按居民电价 0.5 元 / 度,一天 4 块 6;按工业电价 1 元 / 度,一天 9 块 3。
没你想象的那么费电吧?
四、几个反常识的结论
- 推理比你想的省电
很多人以为跑大模型很费电,其实 7B 模型聊天,平均功耗也就 200 多 W,比玩游戏省电多了。 - 训练才是真费电
微调训练的功耗是推理的 2 倍,是待机的 5 倍,真要天天跑训练,电费还是要算一算的。 - 显存不够用的时候,功耗反而会降
很多人以为显存满了功耗会更高,其实不对。显存不够的时候,会触发 UVM 页面置换,GPU 会等数据,反而会闲下来,功耗会降,但性能会暴跌。 - 长时间跑,功耗会慢慢涨
连续跑几天,显存碎片累积、温度升高、散热效率下降,功耗会慢慢涨 5-10%,这也是为什么长时间跑 AI 会越来越卡、越来越热的原因之一。
五、边界说明
以上数据基于公版 RTX5090,非公版丐版功耗可能低一点,旗舰版可能高一点
整机后台功耗 42W 是典型中高端配置,不同 CPU、主板会有差异
功耗数值是平均负载,不是瞬时峰值,瞬时尖峰不影响整体耗电
推演基于公开硬件参数 + 负载特征建模,实际使用会因具体任务、驱动版本、环境温度有浮动
底层带宽冲突、显存碎片、时序衰减等机制,属于更深入的算力仿真体系,这里只用到了结论,完整公式以后有机会再讲
总结表
场景 GPU 平均功耗 整机平均功耗 单日耗电 温度 显存占用
待机轻负载 80-120W 122-162W 2.9-3.9 度 40-50℃ 2-5GB
SD 画图 380-450W 422-492W 10.1-11.8 度 65-72℃ 12-20GB
7B 推理 250-320W 292-362W 7.0-8.7 度 58-65℃ 5-8GB
13B 推理 320-400W 362-442W 8.7-10.6 度 62-70℃ 10-14GB
32B 推理 400-480W 442-522W 10.6-12.5 度 68-75℃ 22-28GB
LoRA 微调 500-550W 542-592W 13.0-14.2 度 72-78℃ 20-28GB
极限烤机 575W 617W 14.8 度(理论上限) 85℃+ 满
混合使用一天 -
1416



被折叠的 条评论
为什么被折叠?



