每小时成本是多少:本地与云
本地GPU的成本是每小时电费,加上把购买价格摊到使用小时上的部分。每小时电费=功耗(kW)×每千瓦时电价。
示例输入(请换成你自己的):RTX 4090功耗450 W(NVIDIA的Total Graphics Power),电价0.14美元/kWh时为0.45 × 0.14 = 0.063美元/小时。RTX 4070功耗200 W,即0.028美元/小时。
云端:RunPod列出的RTX 4090(24 GB)在Community Cloud为0.34美元/小时,在Secure Cloud为0.89美元/小时,读取于2026年11月2日。
Lambda列出的A6000(48 GB)为1.09美元/小时,A100(40 GB)为1.99美元/小时,均为每块GPU按需价格,读取于2026年11月2日。
云端价格会不经通知而变化,决定前请查看服务商页面。
本地GPU何时相对云算力回本
盈亏平衡小时数=购买价格 ÷(云端每小时价格 − 本地每小时电费)。
以1,800美元购入的RTX 4090对比RunPod Community Cloud的RTX 4090(0.34美元/小时):1,800 ÷(0.34 − 0.063)=约6,500小时,每周20小时约325周。
同一张卡对比RunPod Secure Cloud的RTX 4090(0.89美元/小时):1,800 ÷(0.89 − 0.063)=约2,200小时,每周20小时约109周。
全天候运行时,这两个数字分别变成约271天(Community)和约91天(Secure)。
该结果不含转售价值、安装显卡的电脑以及你的时间,并且假设租用的GPU与你要买的显卡一样有24 GB显存。
云GPU服务商如何对比
以下是2026年11月2日从各服务商页面读取的按需标价,按每GPU小时计,不含税。
RunPod(Community / Secure):RTX 4090 24 GB 0.34美元/小时 / 0.89美元/小时;A100 PCIe 80 GB 1.19美元/小时 / 1.79美元/小时;L40S 48 GB 0.79美元/小时 / 1.09美元/小时;RTX A6000 48 GB 0.33美元/小时 / 0.59美元/小时。
Lambda(单GPU实例):A6000 48 GB 1.09美元/小时;A100 40 GB 1.99美元/小时;H100 PCIe 80 GB 3.29美元/小时;H100 SXM 80 GB 4.29美元/小时。
DigitalOcean GPU Droplets:RTX 6000 Ada 48 GB 1.57美元/小时;L40S 48 GB 1.57美元/小时;H100 80 GB 4.41美元/小时。
AWS EC2 g4dn.2xlarge(一块NVIDIA T4,16 GiB):按需0.752美元/小时,1年预留0.474美元/小时,竞价0.311美元/小时,数据来自第三方价格索引Vantage。T4比RTX 4090慢得多,因此不是同等对比。
1年与全天候运行成本是多少
每周20小时(每年1,040小时),示例RTX 4090第一年成本为1,866美元(1,800美元 + 1,040 × 0.063美元),而RunPod Community Cloud为354美元,Secure Cloud为926美元。
累计来看,本地显卡在对比Community Cloud时约6.2年后更便宜,对比Secure Cloud时约2.1年后更便宜。
全天候运行(每年8,760小时)时,示例显卡每年电费约552美元,而Community Cloud为2,978美元,Secure Cloud为7,796美元。
一次性10小时的微调任务,在Lambda用A100 40 GB(1.99美元/小时)花费19.90美元,无需购买硬件。
常见问题
可以用云GPU做全天候持续推理吗?
可以,但这是租用最贵的场景。租用RTX 4090运行8,760小时,在RunPod Community Cloud每年2,978美元,在Secure Cloud为7,796美元(读取于2026年11月2日);示例本地显卡购买后每年电费约552美元。
偶尔使用时,云GPU总是更便宜吗?
每月只用几小时时是的:在Lambda用A100 40 GB跑10小时只需19.90美元,无需买硬件。只有当你把GPU用上数百小时,盈亏平衡才有意义。
我的GPU应该和哪个云端价格比?
和显存相同的GPU比。RTX 4090(24 GB)对应RunPod的RTX 4090:0.34美元/小时(Community)或0.89美元/小时(Secure)。AWS的T4(0.752美元/小时)只有16 GiB,速度也慢得多。
云GPU价格是固定的吗?
不是。服务商会调整标价,DigitalOcean的价格页面本身也说明价格可能变动。请在决定当天查看服务商页面。
如果本地GPU在推理中途损坏怎么办?
在更换之前服务会中断。云端算力可以作为后备,这也是许多人在本地GPU之外保留少量云预算的原因。
有GDPR要求的欧盟用户怎么办?
合规要求会影响你能使用的服务商。欧盟GDPR云GPU对比 →涵盖Hetzner、Scaleway和OVHcloud。
比较本地与云GPU成本时的常见错误
- 把示例输入当成事实:购买价格、功耗和电价会让结果相差数倍。
- 忽略主机电脑:GPU需要机器、电源和散热,这些不在显卡价格里。
- 比较不同显存容量:16 GiB的T4和24 GB的RTX 4090跑不了同样的模型。
- 只看一个档位:RunPod同一款RTX 4090在Secure Cloud比在Community Cloud贵约2.6倍。
- 认为本地一定更便宜:在这个示例里,低于约2,200至6,500小时时,租用的显卡更便宜。
相关阅读
- 租用GPU云 vs 购买本地硬件:企业AI TCO对比 2026 — 在企业采购规模下的同一个租用vs购买问题,附完整的TCO与盈亏平衡模型。
- 什么时候应该结合本地和云端LLM推理? — 在你已经知道哪个更便宜之后,如何设计架构的问题。
来源
- RunPod GPU价格,读取于2026年11月2日
- Lambda GPU价格,读取于2026年11月2日
- DigitalOcean GPU Droplet价格,读取于2026年11月2日
- AWS EC2 g4dn.2xlarge价格(Vantage),第三方索引,读取于2026年11月2日
- NVIDIA GeForce RTX 4090规格和RTX 4070
