NVIDIA GH200 96GB HBM3 vs NVIDIA RTX A4000 16GB
GH200 96GB HBM3 的内存比 RTX A4000 16GB 多 500%(96 GB 对比 16 GB)。 其内存带宽高 793%(4 对比 0.448 TB/s)。 在云端,GH200 96GB HBM3 的按需价格中位数为每 GPU-hour $5.19,RTX A4000 16GB 则为 $0.76。 按每 GB GPU 内存计算,即每小时 $0.054 对比 $0.048。
GH200 96GB HBM3 起价$2.29on-demand · 5 个产品 · 3 家服务商
RTX A4000 16GB 起价$0.15on-demand · 6 个产品 · 3 家服务商
GH200 96GB HBM3 内存96 GBHBM3
RTX A4000 16GB 内存16 GBGDDR6
规格
Kovara 记录的厂商数据。内存和带宽较高的一方会突出显示;两者都不代表您工作负载的基准测试结果。
| GH200 96GB HBM3 | RTX A4000 16GB | |
|---|---|---|
| 厂商 | NVIDIA | NVIDIA |
| 架构 | Hopper + Grace | Ampere |
| 内存 | 96 GB HBM3 | 16 GB GDDR6 |
| 内存带宽 | 4 TB/s | 0.448 TB/s |
| 功耗(TDP) | 900 W | 140 W |
| 外形规格 | Grace Hopper Superchip | PCIe single-slot |
当前云价格
Kovara 跟踪的公开产品,统一换算为每 GPU-hour 美元价格。有按需条款时采用按需价格;竞价和预留产品见各 GPU 的价格页面。较低者突出显示。
| GH200 96GB HBM3 | RTX A4000 16GB | |
|---|---|---|
| 最低价格 | $2.29 | $0.15 |
| 价格中位数 | $5.19 | $0.76 |
| 最高价格 | $6.50 | $0.76 |
| 每 GB 内存的中位数价格 | $0.054 | $0.048 |
| 公开产品(所有条款) | 5 | 6 |
| 服务商 | 3 | 3 |
各自的租用渠道
每家服务商的最低跟踪价格。打开服务商可查看所有产品、区域和条款。
常见问题
GH200 96GB HBM3 和 RTX A4000 16GB,哪个租起来更便宜?
目前 Kovara 跟踪到最便宜的按需 GH200 96GB HBM3 为每 GPU-hour $2.29,最便宜的 RTX A4000 16GB 为 $0.15。中位数分别为 $5.19 和 $0.76。每小时更便宜的 GPU,按单次任务算未必更便宜:更快或更大的 GPU 可能更早完成,或者所需数量更少。
哪款内存更大?
GH200 96GB HBM3 的内存更大:96 GB 对比 16 GB。内存决定了单个 GPU 能容纳哪些模型和批大小。
这些是基准测试结果吗?
不是。本页比较的是厂商规格和公开价格。实际性能取决于模型、精度、软件和互连。Kova 可以帮助您估算特定工作负载的成本。
