NVIDIA A100 40GB SXM vs NVIDIA GH200 96GB HBM3
A100 40GB SXMのメモリ容量はGH200 96GB HBM3より58%少なくなっています（40 GB 対 96 GB）。 メモリ帯域幅は61%低くなっています（1.555 対 4 TB/s）。 クラウドでは、A100 40GB SXMのオンデマンド価格の中央値はGPU-hourあたり$1.64で、GH200 96GB HBM3は$5.19です。 GPUメモリのギガバイトあたりでは、時間あたり$0.041対$0.054です。
仕様
Kovaraが記録したメーカー公表値です。メモリと帯域幅が大きい方を強調表示していますが、いずれもお客様のワークロードのベンチマークではありません。
| A100 40GB SXM | GH200 96GB HBM3 | |
|---|---|---|
| メーカー | NVIDIA | NVIDIA |
| アーキテクチャ | Ampere | Hopper + Grace |
| メモリ | 40 GB HBM2 | 96 GB HBM3 |
| メモリ帯域幅 | 1.555 TB/s | 4 TB/s |
| 電力（TDP） | 400 W | 900 W |
| フォームファクター | SXM | Grace Hopper Superchip |
現在のクラウド価格
Kovaraが追跡する公開オファーを、GPU-hourあたりの米ドルに正規化しています。価格は可能な場合はオンデマンド条件を使用しています。スポットや予約のオファーは各GPUの価格ページに掲載しています。安い方を強調表示しています。
| A100 40GB SXM | GH200 96GB HBM3 | |
|---|---|---|
| 最低価格 | $1.15 | $2.29 |
| 価格の中央値 | $1.64 | $5.19 |
| 最高価格 | $1.99 | $6.50 |
| メモリGBあたりの中央値 | $0.041 | $0.054 |
| 公開オファー（すべての条件） | 5 | 5 |
| プロバイダー | 3 | 3 |
それぞれのレンタル先
プロバイダーごとの追跡最低価格です。プロバイダーを開くと、すべてのオファー、リージョン、条件を確認できます。
よくある質問
A100 40GB SXMとGH200 96GB HBM3、レンタルが安いのはどちらですか？
現在Kovaraが追跡している最安のオンデマンド価格は、A100 40GB SXMがGPU-hourあたり$1.15、GH200 96GB HBM3が$2.29です。中央値は$1.64と$5.19です。時間あたりで安いGPUが、ジョブ単位でも安いとは限りません。より高速または大容量のGPUなら、早く終わったり、必要な台数が少なくて済んだりすることがあります。
メモリが多いのはどちらですか？
GH200 96GB HBM3の方がメモリが多く、96 GBに対して40 GBです。どのモデルやバッチサイズが一基のGPUに収まるかは、メモリで決まります。
これはベンチマーク結果ですか？
いいえ。このページでは、メーカーの仕様と公開価格を比較しています。実際の性能は、モデル、精度、ソフトウェア、インターコネクトによって異なります。特定のワークロードのコスト見積もりは、Kovaがお手伝いします。