NVIDIA A100 40GB SXM vs NVIDIA GH200 96GB HBM3
A100 40GB SXM heeft 58% minder geheugen dan GH200 96GB HBM3 (40 GB vs. 96 GB). De geheugenbandbreedte is 61% lager (1.555 vs. 4 TB/s). In de cloud is de mediane on-demandprijs van de A100 40GB SXM $1.64 per GPU-hour, tegenover $5.19 voor de GH200 96GB HBM3. Per gigabyte GPU-geheugen is dat $0.041 vs. $0.054 per uur.
Specificaties
Fabrikantcijfers zoals vastgelegd door Kovara. Meer geheugen en bandbreedte worden gemarkeerd; geen van beide is een benchmark van uw workload.
| A100 40GB SXM | GH200 96GB HBM3 | |
|---|---|---|
| Fabrikant | NVIDIA | NVIDIA |
| Architectuur | Ampere | Hopper + Grace |
| Geheugen | 40 GB HBM2 | 96 GB HBM3 |
| Geheugenbandbreedte | 1.555 TB/s | 4 TB/s |
| Vermogen (TDP) | 400 W | 900 W |
| Vormfactor | SXM | Grace Hopper Superchip |
Cloudprijzen vandaag
Openbare aanbiedingen die Kovara volgt, genormaliseerd naar Amerikaanse dollars per GPU-hour. Prijzen gebruiken on-demandvoorwaarden waar beschikbaar; spot- en reserved-aanbiedingen staan op de prijspagina’s van elke GPU. Lager wordt gemarkeerd.
| A100 40GB SXM | GH200 96GB HBM3 | |
|---|---|---|
| Laagste prijs | $1.15 | $2.29 |
| Mediane prijs | $1.64 | $5.19 |
| Hoogste prijs | $1.99 | $6.50 |
| Mediaan per GB geheugen | $0.041 | $0.054 |
| Openbare aanbiedingen (alle voorwaarden) | 5 | 5 |
| Aanbieders | 3 | 3 |
Waar u elk kunt huren
Laagste gevolgde prijs per aanbieder. Open een aanbieder om elke aanbieding, regio en voorwaarde te zien.
Vragen
Welke is goedkoper om te huren, de A100 40GB SXM of de GH200 96GB HBM3?
Op dit moment is de goedkoopste on-demand-A100 40GB SXM die Kovara volgt $1.15 per GPU-hour en de goedkoopste GH200 96GB HBM3 $2.29. De medianen zijn $1.64 en $5.19. De goedkopere GPU per uur is niet altijd goedkoper per taak: een snellere of grotere GPU kan eerder klaar zijn of minder eenheden nodig hebben.
Welke heeft meer geheugen?
De GH200 96GB HBM3 heeft meer geheugen: 96 GB tegenover 40 GB. Het geheugen bepaalt welke modellen en batchgroottes op één GPU passen.
Zijn dit benchmarkresultaten?
Nee. Deze pagina vergelijkt fabrikantspecificaties en openbare prijzen. Werkelijke prestaties hangen af van het model, de precisie, de software en de interconnect. Kova kan u helpen de kosten voor een specifieke workload te schatten.