A800 40GB Active

Specificaties uitgelegd

Gebruikt voor AI, data science en HPC workstation

1. 0140 GB HBM2-geheugen

   VRAM

   40 GB

   Geheugentype

   HBM2

   Geheugenbandbreedte

   1.555 TB/s

   HBM (High Bandwidth Memory) is in lagen gestapeld en zit direct naast de processor in dezelfde behuizing. Dat korte, brede pad geeft accelerators met HBM hun geheugenbandbreedte, en daarom worden ze meestal gekozen voor werk dat wordt begrensd door hoe snel data de cores bereikt, zoals inferentie met grote modellen en HPC-simulaties.

   VRAM is de werkruimte op de kaart. Modelgewichten, activaties en datasets moeten erin passen of over meerdere GPU’s worden verdeeld. Vuistregel voor alleen de gewichten bij 16-bit precisie (ongeveer 2 GB per miljard parameters): tot ruwweg 20 miljard parameters, vóór activaties en cache. Dit is een rekensom op basis van het vastgelegde VRAM, geen benchmark.

2. 02Ampere-architectuur

   Architectuur

   Ampere

   Lanceringsjaar

   2023

   Levenscyclusstatus

   Previous

   Ampere bracht Tensor Cores van de derde generatie, TF32-precisie en Multi-Instance GPU (MIG) naar zijn datacenteronderdelen. (Algemene context over de architectuur, geen uitspraak over deze specifieke kaart.)

   Gelanceerd in 2023. De records van Kovara vermelden dit als een onderdeel van de vorige generatie.

3. 03Gebouwd om over GPU’s te schalen

   NVLink

   Ondersteund

   MIG

   Ondersteund

   Vormfactor

   PCIe dual-slot active

   TDP

   240 W

   NVLink is een directe GPU-naar-GPU-verbinding. Waar het wordt ondersteund, kunnen GPU’s in dezelfde server sneller data uitwisselen dan alleen via PCIe, wat ertoe doet wanneer één trainingstaak over meerdere GPU’s is verdeeld.

   Multi-Instance GPU (MIG) kan één fysieke GPU opdelen in geïsoleerde delen, elk met eigen geheugen en eigen rekenkracht, zodat meerdere kleinere workloads een kaart kunnen delen.

   PCIe-kaarten passen in standaard uitbreidingsslots van servers en workstations, wat geschikt is voor een breed scala aan systemen.

   TDP is het nominale thermische ontwerpvermogen: het planningscijfer voor stroomvoorziening en koeling in een server.

4. 04Waarvoor het wordt gebruikt

   Primair gebruik (vastgelegd)

   AI / data science / HPC workstation

   Dit zijn de toepassingen die Kovara voor dit onderdeel heeft vastgelegd. De toelichtingen beschrijven de workload in algemene termen; het zijn geen prestatieclaims.

   • AI
   • data scienceVersnellen van analytics en klassieke machine learning op grote datasets.
   • HPC workstationWetenschappelijke en technische simulatie, waarbij numerieke precisie en geheugenbandbreedte ertoe doen.

De cijfers zijn stamgegevens van Kovara, laatst geverifieerd op 03 sep 2026. De toelichtingen beschrijven de technologie in het algemeen; het zijn geen benchmarks en ze zeggen niets over prijs of beschikbaarheid.