A100 MIG 20GB slice

Especificaciones, explicadas

Se usa para AI training y inference

1. 0120 GB de memoria

   VRAM

   20 GB

   La VRAM es el espacio de trabajo de la tarjeta. Los pesos del modelo, las activaciones y los conjuntos de datos tienen que caber en ella o repartirse entre varias GPU. Regla general solo para los pesos con precisión de 16 bits (unos 2 GB por cada mil millones de parámetros): hasta aproximadamente 10 mil millones de parámetros, sin contar las activaciones ni la caché. Es una operación aritmética sobre la VRAM registrada, no un benchmark.

2. 02Arquitectura Ampere

   Arquitectura

   Ampere

   Año de lanzamiento

   2020

   Estado del ciclo de vida

   Previous

   Ampere incorporó a sus componentes para centros de datos los Tensor Cores de tercera generación, la precisión TF32 y Multi-Instance GPU (MIG). (Contexto general sobre la arquitectura, no una afirmación sobre esta tarjeta en concreto.)

   Se lanzó en 2020. Los registros de Kovara lo indican como un componente de generación anterior.

3. 03Potencia y refrigeración

   MIG

   Compatible

   Multi-Instance GPU (MIG) puede dividir una GPU física en particiones aisladas, cada una con su propia memoria y su propia capacidad de cómputo, de modo que varias cargas de trabajo más pequeñas puedan compartir una tarjeta.

4. 04Para qué se usa

   Uso principal (registrado)

   AI training / inference

   Estos son los usos que Kovara ha registrado para este componente. Las notas explican la carga de trabajo en términos generales; no son afirmaciones sobre el rendimiento.

   • AI trainingEl entrenamiento de un modelo a partir de datos. Suele ser la fase que más cómputo y memoria exige, a menudo repartida entre muchas GPU.
   • inferenceLa ejecución de un modelo entrenado para responder solicitudes. La capacidad de memoria, la latencia y el costo por solicitud son las preocupaciones habituales.

Las cifras son datos maestros de Kovara, verificados por última vez el 25 sept 2026. Las explicaciones describen la tecnología en general; no son benchmarks y no dicen nada sobre el precio ni la disponibilidad.