RTX PRO 6000 Blackwell Server Edition

사양 해설

용도: AI inference, graphics 및 enterprise compute

1. 0196 GB GDDR7 메모리

   VRAM

   96 GB

   메모리 유형

   GDDR7

   메모리 대역폭

   1.597 TB/s

   GDDR은 패키지에 적층하지 않고 GPU 주변 보드에 장착하는 그래픽 메모리입니다. 그래픽, 렌더링, 비용 효율적인 추론용 카드에 널리 사용됩니다.

   VRAM은 카드의 작업 공간입니다. 모델 가중치, 활성화 값, 데이터 세트가 이 안에 들어가야 하며, 그렇지 않으면 여러 GPU에 나누어야 합니다. 16비트 정밀도에서 가중치만 고려한 경험칙(매개변수 십억 개당 약 2 GB): 활성화 값과 캐시를 제외하면 매개변수 최대 약 48B개까지입니다. 이는 기록된 VRAM을 바탕으로 한 단순 계산이며 벤치마크가 아닙니다.

2. 02Blackwell 아키텍처

   아키텍처

   Blackwell

   세대

   RTX PRO Blackwell

   출시 연도

   2025

   수명 주기 상태

   Current

   Blackwell은 다섯 번째 세대 텐서 코어와 FP4까지 내려가는 저정밀도 형식 지원을 추가했습니다. (아키텍처에 대한 일반적인 맥락이며, 이 특정 카드에 대한 설명이 아닙니다.)

   2025년 출시. Kovara 기록에는 현행 세대 제품으로 등록되어 있습니다.

3. 03폼 팩터 및 전력

   NVLink

   미지원

   MIG

   지원

   폼 팩터

   PCIe dual-slot / single-slot liquid

   TDP

   600 W

   Kovara 기록에는 NVLink 지원이 없으므로, 이 제품의 멀티 GPU 작업은 데이터 이동에 PCIe나 서버 간 네트워크를 사용합니다.

   멀티 인스턴스 GPU(MIG)는 물리 GPU 하나를 각각 자체 메모리와 컴퓨팅 자원을 갖춘 격리된 슬라이스로 나눌 수 있어, 여러 소규모 워크로드가 카드 하나를 공유할 수 있습니다.

   PCIe 카드는 표준 서버 및 워크스테이션 확장 슬롯에 장착되므로 다양한 시스템에 적합합니다.

   TDP는 정격 열 설계 전력으로, 서버의 전력 공급과 냉각을 계획할 때 쓰는 수치입니다.

4. 04용도

   주요 용도(기록됨)

   AI inference / graphics / enterprise compute

   Kovara가 이 제품에 대해 기록한 용도입니다. 메모는 워크로드를 일반적인 관점에서 설명하며, 성능에 대한 주장이 아닙니다.

   • AI inference학습된 모델을 실행해 요청에 응답하는 과정입니다. 메모리 용량, 지연 시간, 요청당 비용이 주된 고려 사항입니다.
   • graphics인터랙티브 그래픽과 전문 디자인 또는 엔지니어링 애플리케이션.
   • enterprise compute

수치는 2026년 9월 03일에 마지막으로 검증된 Kovara 마스터 데이터입니다. 설명은 기술을 일반적으로 다룬 것으로, 벤치마크가 아니며 가격이나 가용성에 대해서는 아무것도 말하지 않습니다.