A30 は、フラッグシップ級の Inferred GPUです。 24GB HBM2 の大容量高速VRAMにより、大規模モデルの微調整 (Fine-tuning)、大規模言語モデル (LLM)、高次元データスループットの処理に優れています。
推奨されるトレーニング/使用シナリオ
Mainstream AI Inference
HPC
Media Processing
アーキテクチャ
Ampere
VRAM容量
24GB HBM2
VRAM帯域幅
933 GB/s
CUDAコア数
3584
FP16演算性能
330 TFLOPS
最大消費電力 (TDP)
165W