A30 是一款旗舰级的 Inferred GPU。 凭借 24GB HBM2 的超大高速显存，它在处理大规模模型微调 (Fine-tuning)、超大规模语言模型 (LLM) 以及超高维度数据吞吐时表现卓越。
推荐训练/使用场景
Mainstream AI Inference
HPC
Media Processing
核心架构
Ampere
显存容量
24GB HBM2
显存带宽
933 GB/s
CUDA 核心数
3584
FP16 半精度算力
330 TFLOPS
最大功耗 (TDP)
165W