A40 是一款旗舰级的 Inferred GPU。 凭借 48GB GDDR6 的超大高速显存，它在处理大规模模型微调 (Fine-tuning)、超大规模语言模型 (LLM) 以及超高维度数据吞吐时表现卓越。
推荐训练/使用场景
Visual Computing
AI Training
Virtualization
核心架构
Ampere
显存容量
48GB GDDR6
显存带宽
696 GB/s
CUDA 核心数
10752
FP16 半精度算力
149 TFLOPS
最大功耗 (TDP)
300W