H100 是一款旗舰级的 Inferred GPU。 凭借 80GB HBM3 的超大高速显存，它在处理大规模模型微调 (Fine-tuning)、超大规模语言模型 (LLM) 以及超高维度数据吞吐时表现卓越。
推荐训练/使用场景
LLM Training
Advanced AI Research
Deep Learning Fine-tuning
核心架构
Hopper
显存容量
80GB HBM3
显存带宽
3350 GB/s
CUDA 核心数
16896
FP16 半精度算力
1979 TFLOPS
最大功耗 (TDP)
700W