NVIDIA · Hopper · datacenter
NVIDIA H100 80GB
- VRAM80 GB
- Bande passante mémoire2039 GB/s
- TDP nominal350 W
- Catégoriedatacenter
- Mémoire unifiéenon
face-à-face · GPU LLM
NVIDIA H100 80GB vs RTX 4090
Quel GPU pour faire tourner quel modèle en local. Comparatif sur VRAM, bande passante mémoire, consommation, et les modèles populaires que chacun peut charger en Q4 single-GPU.
80 GB
VRAM NVIDIA H100 80GB
24 GB
VRAM RTX 4090
2039 GB/s
BW NVIDIA H100 80GB
1008 GB/s
BW RTX 4090
▲ Specs côte à côte
Les chiffres bruts.
NVIDIA · RTX 40 · consumer
RTX 4090
- VRAM24 GB
- Bande passante mémoire1008 GB/s
- TDP nominal450 W
- Catégorieconsumer
- Mémoire unifiéenon
▲ Modèles compatibles en Q4 single-GPU
Qui peut faire tourner quoi.
Liste des modèles populaires (Llama 70B, Qwen 72B, Mistral Large…) qui passent en VRAM single-GPU en quantization Q4. Pour les multi-GPU ou les quants moins agressifs, ouvrir le calculateur.
Sur NVIDIA H100 80GB (80 GB)
Sur RTX 4090 (24 GB)
★ = exclusivité (ne tourne pas sur l'autre GPU en single-GPU Q4)
▲ Verdict
Ce que les chiffres disent.
NVIDIA H100 80GB a 56 GB de VRAM en plus, ce qui débloque 3 modèles au-dessus du seuil 24 GB. Côté débit, NVIDIA H100 80GB a 2039 GB/s contre 1008 GB/s pour RTX 4090 — soit ~102% plus de tok/s en inférence quantization-bound.
Choisir NVIDIA H100 80GB
Tu vises du serveur 24/7, multi-tenant, avec FP8 / sparsity hardware et NVLink à pleine vitesse.
→ Fiche NVIDIA H100 80GBChoisir RTX 4090
Tu veux un setup desktop accessible, pas de licence pro, garantie consumer standard.
→ Fiche RTX 4090Affiner avec ton vrai use case ?
Le calculateur estime tok/s, €/Mtok et break-even cloud pour ces GPUs avec le modèle de ton choix.