Nemotron120B paramspopolare

NVIDIA Nemotron 3 Super 120B A12B BF16 in locale

NVIDIA Nemotron 3 Super 120B A12B BF16 è un LLM open-weight della famiglia Nemotron, con 120B parametri. Uso principale: chat, RAG and general assistance. Hardware minimo rilevato: NVIDIA A100 80GB (80 GB).

Scheda tecnica
Parametri120B
Q4_K_M75.4 GB
Q5_K_M92.2 GB
Q8134.1 GB
FP16268.2 GB
FamigliaNemotron
Ultima sync2026-05-12

Quantization disponibili

Q4_K_M
75.4GB

Accettabile. Buon compromesso con VRAM limitata.

Q5_K_M
92.2GB

Buona qualità. Punto dolce tra dimensione e precisione.

Q8
134.1GB

Qualità quasi FP16. Comoda in produzione.

FP16
268.2GB

Precisione di riferimento. Qualità massima, più VRAM.

GPU compatibili

GPU capaci di eseguire NVIDIA Nemotron 3 Super 120B A12B BF16 su una sola scheda, ordinate per margine VRAM.

Rig multi-GPU consigliati

Per NVIDIA Nemotron 3 Super 120B A12B BF16 con quantization più alta o più contesto, un rig multi-GPU offre più margine.

Rig consigliato

4× TITAN RTX

NVIDIA Nemotron 3 Super 120B A12B BF16 with Ubuntu, vLLM, Open WebUI and the model already downloaded.

Configura

Modelli simili

Stime VRAM: parametri x bits/8 più margine. Prestazioni reali secondo engine, contesto e batch.
sync: 2026-05-12