Qwen32B paramspopolare

Qwen2.5 Coder 32B Instruct in locale

Qwen2.5 Coder 32B Instruct è un LLM open-weight della famiglia Qwen, con 32B parametri. Uso principale: code and developer agents. Hardware minimo rilevato: TITAN RTX (24 GB).

Scheda tecnica
Parametri32B
Q4_K_M20.1 GB
Q5_K_M24.6 GB
Q835.8 GB
FP1671.5 GB
FamigliaQwen
Ultima sync2026-05-12

Quantization disponibili

Q4_K_M
20.1GB

Accettabile. Buon compromesso con VRAM limitata.

Q5_K_M
24.6GB

Buona qualità. Punto dolce tra dimensione e precisione.

Q8
35.8GB

Qualità quasi FP16. Comoda in produzione.

FP16
71.5GB

Precisione di riferimento. Qualità massima, più VRAM.

GPU compatibili

GPU capaci di eseguire Qwen2.5 Coder 32B Instruct su una sola scheda, ordinate per margine VRAM.

Rig multi-GPU consigliati

Per Qwen2.5 Coder 32B Instruct con quantization più alta o più contesto, un rig multi-GPU offre più margine.

Rig consigliato

4× GTX 1060 6GB

Qwen2.5 Coder 32B Instruct with Ubuntu, vLLM, Open WebUI and the model already downloaded.

Configura

Modelli simili

Stime VRAM: parametri x bits/8 più margine. Prestazioni reali secondo engine, contesto e batch.
sync: 2026-05-12