Qwen32B paramsbeliebt
Qwen3 32B lokal
Qwen3 32B ist ein Open-Weight-LLM aus der Familie Qwen mit 32B Parametern. Haupteinsatz: chat, RAG and general assistance. Erkannte Mindesthardware: TITAN RTX (24 GB).
Technische Daten
Parameter32B
Q4_K_M20.1 GB
Q5_K_M24.6 GB
Q835.8 GB
FP1671.5 GB
FamilieQwen
Letzter Sync2026-05-12
Verfügbare Quantizations
GGUF-GewichteQ4_K_M
20.1GB
Akzeptabel. Guter Kompromiss bei knapper VRAM.
Q5_K_M
24.6GB
Gute Qualität. Sweet Spot aus Größe und Präzision.
Q8
35.8GB
Fast FP16-Qualität. Produktionstauglich.
FP16
71.5GB
Referenzpräzision. Maximale Qualität, doppelte VRAM.
Kompatible GPUs
12 single-GPUGPUs, die Qwen3 32B auf einer einzelnen Karte ausführen können, nach VRAM-Spielraum sortiert.
TITAN RTX
NVIDIA24 GB · RTX 20
20.1 / 24 GBkomfortabel · Q4
RTX 3090
NVIDIA24 GB · RTX 30
20.1 / 24 GBkomfortabel · Q4
RTX 3090 Ti
NVIDIA24 GB · RTX 30
20.1 / 24 GBkomfortabel · Q4
RTX 4090
NVIDIA24 GB · RTX 40
20.1 / 24 GBkomfortabel · Q4
Quadro RTX 6000
NVIDIA24 GB · Quadro RTX
20.1 / 24 GBkomfortabel · Q4
RTX A5000
NVIDIA24 GB · RTX A (Ampere)
20.1 / 24 GBkomfortabel · Q4
RTX A5500
NVIDIA24 GB · RTX A (Ampere)
20.1 / 24 GBkomfortabel · Q4
RTX 4500 Ada
NVIDIA24 GB · RTX Ada
20.1 / 24 GBkomfortabel · Q4
NVIDIA A10
NVIDIA24 GB · Ampere DC
20.1 / 24 GBkomfortabel · Q4
NVIDIA A30
NVIDIA24 GB · Ampere DC
20.1 / 24 GBkomfortabel · Q4
NVIDIA L4
NVIDIA24 GB · Lovelace DC
20.1 / 24 GBkomfortabel · Q4
Radeon RX 7900 XTX
AMD24 GB · RDNA 3
20.1 / 24 GBkomfortabel · Q4
Empfohlene Multi-GPU-Rigs
2x / 4x consumer GPUsFür Qwen3 32B mit höherer Quantization oder mehr Kontext bietet ein Multi-GPU-Rig mehr Spielraum.
2× GTX 1080 Ti
NVIDIA22 GB · GTX 10
20.1 / 22 GBknapp · Q4
2× RTX 2080 Ti
NVIDIA22 GB · RTX 20
20.1 / 22 GBknapp · Q4
4× GTX 1060 6GB
NVIDIA24 GB · GTX 10
20.1 / 24 GBkomfortabel · Q4
4× GTX 1660
NVIDIA24 GB · GTX 16
20.1 / 24 GBkomfortabel · Q4
4× GTX 1660 Super
NVIDIA24 GB · GTX 16
20.1 / 24 GBkomfortabel · Q4
4× GTX 1660 Ti
NVIDIA24 GB · GTX 16
20.1 / 24 GBkomfortabel · Q4
4× RTX 2060 6GB
NVIDIA24 GB · RTX 20
20.1 / 24 GBkomfortabel · Q4
2× RTX 2060 12GB
NVIDIA24 GB · RTX 20
20.1 / 24 GBkomfortabel · Q4
Empfohlener Rig
4× GTX 1060 6GB
Qwen3 32B with Ubuntu, vLLM, Open WebUI and the model already downloaded.
Ähnliche Modelle
VRAM-Schätzung: Parameter x bits/8 plus Reserve. Reale Leistung hängt von Engine, Kontext und Batch ab.
sync: 2026-05-12