Qwen7B paramspopolare

Qwen2.5 Coder 7B Instruct in locale

Qwen2.5 Coder 7B Instruct è un LLM open-weight della famiglia Qwen, con 7B parametri. Uso principale: code and developer agents. Hardware minimo rilevato: GTX 1060 6GB (6 GB).

Scheda tecnica
Parametri7B
Q4_K_M4.4 GB
Q5_K_M5.4 GB
Q87.8 GB
FP1615.6 GB
FamigliaQwen
Ultima sync2026-05-12

Quantization disponibili

Q4_K_M
4.4GB

Accettabile. Buon compromesso con VRAM limitata.

Q5_K_M
5.4GB

Buona qualità. Punto dolce tra dimensione e precisione.

Q8
7.8GB

Qualità quasi FP16. Comoda in produzione.

FP16
15.6GB

Precisione di riferimento. Qualità massima, più VRAM.

GPU compatibili

GPU capaci di eseguire Qwen2.5 Coder 7B Instruct su una sola scheda, ordinate per margine VRAM.

Rig multi-GPU consigliati

Per Qwen2.5 Coder 7B Instruct con quantization più alta o più contesto, un rig multi-GPU offre più margine.

Rig consigliato

2× GTX 1650

Qwen2.5 Coder 7B Instruct with Ubuntu, vLLM, Open WebUI and the model already downloaded.

Configura

Modelli simili

Stime VRAM: parametri x bits/8 più margine. Prestazioni reali secondo engine, contesto e batch.
sync: 2026-05-12