face-à-face · LLM local

Qwen 2.5 7B vs QwQ 32B

Comparatif chiffré : VRAM requise par quantization, GPUs compatibles pour faire tourner chacun en local, et verdict construit depuis les specs réelles. Pas de bench truqué, juste les chiffres.

7B
params Qwen 2.5 7B
32B
params QwQ 32B
Qwen
famille A
QwQ
famille B
▲ Specs côte à côte

Les chiffres bruts.

QwQ · 32B

QwQ 32B

  • Total paramètres32B
  • Contexte max33k tokens
  • FamilleQwQ
  • TypeDense
→ Fiche QwQ 32B
▲ VRAM par quantization

Combien de VRAM il te faut.

Estimation incluant l'overhead (KV cache + activations) ×1.12. Pour un MoE, on prend les paramètres totaux car le modèle complet doit être chargé en mémoire (les experts inactifs aussi).

QuantQwen 2.5 7BQwQ 32BÉcart
Q33.4 GB15.7 GB12.3 GB
Q44.4 GB20.2 GB15.8 GB
Q55.4 GB24.6 GB19.2 GB
Q66.4 GB29.1 GB22.7 GB
Q87.8 GB35.8 GB28.0 GB
FP1615.7 GB71.7 GB56.0 GB
▲ GPU minimum pour chacun en Q4

Quel GPU suffit pour quoi.

Pour Qwen 2.5 7B en Q4

GTX 1060 6GB

6 GB de VRAM — suffisant pour les 4.4 GB requis en Q4.

→ Fiche GTX 1060 6GB
Pour QwQ 32B en Q4

TITAN RTX

24 GB de VRAM — suffisant pour les 20.2 GB requis en Q4.

→ Fiche TITAN RTX
▲ Verdict

Ce que les chiffres disent.

QwQ 32B est 4.6× plus gros que Qwen 2.5 7B — plus de connaissances, mais 20 GB de VRAM contre 4 GB.

Choisir Qwen 2.5 7B

Tu manques de VRAM, tu veux du débit token/s, ou tu déploies sur edge (laptop, mini-PC).

→ Fiche Qwen 2.5 7B
Choisir QwQ 32B

Tu privilégies la qualité de raisonnement, tu as une grosse VRAM (48 GB+), tu acceptes un débit plus faible.

→ Fiche QwQ 32B

Tester avec ton GPU ?

Le calculateur croise ces 2 modèles avec 200+ GPUs et te donne tok/s estimés, €/Mtok et break-even cloud.