DeepSeek8B params128k contesto

DeepSeek R1 Distill 8B in locale

DeepSeek R1 Distill 8B è un LLM open-weight della famiglia DeepSeek, con 8B parametri. Uso principale: reasoning and problem solving. Hardware minimo rilevato: GTX 1060 6GB (6 GB).

Scheda tecnica
Parametri8B
Contesto massimo128k
Q4_K_M5.0 GB
Q5_K_M6.1 GB
Q88.9 GB
FP1617.9 GB
FamigliaDeepSeek
Ultima sync2026-05-12

Quantization disponibili

Q4_K_M
5.0GB

Accettabile. Buon compromesso con VRAM limitata.

Q5_K_M
6.1GB

Buona qualità. Punto dolce tra dimensione e precisione.

Q8
8.9GB

Qualità quasi FP16. Comoda in produzione.

FP16
17.9GB

Precisione di riferimento. Qualità massima, più VRAM.

GPU compatibili

GPU capaci di eseguire DeepSeek R1 Distill 8B su una sola scheda, ordinate per margine VRAM.

Rig multi-GPU consigliati

Per DeepSeek R1 Distill 8B con quantization più alta o più contesto, un rig multi-GPU offre più margine.

Rig consigliato

2× GTX 1650

DeepSeek R1 Distill 8B with Ubuntu, vLLM, Open WebUI and the model already downloaded.

Configura

Modelli simili

Stime VRAM: parametri x bits/8 più margine. Prestazioni reali secondo engine, contesto e batch.
sync: 2026-05-12