Nemotron8B paramspopular

Nemotron Labs Diffusion 8B Base en local

Nemotron Labs Diffusion 8B Base es un LLM open-weight de la familia Nemotron, con 8B parámetros. Uso principal: chat, RAG and general assistance. Hardware mínimo detectado: GTX 1060 6GB (6 GB).

Ficha técnica
Parámetros8B
Q4_K_M5.0 GB
Q5_K_M6.1 GB
Q88.9 GB
FP1617.9 GB
FamiliaNemotron
Última sync2026-06-23

Quantizations disponibles

Q4_K_M
5.0GB

Aceptable. Buen compromiso si la VRAM es limitada.

Q5_K_M
6.1GB

Buena calidad. Punto dulce tamaño / precisión.

Q8
8.9GB

Calidad casi FP16. Cómodo para producción.

FP16
17.9GB

Precisión de referencia. Máxima calidad, más VRAM.

GPUs compatibles

GPUs capaces de ejecutar Nemotron Labs Diffusion 8B Base en una sola tarjeta, ordenadas por margen de VRAM.

Rigs multi-GPU recomendados

Para Nemotron Labs Diffusion 8B Base con quantization más alta o más contexto, un rig multi-GPU da más margen.

Rig recomendado

2× GTX 1650

Nemotron Labs Diffusion 8B Base with Ubuntu, vLLM, Open WebUI and the model already downloaded.

Configurar

Modelos similares

Estimaciones VRAM: parámetros x bits/8 más margen. El rendimiento real varía según motor, contexto y batch.
sync: 2026-06-23