Phi3.8B params0.5B activos (MoE)128k contexto

Phi Tiny MoE 3.8B en local

Phi Tiny MoE 3.8B es un LLM open-weight de la familia Phi, con 3.8B parámetros. Uso principal: chat, RAG and general assistance. Hardware mínimo detectado: GTX 1650 (4 GB).

Ficha técnica
Parámetros3.8B
Contexto máximo128k
Q4_K_M2.4 GB
Q5_K_M2.9 GB
Q84.2 GB
FP168.5 GB
FamiliaPhi
Última sync2026-05-12

Quantizations disponibles

Q4_K_M
2.4GB

Aceptable. Buen compromiso si la VRAM es limitada.

Q5_K_M
2.9GB

Buena calidad. Punto dulce tamaño / precisión.

Q8
4.2GB

Calidad casi FP16. Cómodo para producción.

FP16
8.5GB

Precisión de referencia. Máxima calidad, más VRAM.

GPUs compatibles

GPUs capaces de ejecutar Phi Tiny MoE 3.8B en una sola tarjeta, ordenadas por margen de VRAM.

Rigs multi-GPU recomendados

Para Phi Tiny MoE 3.8B con quantization más alta o más contexto, un rig multi-GPU da más margen.

Rig recomendado

2× GTX 1650

Phi Tiny MoE 3.8B with Ubuntu, vLLM, Open WebUI and the model already downloaded.

Configurar

Modelos similares

Estimaciones VRAM: parámetros x bits/8 más margen. El rendimiento real varía según motor, contexto y batch.
sync: 2026-05-12