Configuración
Un modelo de razonamiento separado de DeepSeek, destilado usando salidas de DeepSeek-R1 sobre una base de Qwen2.5-14B. No es el modelo completo de 671B DeepSeek-R1 ni un paquete de dos modelos.
- Modelo
- deepseek-ai/DeepSeek-R1-Distill-Qwen-14B
- Parámetros / pesos
- 14.77B · — GB
- Formato de pesos
- BF16
- Contexto / concurrencia
- 8192 / 1
- Límite de contexto del checkpoint
- 131072
- Memoria estimada de GPU
- Requires an updated assessment
- RAM / disco planificados
- ≥ 64 GB / ≥ 150 GB
- Tiempo de ejecución del servicio
- vLLM · HTTP API
- Licencia
- MIT; modelo base Apache-2.0
La estimación incluye pesos de BF16, caché KV, espacio de trabajo de 2 GB y margen de 15% GPU. RAM y el disco son requisitos de planificación GlobalAtlas, no los mínimos oficiales del desarrollador. El tipo de disco, los controladores y el tiempo de ejecución se confirman antes de la instalación. El presupuesto de servicio de 8192 tokens incluye entrada y salida; un contexto más largo o más solicitudes simultáneas requiere redimensionamiento y una prueba de carga.
Ficha original del modelo