Configuración
Un modelo de razonamiento separado de DeepSeek, destilado a partir de salidas de DeepSeek-R1 sobre una base Qwen2.5-32B. No es el modelo completo de 671B DeepSeek-R1 ni un paquete de dos modelos.
- Modelo
- deepseek-ai/DeepSeek-R1-Distill-Qwen-32B
- Parámetros / pesos
- 32.76B · — GB
- Formato de pesos
- BF16
- Contexto / concurrencia
- 8192 / 1
- Límite de contexto de checkpoint
- 131072
- Memoria estimada de GPU
- Requires an updated assessment
- RAM / disco previstos
- ≥ 128 GB / ≥ 200 GB
- Ejecución del servicio
- vLLM · HTTP API
- Licencia
- MIT; modelo base Apache-2.0
La estimación incluye pesos de BF16, caché KV, espacio de trabajo de 2 GB y margen de seguridad de 15% GPU. RAM y disco son requisitos de planificación GlobalAtlas, no los mínimos oficiales del desarrollador. El tipo de disco, los controladores y el entorno de ejecución se confirman antes de la instalación. El presupuesto de servicio de 8192 tokens incluye entrada y salida; un contexto más largo o más solicitudes simultáneas requiere redimensionar y una prueba de carga.
Ficha original del modelo