Konfigurasi
Model nalar DeepSeek kapisah sing didistilasi nganggo output DeepSeek-R1 ing basis Qwen2.5-14B. Iki dudu model 671B DeepSeek-R1 lengkap utawa paket loro model.
- Model
- deepseek-ai/DeepSeek-R1-Distill-Qwen-14B
- Parameter / bobot
- 14.77B · — GB
- Format bobot
- BF16
- Konteks / konkurensi
- 8192 / 1
- Wates konteks checkpoint
- 131072
- Memori GPU sing diprakirakake
- Requires an updated assessment
- RAM / disk sing direncanakake
- ≥ 64 GB / ≥ 150 GB
- Runtime panyajian
- vLLM · HTTP API
- Lisensi
- MIT; model basis Apache-2.0
Perkiraan kalebu bobot BF16, cache KV, workspace 2 GB, lan ruang kepala 15% GPU. RAM lan disk minangka syarat perencanaan GlobalAtlas, dudu minima resmi pangembang. Jinis disk, driver, lan runtime dikonfirmasi sadurunge instalasi. Anggaran panyajian token 8192 kalebu input lan output; konteks sing luwih dawa utawa panyuwunan simultan sing luwih akeh mbutuhake pangowahan ukuran lan test beban.
Kartu model asli