GLOBALATLAS AI · သီးသန့် Inference

DeepSeek-R1-Distill-Qwen-14B

DeepSeek-R1-Distill-Qwen-14B: self-hosted inference configuration, BF16 weights, 8192-token context, GPU memory နှင့် server ရွေးချယ်မှု။

ဖွဲ့စည်းမှု

DeepSeek-R1 outputs များကို Qwen2.5-14B base ပေါ်တွင် distilled လုပ်ထားသော သီးခြား DeepSeek reasoning model တစ်ခုဖြစ်သည်။ ၎င်းသည် အပြည့်အစုံ 671B DeepSeek-R1 model သို့မဟုတ် မော်ဒယ်နှစ်ခုပါ အစုအဝေး မဟုတ်ပါ။

မော်ဒယ်
deepseek-ai/DeepSeek-R1-Distill-Qwen-14B
Parameters / weights
14.77B · — GB
Weight format
BF16
Context / concurrency
8192 / 1
Checkpoint context limit
131072
ခန့်မှန်းထားသော GPU memory
Requires an updated assessment
စီစဉ်ထားသော RAM / disk
≥ 64 GB / ≥ 150 GB
Serving runtime
vLLM · HTTP API
လိုင်စင်
MIT; base model Apache-2.0

ခန့်မှန်းချက်တွင် BF16 weights, KV cache, 2 GB workspace နှင့် 15% GPU headroom ပါဝင်သည်။ RAM နှင့် disk သည် GlobalAtlas စီစဉ်မှုလိုအပ်ချက်များဖြစ်ပြီး developer ၏ တရားဝင် အနည်းဆုံးမဟုတ်ပါ။ တပ်ဆင်မီ disk အမျိုးအစား, drivers နှင့် runtime ကို အတည်ပြုပါမည်။ 8192-token serving budget တွင် input နှင့် output ပါဝင်သည်; context ပိုရှည်ခြင်း သို့မဟုတ် တပြိုင်နက်တည်း တောင်းဆိုမှုများ ပိုများခြင်းသည် အရွယ်အစားပြန်ချိန်ညှိခြင်းနှင့် load test လိုအပ်သည်။

မူလ model card

သင့်အခြေခံအဆောက်အအုံကို ရွေးပါ

Hardware ကို ရွေးပြီးနောက် specialist နှင့်အတူ ရရှိနိုင်မှုနှင့် model installation ကို အတည်ပြုပါ။ Server မှာယူရုံဖြင့် model ကို တပ်ဆင်မပေးပါ။

ဤမော်ဒယ်နှင့် ကိုက်ညီသော configuration ကို သင်နှင့်အတူ ရွေးချယ်ပါမည်။

အပြည့်အစုံ setup ကို တောင်းဆိုပါ

မော်ဒယ်၊ ဒေသနှင့် မျှော်မှန်းထားသော load ကို ထည့်သွင်းပါ။ ကျွန်ုပ်တို့၏ ကျွမ်းကျင်သူများက hardware, တပ်ဆင်မှု, access ကာကွယ်မှုနှင့် နောက်ဆုံးစျေးနှုန်းကို အတည်ပြုပါမည်။

Atlas နှင့် ဆွေးနွေးပါ →