Tababarka
Qoondee xusuusta miisaanka, xaaladda hagaajinta iyo habka wax-soo-saarka. Tababarka GPU badan ayaa sidoo kale u baahan isku xirka ku habboon.
Hopper · Xarunta Xogta
80 GB oo ah HBM3 xusuusta shaqooyinka halkaas oo miisaaniyadda xusuusta ay qaabeyso qaab-dhismeedka. Qorshee tababarkaaga ama server-ka inference-ka adoo ku saleynaya moodalka, xogta iyo qaab-dhismeedka GPU.
Eeg qaabeyntaServerkaaga
Xasuusta GPU waa qayb ka mid ah server-ka. Caddee CPU, RAM nidaamka, kaydinta iyo gobolka si aad u hubiso qaabdhismeedka dhameystiran.
Shaqooyinka
Qoondee xusuusta miisaanka, xaaladda hagaajinta iyo habka wax-soo-saarka. Tababarka GPU badan ayaa sidoo kale u baahan isku xirka ku habboon.
Qorshee VRAM ee moodooyinka iyo kaydka KV wadajir. Dhererka macnaha guud iyo codsiyada isku mar ah ayaa saameeya baahida xusuusta.
U dhigma saxnaanta tirada iyo shuruudaha software CUDA ee xisaabintaada ka hor intaadan dooran martida.
Goobta
Hayso xisaabinta meel u dhow xogtaada iyo isticmaaleyaasha. Awoodda waxaa la hubiyaa moodelka la doortay iyo goobta.
Helitaanka codsiga
Helitaanka codsiga
Helitaanka codsiga
Isbarbardhig
Hawlgaladii CUDA ee la aasaasay iyo tababarka qaabka.
Saadaasha LLM ee xasuusta badan iyo xisaabinta sayniska
Tijaabinta, abuurista sawirka iyo render-ka
Qeexida tixraaca waa H100 SXM 80 GB. Noocyada PCIe iyo NVL way ku kala duwan yihiin; nooca GPU-ga saxda ah waa in la xaqiijiyaa qaabeynta server-ka.
Maya. Miisaanka, saxnaanta, firfircoonida iyo cache-ka waxay wadaagaan miisaaniyadda xasuusta. Hubi qaab-dhismeedkaaga oo tijaabi shaqada la qorsheeyay.
Haa, ku dar tirada GPU iyo shuruudaha isku xirka codsigaaga. Awoodda iyo qaab-dhismeedka waa in la xaqiijiyaa ka hor inta aan la hawlgelin.
HABAYNTAADA
Dooro agab iyo waqtiga hawlgalka. Waxaan xaqiijin doonaa qiimaha habayntaada.
Khayraad kasta wuxuu leeyahay qaabeyntiisa liiska ah. Server-yada GPU badan ma sameeyaan koox NVLink ah. Qiimaha bil kasta wuxuu daboolayaa muddada biilinta oo dhan; kaydinta iyo taraafikada ka baxsan qaabeynta lama darin.