H100
Ang reference ay H100 SXM 80 GB. Ang H100 NVL ay gumagamit ng ibang memory configuration; kailangang tukuyin ang eksaktong variant sa alok.
Mag-explore sa H100 →GLOBALATLAS AI · H100 vs H200
Ihambing ang H100 at H200 memorya, arkitektura, at mga konsiderasyon sa deployment gamit ang mga espesipikasyon ng manufacturer.
| Parameter | H100 | H200 |
|---|---|---|
| Memory ng GPU | 80 GB | 141 GB |
| Teknolohiya ng memorya | HBM3 | HBM3e |
| Arkitektura | Hopper | Hopper |
| Profile ng workload | AI training, inference at accelerated computing | Memory-intensive na inference ng LLM at scientific computing |
| Reference na variant | Ang reference ay H100 SXM 80 GB. Ang H100 NVL ay gumagamit ng ibang memory configuration; kailangang tukuyin ang eksaktong variant sa alok. | 141 GB ay GPU memory, hindi system RAM. Kumpirmahin ang bilang ng GPU at kinakailangang interconnect bago pumili ng training topology. |
| Presyo | Humiling ng presyo sa kahilinganConfiguration at rehiyon na kailangang kumpirmahin | Humiling ng presyo sa kahilinganConfiguration at rehiyon na kailangang kumpirmahin |
Ang reference ay H100 SXM 80 GB. Ang H100 NVL ay gumagamit ng ibang memory configuration; kailangang tukuyin ang eksaktong variant sa alok.
Mag-explore sa H100 →H200 ay isang kandidato kapag ang memory budget ng H100 ay limitado. Ang mas malaking VRAM nito ay hindi awtomatikong nagtatakda ng mas maraming requests kada segundo.
Mag-explore sa H200 →Gamitin ang parehong modelo o scene, precision, batch size, at bersyon ng software. I-record ang throughput, latency, peak memory, at kabuuang gastos sa server. Ang table na ito ay naglalaman ng hardware specifications, hindi ang nasusukat na performance ng aplikasyon.