Arhitektuuripõhimõte
Mitme GPU-ga treeninguks määrake topoloogia ja kommunikatsiooninõuded. Seotud serverite mälu arvud ei moodusta klastrit.
GLOBALATLAS AI · AI koolitus
AI treening
Koolitus salvestab aktivatsioone, gradient'eid ja optimeerija olekut lisaks mudeli kaaludele. Andmekogude läbilaskevõime ja kontrollpunktid on samuti olulised.
Reprodutseeritav treeningkäik
- 01
Versiooni andmekogum ja treeningkood
- 02
Mõõda treeningupartii, sealhulgas optimeerija olek
- 03
Salvesta kontrollpunktid ja kontrolli töö taastamist
Nõuded konfiguratsioonile
Mõõda esinduslik partii. Mitme-GPU treening nõuab selget ühendust ja jaotatud seadistust; see versioon kontrollib ühe-GPU pakkumisi.