Εκπαίδευση
Κατανομή μνήμης για βάρη, κατάσταση optimizer και ενεργοποιήσεις. Η εκπαίδευση πολλαπλών GPU χρειάζεται επίσης κατάλληλη διασύνδεση.
HOPPER · ΚΕΝΤΡΟ ΔΕΔΟΜΕΝΩΝ
80 GB HBM3 μνήμης για εργασίες όπου ο προϋπολογισμός μνήμης διαμορφώνει την αρχιτεκτονική. Σχεδιάστε τον διακομιστή εκπαίδευσης ή inference γύρω από το μοντέλο, το dataset και τη διαμόρφωση GPU.
Προβολή διαμορφώσεωνΟ ΔΙΑΚΕΝΤΡΩΜΕΝΟΣ ΣΑΣ ΔΙΑΚΟΜΙΣΤΗΣ
Η μνήμη GPU αποτελεί μέρος του διακομιστή. Καθορίστε CPU, RAM συστήματος, αποθήκευση και περιοχή για να ελέγξετε την πλήρη διαμόρφωση.
ΦΟΡΤΙΟ ΕΡΓΑΣΙΑΣ
Κατανομή μνήμης για βάρη, κατάσταση optimizer και ενεργοποιήσεις. Η εκπαίδευση πολλαπλών GPU χρειάζεται επίσης κατάλληλη διασύνδεση.
Σχεδιάστε VRAM για το μοντέλο και την προσωρινή μνήμη KV μαζί. Το μήκος πλαισίου και τα παράλληλα αιτήματα επηρεάζουν τη ζήτηση μνήμης.
Ταιριάξτε την αριθμητική ακρίβεια και τις απαιτήσεις λογισμικού CUDA με τον υπολογισμό σας πριν επιλέξετε τον host.
ΤΟΠΟΘΕΣΙΑ
Διατηρήστε την υπολογιστική ισχύ κοντά στα δεδομένα και τους χρήστες σας. Η χωρητικότητα ελέγχεται για το επιλεγμένο μοντέλο και περιοχή.
Διαθεσιμότητα κατόπιν αιτήματος
Διαθεσιμότητα κατόπιν αιτήματος
Διαθεσιμότητα κατόπιν αιτήματος
ΣΥΓΚΡΙΣΗ
Εγκεκριμένες εργασίες CUDA και εκπαίδευση μοντέλων
Εξαρτήσεις μνήμης για εξαγωγή LLM και επιστημονικούς υπολογισμούς
Πρωτοτυπία, δημιουργία εικόνων και απόδοση
Η προδιαγραφή αναφοράς είναι H100 SXM 80 GB. Οι παραλλαγές PCIe και NVL διαφέρουν· η ακριβής παραλλαγή GPU πρέπει να επιβεβαιωθεί στη διαμόρφωση διακομιστή.
Όχι. Τα βάρη, η ακρίβεια, οι ενεργοποιήσεις και η cache μοιράζονται τον προϋπολογισμό μνήμης. Ελέγξτε το πλαίσιο εργασίας και δοκιμάστε το φόρτο εργασίας που προορίζεται.
Ναι, συμπεριλάβετε τον αριθμό GPU και τις απαιτήσεις διασύνδεσης στην αίτησή σας. Η χωρητικότητα και η τοπολογία χρειάζονται επιβεβαίωση πριν την ανάπτυξη.
Η ΔΙΑΜΟΡΦΩΣΗ ΣΑΣ
Επιλέξτε πόρους και χρόνο λειτουργίας. Θα επιβεβαιώσουμε τιμή για τη διαμόρφωσή σας.
Κάθε πόρος έχει τη δική του καταγεγραμμένη διαμόρφωση. Πολλαπλοί διακομιστές GPU δεν σχηματίζουν cluster NVLink. Οι μηνιαίες τιμές καλύπτουν ολόκληρη την περίοδο χρέωσης· η αποθήκευση και η κυκλοφορία εκτός διαμόρφωσης δεν περιλαμβάνονται.