Arkkitehtuuripäätös
Käytä valittua mallikorttia koon arviointiin. Tiheiden 7B painojen muistiarvio ei ole uudelleenkäytettävissä eri Mistral-versioille.
GLOBALATLAS AI · Infrastruktuuri Mistralille
Mistral 7B ja muut Mistral-versiot eroavat kooltaan ja arkkitehtuuriltaan. Valitse tietty malli ennen laitteiston kokoamista.
Tarkka mallikortti ja painoversion tarkkuus
Tiheä tai asiantuntijoiden sekoitusarkkitehtuuri
Tuetut ajonaika, tarkkuus ja konteksti
Käytä valittua mallikorttia koon arviointiin. Tiheiden 7B painojen muistiarvio ei ole uudelleenkäytettävissä eri Mistral-versioille.
7B tiheä malli 16 bitillä sisältää noin 14 GB desimaalipainoja. Jätä muisti ajoaikaa ja kontekstia varten; älä tee käyttäjämääräarviota tästä.