Arhitektuuripõhimõte
Kasuta valitud mudelikaarte suuruse määramiseks. Tiheda 7B kaalude mäluhinnangut ei saa taaskasutada teise Mistral versiooni jaoks.
GLOBALATLAS AI · Infrastruktuur Mistral jaoks
Mistral 7B ja teised Mistral väljaanded erinevad suuruse ja arhitektuuri poolest. Valige konkreetne mudel enne riistvara suuruse määramist.
Täpsed mudelikaardid ja kaalude revideerimine
Tihe või ekspertide segu arhitektuur
Toetatud jooksuaeg, täpsus ja kontekst
Kasuta valitud mudelikaarte suuruse määramiseks. Tiheda 7B kaalude mäluhinnangut ei saa taaskasutada teise Mistral versiooni jaoks.
7B tiheda mudeli 16-bitine versioon sisaldab umbes 14 GB kümnendväärtusi kaaludest. Jäta mälu jooksva töö ja konteksti jaoks; ära eelda kasutajate arvu sellest hinnangust.