Mistral триллион параметрлі модель шығарды
Модельді іске қосуға сегіз видеокартасы бар бір сервер жетеді, ал ашық салмақтарын компания бір ай ішінде Hugging Face-ке шығаруға уәде берді.
Фото: The Register
Француздық Mistral AI өзінің ең ірі моделі Mistral Large 4-ті көрсетті. Онда 1 трлн параметр бар және ол ашық модель болмақ, яғни компания оның салмақтарын еркін қолжетімді етеді. Әзірге Large 4 Mistral API-і арқылы алдын ала нұсқа ретінде жұмыс істейді.
Модель «сарапшылар қоспасы» схемасымен құрылған. Әр жауап кезінде желінің бір бөлігі ғана, шамамен 49 млрд параметр іске қосылады. Large 4 тек мәтінмен шектелмейді, пайымдай алады, ал 160-тан астам тілдегі деректерге оқытылған. Компания ішінде оны әзілдеп Le Chonk, яғни «Толстяк» деп атайды.
Модельді Mistral Еуропадағы өз дата-орталықтарында, 3800-ге жуық Nvidia Grace Blackwell үдеткішінде оқытты. Компанияның сөзінше, қытайлық бәсекелестерге осындай деңгейдегі модельге екі-үш есе көп чип керек. Дайын модельді іске қосуға сегіз GPU-ы бар бір сервер жетеді, мысалы Nvidia HGX B300 немесе AMD MI355X.
Бәсекелестер арасындағы орны
Тәуелсіз Artificial Analysis рейтингі Large 4-ті DeepSeek V4.1 Flash пен OpenAI-дың GPT6 Luna моделінің арасына қойды. Сол деректер бойынша ол америкалық ашық Inkling моделінен айтарлықтай озады. Mistral бағдарламалау, агенттер жұмысы, қаржы, құқық және киберқауіпсіздік бойынша Alibaba, Moonshot және DeepSeek модельдерімен тең түседі дейді.
Киберқауіпсіздікті компания бөлек атап өтті. Жабық америкалық модельдер шабуыл сипатындағы тапсырмалардан жиі бас тартады, тіпті оны қорғаушылар сұраса да. Large 4 мұндай тапсырмаларды жақсы орындайды. Сондықтан Mistral салмақтарды жариялауға асықпай, алдымен қауіпсіздік тексерісін жүргізіп жатыр.
«Әзірге біз сенімді серіктестермен және үкіметтермен жұмыс істейміз. Ашық салмақтар шабуылға емес, қорғануға қызмет етуі керек», — деді Mistral-дың ғылым жөніндегі вице-президенті Пьер Сток.
Mistral Large 4-ті жабық америкалық және ашық қытайлық модельдердің арасындағы еуропалық балама ретінде ұсынады. Қыркүйекте компания €21 млрд-қа бағаланды. Соңғы раундты Samsung, оның алдындағысын нидерландтық ASML басқарды.
Ашық салмақтар Hugging Face-те бір ай ішінде шығуы тиіс. Ашық модельдер нарығында бәсеке күшейіп келеді: бір күн бұрын америкалық Reflection AI өзінің ашық Beam моделін таныстырды.
Дереккөздер: TechCrunch — Mistral Large 4 релизі туралы, The Register — модельдің сипаттамалары мен рейтингі
