Meta Llama 4: Süni İntellektdə Yeni Dövrün Başlanğıcı Nədir?
...
Süni intellekt
Oxumaq vaxt alır?
Məqalələri dinləyə bilərsizMeta Llama 4 modellərinin təqdimatı
Meta şirkəti süni intellekt sahəsində yeni nəsil Llama 4 modellərini təqdim edib. Bu ailə Scout, Maverick və Behemoth adlı üç fərqli modeldən ibarətdir. Scout və Maverick modelləri açıq mənbə kimi ictimaiyyətə təqdim olunur, Behemoth isə yalnız daxili istifadə üçün nəzərdə tutulub.
Scout və Maverick modellərinin xüsusiyyətləri
Scout modeli Mixture of Experts (MoE) arxitekturasına əsaslanır, 109 milyard parametrə malikdir və 16 ekspertin içindən yalnız 2-si aktivləşərək 17 milyard aktiv parametr yaradır. Onun ən diqqətçəkən xüsusiyyəti 10 milyon token kontekst uzunluğunu dəstəkləməsidir. Scout modeli tək bir H100 GPU-da Int4 kvantizasiyası ilə işləyir və 200-dən çox dildə əvvəlcədən təlim keçib.
Maverick modeli isə 400 milyard parametrə malikdir və 128 ekspertin içindən 17 milyard aktiv parametr aktivləşdirir. O, MoE arxitekturasından istifadə edir və tək bir H100 DGX hostunda və ya çox GPU-da işləyə bilir. LMSYS Chatbot Arena-da 1417 ELO balı ilə GPT-4o və Gemini 2.0 Flash modellərini üstələyib.
Scout və Maverick modelləri multimodal girişləri, yəni mətn və şəkilləri dəstəkləyir. Onlar hər bir sorğuya qədər 8 şəkil qəbul edə bilir və 10 milyon token kontekst uzunluğuna malikdirlər.
Behemoth modeli və onun gücü
Behemoth modeli təxminən 2 trilyon parametrə malikdir və 16 ekspertin içindən 288 milyard aktiv parametr aktivləşdirir. Bu model STEM sahəsində GPT-4.5, Claude Sonnet 3.7 və Gemini 2.0 Pro-dan üstün performans göstərir. Lakin Behemoth modeli yalnız Meta-nın daxili istifadə üçün nəzərdə tutulub və ictimaiyyətə açıq deyil.
Meta-nın tətbiqlərində Llama 4 modelləri
Meta şirkəti Llama 4 modellərini WhatsApp, Instagram, Messenger və Facebook kimi məşhur tətbiqlərində istifadə edir. Hərçənd, hansı modelin konkret olaraq hansı tətbiqdə işlədiyi barədə rəsmi açıqlama yoxdur.
Süni intellektdə yeni imkanlar
Scout və Maverick modellərinin yüksək kontekst uzunluğu və multimodal dəstək imkanları istifadəçilərə daha zəngin və mürəkkəb qarşılıqlı əlaqə təcrübəsi təqdim edir. Bu, süni intellektin gündəlik həyatımızda daha çox yer tutacağına işarədir.
Meta-nın Llama 4 modelləri süni intellekt sahəsində yeni mərhələ açır, həm açıq mənbə, həm də yüksək performanslı daxili modellərlə gələcəyin texnologiyasını formalaşdırır.