xAI a anunțat modelul de limbaj Grok-3, care va fi disponibil în mai multe versiuni diferite, și a fost antrenat cu o putere de calcul uriaș, pentru a oferi performanțe mult mult mai bune. Elon Musk a declarat că noua dezvoltare va fi disponibilă mai întâi abonaților X Premium+, dar abonamentul va fi majorat.
xAI a pornit în 2023, când a lansat serviciul său de chatbot antrenat doar în câteva luni. Aceasta a fost urmată în August 2024 de Grok-2, care este un instrument LLM semnificativ mai avansat, cu capacități diverse și o scalabilitate mai bună. Acesta a fost unul dintre primele modele care a utilizat arhitectura Mixture-of-Experts (MoE). Iar acum a apărut și Grok-3, și conform rezultatelor preliminare, concurează cu DeepSeek.
Anunțul a fost făcut cu un accent deosebit pe faptul că Grok-3 a fost antrenat pe supercomputerul Colossus, care are o putere de calcul de zece ori mai mare decât versiunea anterioară. Acest aspect a fost abordat repetat, obiectivul fiind de a folosi un milion de acceleratoare.Grok-3 a fost antrenat pe 200 000 procesoare. A fost dezvăluit că primele 100 000 de procesoare au devenit funcționale după 112 zile de instalare, următoarele 100 000 au necesitat 92 zile, iar extinderea ulterioară va fi și mai ușoară. xAI pare să folosească acceleratoarele Nvidia H100, dar acest lucru nu a fost confirmat oficial.
În teste selecte, Grok-3 este capabil să depășească GPT-4o, Gemini 2 Pro, DeepSeek-V3 și Claude-3.5-Sonnet. Mai mult, chiar și versiunea mini a Grok-3 va funcționa mai bine la unele sarcini decât GPT-4o sau alți rivali. Grok-3 mini este un model de limbaj mai mic, flexibil și mai ieftin de utilizat.
Urmând modelul și activitatea altor echipe de dezvoltare, xAI oferă și modele de argumentare. Acestea sunt capabile să ofere răspunsuri mai complexe, datorită faptului că "verifică" mai bine rezultatele. OpenAI a fost prima care a publicat un model de argumentare în Septembrie anul trecut, companiile rivale preluând acest aspect. Această metodă de gândire sintetică poate ajuta utilizatorii să obțină răspunsuri cu calitate ridicată, dar necesită mai multă putere de calcul și se nasc mai încet. În matematică, programare și știință, modelele de argumentare Grok se par a fi cele mai bune.
Atât Grok-3 Reasoning, cât și Grok-3 mini Reasoning pot bate modelele o3-mini (high), DeepSeek-R1 și Gemini 2 Flash Thinking. Desigur, pentru moment cunoaștem doar rezultatele testelor selectate de xAI, dar mai târziu vom avea o imagine mai exactă și mai completă a performanței modelelor Grok-3 din surse terțe. Aplicația mobilă Grok va fi utilizată pentru a testa modelele de raționament pe scară largă, având și un mod "Big Brain" pentru a răspunde la întrebările foarte dificile.
Mai multe modele de raționament au fost antrenate să urmărească "gândurile" sistemului, ceea ce poate pune în lumină o mulțime de informații interesante. Cu toate acestea, acest lucru deschide și posibilitatea de abuz, potrivit lui Musk, motiv pentru care Grok-3 nu va oferi informații despre procesele de gândire. Vor să împiedice persoanele abuzive să "distileze" activitatea xAI. Acuzația este că acesta este modul în care DeepSeek ar învăța așa de repede și ieftin.
Ceea ce este nou în cazul lui Grok-3 este faptul că va primi o funcție numită DeepSearch, care este utilizat pentru a obține datele necesare pentru a răspunde la întrebări din cele mai actualizate informații, prin scanarea internetului în timp real. Acest lucru va permite lui Grok-3 să furnizeze informații mai exacte și actualizate - o capacitate deja disponibilă de la concurenți.
Abonamentul X Premium+ va permite accesul la modelele Grok și la funcționalitatea DeepSearch limitată, dar prețul acestuia va fi ridicat la 50 dolari pe lună. Adițional, se va introduce un nou abonament SuperGrok, care va oferi utilizatorilor funcții suplimentare și mai multă libertate, pentru 30 dolari pe lună. SuperGrok va oferi acces la modelul de raționament Grok-3 și accesul îmbunătățit la DeepSearch, cât și restricții mai puține privind generarea de imagini. Grok-3 va deveni gratuit în timp, dar nu este încă gata, având acces la ei doar cei cu abonament. Este însă interesant practica respectivă. Trebuie să plătești destul de mult pentru ceva ce tu lucrezi, oferind informații ca să fie finalizat, dar rezultatul final este gratuit.
xAI vrea să introducă și o modalitate de a oferi transformări audio-to-text, precum și funcționarea sa prin intermediul vocii, unde este încă în urma rivalilor săi, cât și o soluție pentru generarea de imagini, care încă este făcută prin intermediari. Utilizarea modelelor Grok-3 va fi oferită și prin API-ul întreprinderii. Introducerea sursei deschise Grok-2 fiind, planificată pentru lunile următoare.