Muskov AI Grok izvorni kod dostupan je na internetu
Muskov veliki jezični model Grok-1 prenesen je na GitHubu, a programeri ili tvrtke ga mogu besplatno preuzeti i koristiti u svojim projektima pod licencom Apache 2.0. To znači da je dozvoljena njegova komercijalna upotreba, ali ne uključuje podatke koji su korišteni za osposobljavanje modela ili veze s X.com za informacije u stvarnom vremenu.
Grok-1 je veliki jezični model izgrađen na temelju tehnologije Mixture-of-Experts (MoE) s 314 milijardi parametara, daleko premašujući 175 milijardi OpenAI GPT-3.5. Time postaje ujedno i najveći model velikog jezika otvorenog koda koji je danas dostupan.
Važno je napomenuti da samo rad GPT-3 zahtijeva 700 GB VRAM memorije GPU-a. S obzirom da je Grok-1 gotovo dvostruko veći od GPT-3, hardverski zahtjevi nesumnjivo će biti mnogo veći. Stoga, ako tvrtke žele upravljati ovim modelom umjetne inteligencije, morat će značajno uložiti u AI hardver ili potražiti usluge u oblaku kao što je Microsoftov Azure. U objavi se također navodi da su podaci o obuci modela dosegli prekretnicu u listopadu prošle godine i da nisu bili dorađeni “za bilo koju određenu aplikaciju, poput dijaloga”.
Međutim, postoje pitanja o sigurnosti modela. Umjerenost i zaštitne mjere uvedene unutar modela nisu dobro poznate, što izaziva strah od moguće zlonamjerne uporabe sustava.
