Elon Musk i jego firma xAI wprowadzają rewolucję w dziedzinie sztucznej inteligencji, uruchamiając najpotężniejszy na świecie superkomputer do trenowania modeli AI – Colossus. System ten, zbudowany z 100 tysięcy procesorów graficznych Nvidia H100, zapewnia nieosiągalną dotąd moc obliczeniową, umożliwiając szybkie przetwarzanie ogromnych ilości danych. Colossus jest zaprojektowany głównie do trenowania zaawansowanych modeli językowych Grok, które mają stanowić poważną konkurencję dla podobnych rozwiązań, takich jak te stworzone przez OpenAI. Elon Musk zapowiedział, że moc obliczeniowa Colossusa zostanie podwojona w ciągu kilku miesięcy, co tylko potwierdza jego ambitne plany na przyszłość.
Zespół xAI, który stoi za tym projektem, składa się z uznanych ekspertów w dziedzinie sztucznej inteligencji, w tym Igora Babuszkin, który wcześniej pracował w DeepMind, Manuela Kroissa z DeepAI, czy Guodonga Zhanga – eksperta od modeli językowych. W zespole znajdują się również specjaliści od uczenia maszynowego, jak Toby Pohlen i Yuhuai Wu, oraz osoby zajmujące się rozwojem sieci neuronowych, takie jak Jimmy Ba i Zihang Dai. Ponadto, xAI współpracuje z Rossiem Nordeenem, który wcześniej nadzorował projekty AI w Tesli, oraz Kylem Kosicem, specjalistą od przetwarzania dużych zbiorów danych. Firma korzysta także z doświadczenia Grega Yanga, który pracował nad uczeniem maszynowym w Microsofcie. Doradcą xAI jest Dan Hendrycks, szef organizacji non-profit Center for AI Safety, która koncentruje się na zmniejszeniu ryzyka związanego z rozwojem sztucznej inteligencji.
Colossus wykorzystuje nowoczesną technologię sieciową Spectrum-X Ethernet firmy Nvidia, co pozwala na osiągnięcie wydajności na poziomie 95% przepustowości i minimalizowanie utraty pakietów. To umożliwia efektywne przetwarzanie danych niezbędnych do trenowania modeli AI, które są coraz bardziej zaawansowane i wymagają olbrzymiej mocy obliczeniowej.
Mimo, że Colossus budzi podziw wśród entuzjastów technologii, budzi również kontrowersje w kręgach ekologicznych. Superkomputer zużywa około 150 megawatów energii elektrycznej, co stanowi ogromne wyzwanie w kwestii efektywności energetycznej. Część tej energii pochodzi z generatorów diesla, co stanowi sprzeczność z ekologicznymi celami innych przedsięwzięć Muska, jak Tesla, która promuje odnawialne źródła energii. Na razie nie wiadomo, czy xAI podejmie jakiekolwiek działania mające na celu poprawę efektywności energetycznej swojego superkomputera.
Musk i jego zespół podjęli także działania mające na celu ochronę danych wykorzystywanych do trenowania dużych modeli językowych. W tym kontekście Musk wprowadził surowe ograniczenia w dostępie do Twittera (obecnie X), ograniczając liczbę tweetów, które użytkownicy mogą przeczytać dziennie. Osoby ze zweryfikowanymi kontami mogą zobaczyć do 6 tysięcy tweetów dziennie, podczas gdy pozostali użytkownicy mają dostęp do 10 razy mniejszej liczby postów. Takie ograniczenia mogą być próbą ochrony danych przed wykorzystywaniem ich przez zewnętrzne firmy zajmujące się rozwojem AI.
Zespół xAI także aktywnie angażuje się w interakcję z użytkownikami. 14 lipca firma zorganizuje sesję pytań i odpowiedzi na Twitterze, gdzie zespół będzie odpowiadać na pytania internautów. Chociaż xAI nie jest bezpośrednio częścią X Corp Muska, firma ma ścisłą współpracę z X (platformą Twittera) i Teslą, co może sprzyjać dalszej integracji rozwiązań opracowywanych przez xAI w innych przedsięwzięciach Muska.
Wszystko to pokazuje, że xAI ma ambitne plany w obszarze sztucznej inteligencji i dąży do wyznaczenia nowych standardów w tej dziedzinie. Jak na razie, mimo wyzwań ekologicznych i kontrowersyjnych decyzji dotyczących dostępu do danych, Colossus pozostaje jednym z najpotężniejszych narzędzi AI na świecie.
„Colossus to najpotężniejszy system treningowy sztucznej inteligencji na świecie. Co więcej, jego moc zostanie podwojona w ciągu kilku miesięcy.” – Elon Musk.