Musk ønsker å bygge verdens største superdatamaskin med 100 000 Nvidia H100-skjermkort for å utvikle nestegenerasjons Grok.
Grok er en samtalerobot lansert på X (tidligere Twitter) som tar opp kampen med OpenAI, Google og Microsoft. For å trene roboten ytterligere ønsker Elon Musk å bygge verdens største superdatamaskin.
Etter planen vil «Gigafactory of Compute», som Musk refererer til, stå klart allerede neste år. Under en presentasjon for investorer erklærte Musk seg selv som personlig ansvarlig for utførelsen.
Musk har allerede hentet seks milliarder dollar til prosjektet fra blant annet Sequoia Capital og Saudi Arabia’s Kingdom Holding. Selv har han investert 750 millioner dollar og sier selskapet er verdt 18 milliarder dollar før aksjeinvesteringer.
Etter siste investorrunde skal xAI ha en verdi på svimlende 24 milliarder dollar. X har bidratt med datakraft til en verdi av 250 milloner dollar.
Pre-money valuation was $18B
— Elon Musk (@elonmusk) May 27, 2024
Godt nytt for Nvidia
Ifølge The Information vil superdatamaskinen danke ut dagens største samling av skjermkort med firegangen. De hundre tusen skjermkortene vil være av typen Nvidia H100 som er et ettertraktet kort i KI-sektoren. Det gjør at de ikke nødvendigvis er så lette å få tak i. I alle fall ikke i denne størrelsesordenen.
Det går bra med Nvidia om dagen og aksjekursen fortsetter sin elleville tur. Disse nyhetene har utvilsomt innvirkning. Skjermkortene Musk ønsker å bruke er ikke de nyeste i porteføljen. Nvidia er i gang med salget av H200-skjermkort og det er usikkert hvorfor xAI satser på forriegenerasjons. Kanskje et strategisk valg for å være sikker på å få tak i mange nok?
Språkmodellen Grok 2 krevde 20 000 skjermkort for å la seg trene, mens Grok 3 vil kreve 100 000. Det er altså snakk om enorme regnekapasiteter som er i sving når store språkmodeller skal trenes. Det er noe å huske på neste gang man stiller ChatGPT et spørsmål.
De store planene sier noe om Musks enorme ambisjoner for X og xAI. Musk lanserte selskapet i 2023 som et politisk nøytralt alternativ til OpenAI som han selv var med å starte. Musk har et søksmål gående mot OpenAI og har uttrykket sin skuffelse over hvilken vei selskapet tar.
OpenAI was created as an open source (which is why I named it “Open” AI), non-profit company to serve as a counterweight to Google, but now it has become a closed source, maximum-profit company effectively controlled by Microsoft.
— Elon Musk (@elonmusk) February 17, 2023
Not what I intended at all.
