Не обмежуючись 200,000 GPU, стартап Ілона Маска xAI планує розширити свій суперкомп’ютер Colossus, розташований у Мемфісі, штат Теннессі, до рівня, що дозволить вмістити щонайменше 1 мільйон GPU.
“Компанія готує ґрунт для того, щоб Мемфіс став глобальним центром штучного інтелекту”, — заявили в Палаті. “Розширення, яке вже розпочато, включатиме мінімум один мільйон графічних процесорів (GPU), що стане найбільшою капітальною інвестицією в історії регіону.”
Швидке зростання суперкомп’ютера Colossus
Хоча Палата не надала точних термінів реалізації, очікується, що xAI придбає GPU у Nvidia, яка цього літа вже поставила 100,000 карт H100 для першого етапу будівництва Colossus. У той час як інші компанії витрачають роки на створення суперкомп’ютерів, команда Маска зібрала систему всього за чотири місяці.
З того часу компанія розширила Colossus до 200,000 Nvidia H100 і H200 GPU і планує досягти позначки 300,000 GPU до наступного літа. Ця заява підкреслює масштаб зусиль Маска щодо створення найсучасніших програм ШІ, щоб перевершити конкурентів, зокрема OpenAI.
Програми xAI і конкуренція з гігантами
Одним із продуктів xAI є чат-бот Grok, який також здатний створювати зображення та програмувати. Хоча Grok наразі доступний переважно підписникам X Premium, компанія готується випустити окремий додаток для споживачів, щоб конкурувати з ChatGPT від OpenAI, повідомляє Wall Street Journal. Видання також зазначає, що Маск має “одержимий фокус на будівництві більших дата-центрів швидше за конкурентів.”
Інші гіганти, такі як Meta, OpenAI і Microsoft, також активно закуповують величезну кількість новітніх GPU від Nvidia. У січні генеральний директор Meta Марк Цукерберг заявив, що його компанія матиме “близько 600,000 еквівалентів H100” обчислювальних потужностей до кінця цього року.
Партнери та інфраструктурні виклики
Торгово-промислова палата Великого Мемфіса зазначила, що компанії Nvidia, Dell і Supermicro Computer, які брали участь у створенні Colossus, планують відкрити свої представництва в Мемфісі. Однак розвиток Colossus вимагає значних інвестицій в інфраструктуру для забезпечення електроенергії та охолодження суперкомп’ютера, що викликало екологічні побоювання.