Обучение нейросети Grok 4 компании Илона Маска обошлось в $490 млн
Согласно исследованию аналитической компании Epoch AI, затраты на обучение нейросети Grok 4 компании xAI Илона Маска составили примерно 490 миллионов долларов. Эта сумма в девять раз превышает стоимость обучения модели Meta Llama 3 и обусловлена использованием масштабной вычислительной инфраструктуры.
Обучение проводилось на суперкомпьютере Colossus, развернутом в Мемфисе на базе дата-центров Electrolux. В настоящее время эта система считается крупнейшим ИИ-суперкомпьютером в мире, объединяющим более 200 тысяч графических процессоров NVIDIA (H100, H200 и новейших GB200). В планах компании — масштабирование системы до миллиона GPU.
Энергопотребление проекта достигло 310 миллионов кВт·ч, что эквивалентно годовому потреблению электроэнергии города с населением 4000 человек. Для охлаждения оборудования потребовалось 750 миллионов литров воды (объем 300 олимпийских бассейнов), а углеродный след составил approximately 140 тысяч тонн CO₂. Для охлаждения используется локальная инфраструктура переработки сточных вод.
Компания xAI позиционирует Grok 4 как "самую интеллектуальную модель в мире", способную решать сложные математические и научные задачи, программировать и работать с большими контекстами. Специализированная версия Grok 4 Code предлагает расширенные возможности автодополнения и отладки кода для разработчиков.
Данные о затратах демонстрируют растущую ресурсоемкость разработки передовых ИИ-систем и вызывают вопросы об экологической устойчивости таких проектов. При этом технологическая гонка между ведущими компаниями в области искусственного интеллекта продолжает наращивать темпы.