Навчання Grok 4 обійшлося xAI Маска майже у $490 млн.
За оцінками Epoch AI, тренування моделі Grok 4 компанії xAI Ілона Маска коштувало приблизно $490 млн – у дев’ять разів дорожче, ніж тренування Meta Llama 3, інформує UA.NEWS.
Основні причини високої вартості:
- Використання суперкомп’ютера Colossus у Мемфісі (на базі колишнього заводу Electrolux).
- Colossus наразі вважається найбільшим ШІ‑суперкомп’ютером у світі, що складається з понад 200 тис. GPU NVIDIA (H100, H200, GB200), із планами масштабування до мільйона GPU.
- Дата-центри охолоджуються за допомогою локальної системи переробки стічних вод, а споживання електроенергії сягає сотень мільйонів кВт·год.
За підрахунками, навчання Grok 4 потребувало:
- 310 млн кВт·год електроенергії — еквівалент річного споживання містечка на 4000 людей.
- 750 млн літрів води для охолодження — як 300 олімпійських басейнів.
- 140 тис. тонн CO₂ викидів — порівняно з польотами літака Boeing протягом трьох років.
Функції та можливості Grok 4:
- Розв’язання складних математичних і наукових задач.
- Програмування та робота з великим контекстом.
- Версія Grok 4 Code орієнтована на розробників, забезпечуючи автодоповнення та налагодження коду.
xAI позиціонує Grok 4 як найрозумнішу модель у світі здатну значно розширити можливості роботи зі штучним інтелектом для науки та програмування.