Как устроен xAI Илона Маска
Пару дней назад инженер xAI Сулейман Гори дал интервью, где рассказал детали работы компании Илона Маска. Через 3 дня его уволили за нарушение NDA. Рекомендую к просмотру.
Некоторые детали показались интересными:
- В компании запрещено опираться на индустриальные стандарты по скорости. Полный отказ от искусственных ограничений, ориентируются только на реальные ограничения оборудования или физики. Например, бетон не может сохнуть быстрее. В софте игнорируют общепринятые лимиты, чтобы не зафреймиться. Фразы «обычно это делается за Y времени» обесцениваются.
- Устранение преград любым путем. Оформили дата-центр Colossus (суперкомпьютер 100k GPU) по более простой юридической схеме, указав, что постройка нужна для временного мероприятия/карнавала (temporary utility permit). Этот процесс гораздо быстрее и требует минимум согласований. В обычном мире постройка и подключение к городской электросети такой мощности занимает 12–24 месяца. Но у них получилось построить и запитать такой кластер за 122 дня. Дополнительно они установили 80 промышленных дизельных генераторов на грузовиках, чтобы выдерживать спад мощности в час пик. Но так как генератор физически запускается не сразу, они используют промышленные аккумуляторы и конденсаторы, чтобы исключить этот фактор.
- Компания работает без привычных дедлайнов. Если инженер приносит дельную идею, то поступает вопрос: «Почему это еще не сделано?». Нужно «вчера».
- Для вычислений используют машины Tesla. В Северной Америке их 4 млн, 80% из них простаивают. Пользователям платят, а xAI не надо строить дата-центры.
- Принцип работы — это поиск «бутылочных горлышек» (bottlenecks), которые будут через 1–3 года, и фокусная работа над ними прямо сейчас.
- Роль Илона. Маск решает критические проблемы одним звонком. Были проблемы с оборудованием Nvidia. Команда пожаловалась Илону, и Nvidia выпустила патч на следующий день. На встречах спрашивает: «Как я могу помочь или ускорить процесс?». Мгновенно снимает блокеры. То, что обычно требует недель переписки, решается за один звонок. Принцип работы — нет времени на долгие согласования.
- Илон имеет два уровня вовлечения: высокоуровневый и детальный. Середины нет. Быстрые решения да/нет. Либо лезет до самых кишок в проекте, чтобы погрузиться во все детали.
- Эксперимент можно отвергнуть, только если у тебя есть цифры или результат на руках. Любой прошлый опыт отвергается.
- High Leverage. Каждый инженер ищет действие с максимальным результатом. Не делать работу ради работы.
- Инженер — это прежде всего про тип мышления и способ решения проблем (problem solving). Никого не смущает отсутствие опыта в конкретной сфере. Волнует лишь наличие правильного подхода к решению проблем.
- Все — инженеры. Даже ключевой сейлс в команде — это инженер, который может залезть в код. Убирается разрыв между «теми, кто придумал» и «теми, кто внедряет».
- Прямая обратная связь. Если идея плохая — говорят сразу «нет». Нет корпоративного сглаживания углов. Цель — экономия времени на поиск правды/технической истины.
- Гибкость. Если PhD по математике нужно тянуть кабели, чтобы выполнить задачу, то они идут тянуть. На встречах нет менеджеров, которые «переводят» разработчиков на понятный язык.
- В xAI много самоучек с нетрадиционным бэкграундом. Образовательные институты учат конформизму (делай по правилам). А все инновации — от индивидуумов, не уважающих правила.
Оригинал в Telegram: https://t.me/segagridchin/137
