Лаборатория «Безопасный суперинтеллект» (Safe Superintelligence, SSI), основанная Ильей Суцкевером, может представить свою первую значимую модель уже на этой неделе!
Внутрииндустриальные лидеры сильно намекают, что SSI выпустит первую по-настоящему революционную крупную модель.
Крупные игроки из Кремниевой долины спешат поделиться: «ИИ будет полностью пересмотрен!»
Известный инвестор и партнер a16z Мартин Касадо в восторге и прямо намекает, что недавно ознакомился с «самой важной новой моделью этого года».
Внутри сообщества сразу же раздался взрыв, и все взгляды мгновенно обратились на SSI Ilya.
Причина проста: a16z является одним из ключевых инвесторов, стоящих за SSI. Хотя некоторые предполагают, что Касадо мог видеть следующую модель OpenAI — Astra.
Но слухи о прорыве «неосновных крупных компаний» усилились.
Известный наблюдатель в области технологий Эндрю Керран с энтузиазмом отметил, что этот значительный прорыв произошел не от крупных корпораций (таких как OpenAI или Google), а от независимой лаборатории, что вызывает ощущение «очень реального».
Самым впечатляющим является наблюдатель за ИИ Дэн Мактиер, который прямо заявил: «Илья действительно создал суперинтеллект, правила игры изменились!»
В начале месяца инвестор Гэвин Бейкер прямо заявил в подкасте:
SSI сказали, что выпустят свою модель в августе.
Если вы считаете, что это просто теория, взгляните на реальные потоки капитала.
27 июля этого года NVIDIA неожиданно объявила о долгосрочном стратегическом партнерстве с этой таинственной компанией без доходов и продуктов, а также о том, что вычислительная мощность SSI будет увеличена в 10 раз в течение следующих 12 месяцев.
Раскрываются новые детали: эта инвестиция составляет高达50 миллиардов долларов, и NVIDIA предоставила SSI эксклюзивный доступ к следующему поколению системы Vera Rubin!
Почему Хуан Ренсюнь готов вложить такие огромные средства?
В пресс-релизе NVIDIA заявила, что решила сделать крупные инвестиции после того, как получила «редкий доступ» к своим строго защищенным исследовательским результатам.
Что увидел Хуан Ренсюнь? С учетом сегодняшних утечек, ответ очевиден.
Оспаривая общепринятые представления: ИИ научился «учиться в процессе мышления»
Чтобы понять, насколько революционна новая модель SSI, нам нужно сначала разобраться, как работают современные ИИ (например, ChatGPT, Claude).
На текущем этапе модели ИИ, независимо от размера параметров, по сути, закрепляют знания в весах на этапе предварительного обучения. После завершения обучения их «мозг» замораживается.
Чтобы модели могли обрабатывать новую информацию, крупные компании безумно конкурируют за «окно контекста» (Context Window), поднимая его с 100k до миллионов.
Это как открытая книга — мозг модели не стал умнее, просто вы разрешили ему взять на экзамен всё более толстую «шпаргалку» (контекст).
Даже такие модели вывода, как o1 от OpenAI, которые делают акцент на «вычислениях во время тестирования», по сути, просто тратят больше времени на размышления на черновике (потребляя больше токенов), а их нейронные соединения, их «нейроны», остаются неизменными.
Однако SSI раскрыла новую архитектуру, основанную на обучении во время тестирования (Test-Time Training, TTT).
What does this mean?
Когда эта модель читает длинный документ, который вы ей предоставили, она не впихивает документ в «шпаргалку», а действительно «обучается» ему, генерируя обновления градиентов и изменяя структуру своего «мозга».
После прочтения он превратился в чрезвычайно тонкое, но совершенно новое эволюционное ИИ.
Ему больше не нужен огромный контекстный окно, потому что он превращает прочитанное в свою собственную «внутреннюю знания».
Он больше не ограничен монополией на вычислительные ресурсы, использовавшейся при предварительном обучении; небольшая, но точная модель, способная постоянно адаптироваться и развиваться на рабочем месте, с легкостью превосходит гигантские модели, построенные на огромных вычислительных мощностях, но неспособные к гибкости.
В настоящее время в отрасли конкурируют «насколько долго модель может думать», а Илья делает ставку на «может ли модель изменить себя».
Безумное видение Ильи
Взглянув на последние два года, состояние SSI «без продуктов, без статей» заставило внешних наблюдателей сомневаться, не попали ли они в трудное положение.
Но если соединить воедино всю хронологию, вы увидите, что Илья一直在下着一盘大棋。
Илья неоднократно доносил до общественности ключевую идею: эпоха предварительного обучения (Pretraining), которую мы знаем, вот-вот закончится.
На конференции NeurIPS 2024 года он сделал это поразительное предсказание.
К 2025 году в подкасте Дваркеша Пателя он еще дальше раскрыл: «Мы переходим от эпохи масштабирования к эпохе исследований».
Илья считает, что вся отрасль была сведена с пути словами «AGI» и «предварительная подготовка». Люди не рождаются со знаниями.
Его истинный суперинтеллект — это не гигантская машина, которая изначально запомнила все данные в сети; а «чрезвычайно умный, полный бесконечного любопытства 15-летний гений».
Этот 15-летний ребенок, возможно, изначально ничего не знает, но достаточно поместить его на любую должность, и через постоянные пробные ошибки и обучение он быстро освоит программирование, медицину, право и даже любые другие неизвестные навыки.
Он далее пояснил: люди сами по себе не являются «готовыми к использованию» AGI, а зависят от непрерывного обучения.
Истинный сверхразум должен быть таким же: его развертывание само по себе является процессом обучения, постоянной эволюцией на основе реальных обратных связей, а не завершением после однократной предварительной подготовки.
Эта концепция напрямую определяет стратегию SSI: не стремиться к краткосрочным продуктам, не выпускать промежуточные модели, а сосредоточиться исключительно на «прямом пути к безопасному суперинтеллекту», перенеся акцент исследований на эффективное непрерывное обучение и согласованность.
Для достижения этой цели «метаобучение» (meta-learning) — единственный вариант: модель должна не только овладевать навыками, но и осваивать «методы приобретения навыков».
Это идеально объясняет, почему SSI так скромен. Если вы строите совершенно новый вид, который полностью меняет существующую парадигму, вы точно не будете писать блоги и хвастаться, пока сама парадигма ещё находится в стадии строительства.
Но бумага не может скрыть огонь — следы были положены давно.
В июле 2024 года ученые Ю Сунь и другие опубликовали оригинальную статью о TTT.
Самое важное, что сооснователь Stellar и инвестор SSI Джед Маккалеб соавтором написал статью, в которой прямо заявляет
Длинноконтекстное языковое моделирование — это вообще не проблема архитектуры, а проблема непрерывного обучения!
Направления исследований совпадают, инвесторы лично участвуют в совместных публикациях, и теперь появились разоблачения — все улики указывают на один и тот же факт: SSI превратила TTT из академической концепции в лаборатории в настоящий коммерческий инструмент.
Заключение: Вторая половина ИИ только начинается
Сейчас все взгляды направлены на этот август.
Независимо от того, будет ли это тестовая версия, доступная лишь небольшой группе энтузиастов, или грандиозный релиз для широкой публики, как только первая модель SSI действительно обретет способности «обучения во время тестирования» и «реального обновления весов», вся логика индустрии ИИ будет полностью пересмотрена.
Все крупные компании, накапливающие вычислительные мощности в центрах обработки данных, бизнес-модели, основанные на оплате за миллионы токенов, и даже споры об открытых весах, столкнутся с понижением уровня конкуренции.
Это доказывает одно: гонка в области ИИ еще не дошла до финальной стадии, где побеждает тот, у кого больше денег и вычислительных мощностей. Настоящие технологические прорывы по-прежнему скрыты в талантах, способных бросить вызов общепринятым представлениям.
На этот раз Илья Суцкевер снова стоит на перепутье истории. Раньше именно его код дал глубокому обучению вторую жизнь; теперь, возможно, именно он亲手 положит конец эре предварительного обучения крупных моделей.
Сможет ли Илья в этот раз снова стать божеством? Если ИИ действительно может «эволюционировать по мере использования», как далеко мы находимся от полной потери контроля?
Справочные материалы:
https://x.com/hakmgpt/status/2091855200713638146
https://x.com/daniel_mac8/status/2091891607641440598
https://x.com/AndrewCurran_/status/2091890441465499995
https://x.com/martin_casado/status/2091650951736361073
https://aimidday.com/ssis-first-model-reportedly-trains-itself-while-it-thinks/
Эта статья взята из официального аккаунта WeChat «Новости ИИ», автор: АСИ, Откровение; редактор: Дэвид