Сообщили, что Google Cloud якобы отказывается от сделок с клиентами, потому что у них недостаточно вычислительных ресурсов, и я сразу захотел узнать, что именно они строят, чтобы это исправить. Оказалось, что это чип под кодовым названием Frozen V2, и его история действительно интересна. Ранняя версия этой идеи, возглавляемая главным научным сотрудником DeepMind Джеффом Дином, предполагала непосредственную запись весов модели Gemini прямо на кремний. Идею отклонили, потому что чип стал бы бесполезным сразу после обновления Gemini до новой версии. Frozen V2 решает эту проблему, жестко закрепляя только архитектуру — стабильную базовую схему — в то время как веса остаются обновляемыми через обычную загрузку. Согласно сообщениям, результат — на 6–10 раз больше токенов на ватт по сравнению с текущими TPUs Google! Планируется запуск уже в 2028 году, одновременно с существующей линейкой TPUs, а не вместо них. Это кажется самым явным признаком того, что крупнейшие лаборатории начинают рассматривать модель и чип как одну задачу проектирования, а не как две отдельные.