Згідно з повідомленнями, Google Cloud відмовляється від угод з клієнтами, оскільки у них недостатньо обчислювальних ресурсів, і я відразу захотів дізнатися, що саме вони розробляють, щоб вирішити цю проблему. Виявляється, це чіп під кодовою назвою Frozen V2, і історія його створення справді цікава. Раніша версія цієї ідеї, яку керував головний науковець DeepMind Джефф Дін, мала на меті прямо випалити ваги моделі Gemini в саму кремнієву пластику. Цю ідею скасували, бо чіп став би безкорисним у момент оновлення Gemini до нової версії. Frozen V2 вирішує цю проблему, прописуючи лише архітектуру — стабільний базовий шаблон — тоді як ваги залишаються оновлюваними через звичайне завантаження. Згідно з повідомленнями, результат — на 6–10 разів більше токенів на ват порівняно з поточними TPUs Google! Планується запуск у 2028 році, паралельно з існуючою лінійкою TPUs, а не заміна їх. Це найбільш очевидна ознака того, що найбільші лабораторії починають сприймати модель і чіп як одну проблему проектування, а не дві окремі!
NeilXbtПоділитися


Джерело:Показати оригінал
Відмова від відповідальності: Інформація на цій сторінці може бути отримана від третіх осіб і не обов'язково відображає погляди або думки KuCoin. Цей контент надається лише для загального інформування, без будь-яких запевнень або гарантій, а також не може розглядатися як фінансова або інвестиційна порада. KuCoin не несе відповідальності за будь-які помилки або упущення, а також за будь-які результати, отримані в результаті використання цієї інформації.
Інвестиції в цифрові активи можуть бути ризикованими. Будь ласка, ретельно оцініть ризики продукту та свою толерантність до ризику, виходячи з ваших власних фінансових обставин. Для отримання додаткової інформації, будь ласка, зверніться до наших Умов використання та Розкриття інформації про ризики.