Новини ME: 3 квітня (UTC+8) Google DeepMind відкрила джерела сімейства багатомодальних моделей Gemma 4. Ця серія моделей підтримує вхідні дані тексту та зображень (малі моделі також підтримують аудіо) та генерує вихідні текстові дані, включаючи попередньо навчені та інструкційно-налаштовані версії, з контекстним вікном до 256K токенів і підтримкою понад 140 мов. Моделі використовують дві архітектури — щільну (Dense) та змішану експертну (MoE), і мають чотири розміри: E2B, E4B, 26B A4B та 31B. Їхні ключові можливості включають високопродуктивний висновок, розширену багатомодальну обробку, оптимізацію на пристрої, збільшення контекстного вікна, підвищення здатностей кодування та агентів, а також нативну підтримку системних підказок. З технічної точки зору, моделі використовують гібридний механізм уваги, де глобальні шари застосовують єдину пару ключ-значення та масштабоване RoPE (p-RoPE). Моделі E2B та E4B використовують технологію пошарового вкладення (PLE), що забезпечує меншу кількість ефективних параметрів порівняно з загальною кількістю. Модель 26B A4B MoE під час висновку активує лише 3,8 млрд параметрів, досягаючи швидкості роботи, близької до моделей з 4 млрд параметрів. (Джерело: InFoQ)
Google DeepMind відкриває джерела сімейство багатомодальних моделей Gemma 4
KuCoinFlashПоділитися
Короткий зміст
Google DeepMind відкрила код сімейства мультимодальних моделей Gemma 4 — важливий оновлення в сфері криптовалютних новин. Моделі обробляють текстові, зображення та аудіо вхідні дані, а вихідні дані надаються у текстовій формі. Вони доступні у чотирьох розмірах і підтримують понад 140 мов. Розроблені для високопродуктивного висновку та оптимізації на пристроях, ці моделі ідеально підходять для розробників і дослідників. Цей реліз додає ще один шар до зростаючого інтересу до інструментів ШІ в секторі криптовалютних новин.
Джерело:Показати оригінал
Відмова від відповідальності: Інформація на цій сторінці може бути отримана від третіх осіб і не обов'язково відображає погляди або думки KuCoin. Цей контент надається лише для загального інформування, без будь-яких запевнень або гарантій, а також не може розглядатися як фінансова або інвестиційна порада. KuCoin не несе відповідальності за будь-які помилки або упущення, а також за будь-які результати, отримані в результаті використання цієї інформації.
Інвестиції в цифрові активи можуть бути ризикованими. Будь ласка, ретельно оцініть ризики продукту та свою толерантність до ризику, виходячи з ваших власних фінансових обставин. Для отримання додаткової інформації, будь ласка, зверніться до наших Умов використання та Розкриття інформації про ризики.