Arm у Шанхаї запускає друге покоління підсистеми мобільних обчислень CSS for Mobile 2, у якому Mali G2-Ultra GPU вперше інтегровано зі спеціалізованим прискорювачем нейромереж.

Автор статті: Чжэн Міньфань

Джерело: Wall Street Journal

Arm запускає CSS for Mobile 2 у Шанхаї

8 вересня Arm на щорічному заході Arm Everywhere China у Шанхаї представила друге покоління підсистеми обчислень для мобільних пристроїв CSS for Mobile 2. Найбільш важливі зміни в цій новій платформі відбулися в GPU.

Arm вперше інтегрувала спеціалізований нейромережевий прискорювач у Mali GPU. Новий Mali G2-Ultra NX дозволяє виконувати деякі нейрографічні завдання безпосередньо всередині GPU. Це не є винятком тільки для Arm. 2 вересня Qualcomm оголосила про технологію Adreno Neural Fusion, яка додає спеціалізовані Matrix Cores для AI-обчислень у наступному поколінні Adreno GPU.

Qualcomm та Arm послідовно інтегрували спеціалізовані нейронні обчислювальні можливості в GPU — це свідчить про зміну логіки конкуренції мобільних GPU. Раніше AI-обчислення виконувалися переважно окремим NPU в SoC, а GPU відповідав за графічне відтворення. Але з появою таких технологій, як трасування променів, AI-суперпікселізація та генерація кадрів, що входять у мобільні ігри, штучний інтелект безпосередньо втручається у сам процес графічної обробки. Mali G2-Ultra NX — це відповідь Arm на цю зміну.

Цей GPU підтримує три типи нейрографічних технологій: NSS використовується переважно для нейропідвищення роздільної здатності, NFRU — для підвищення частоти кадрів шляхом генерації проміжних кадрів за допомогою ШІ, а NSSD поєднує підвищення роздільної здатності та зменшення шуму для більш складних сцен, таких як трасування променів.

За даними Arm, у навантаженні нейрографіки Mali G2-Ultra NX може досягти до 4-кратного зростання продуктивності на ват. Традиційна графічна продуктивність також підвищилася. За даними Arm, нове покоління GPU демонструє зростання продуктивності до 14% у не-AI ігровому контенті; у поєднанні з нейрографічними технологіями, такими як NFRU, воно забезпечує стабільний досвід мобільних ігор до 120 FPS.

Насправді за цим стоїть новий розрахунок обчислювальної потужності. Мобільні пристрої мають обмежену споживану потужність та простір для відведення тепла, тому GPU важко нескінченно збільшувати традиційний обчислювальний масштаб. Замість повного рендерингу кожного кадру, відновлення частини зображення та генерація проміжних кадрів за допомогою нейромережі дозволяє отримати вищу якість зображення та частоту кадрів за допомогою меншої кількості традиційних обчислень. Але в кінцевому підсумку все залежить від того, чи «заплатять» виробники, такі як ігрові двигуни. Arm вже починає заповнювати цей екосистемний шар.

Ігрові компанії масово підключаються

«Light and Shadow Reborn», розроблена спільно Arm та Sumo Digital, першою продемонструвала реальний ефект Mali G2-Ultra NX у нейрографіці.

Технічний напрямок Tencent Games інтегрує технології Arm Neural Network у AI-засновану геймінгову платформу Magic Dawn, а Unity China також нативно інтегрує ці можливості до двигуна Unity.

Щодо конкретних ігрових аспектів, NetEase підключає технології Arm Neural Network до двигуна Mishia і планує випустити версію з підтримкою NSS для гравців цього року. Чжоу Келі, керівник команди двигуна гри «Яньюнь Шіліу Шень», зазначив, що ця гра стане однією з перших, які використовуватимуть технології Arm Neural Network.

Tencent проводить демонстрацію технології NSSD у грі «Dark Zone Breakthrough: Infinite» разом з Arm, покращуючи складні графічні сцени за допомогою нейроподібного супервідбору та зменшення шуму; компанія Diepao також працює над інтеграцією технології NSS у грі «Infinite暖暖».

Чи зможе Arm просунути Mali G2-Ultra NX до більшості китайських виробників? Ринок продовжує стежити за цим.