Arm в Шанхае представила второе поколение подсистемы мобильных вычислений CSS for Mobile 2, в которой Mali G2-Ultra GPU впервые интегрирована с专用ным нейросетевым ускорителем.

Автор статьи: Чжэн Минфань

Источник: Wall Street Journal

Arm запускает CSS for Mobile 2 в Шанхае

8 сентября Arm на ежегодном мероприятии Arm Everywhere China в Шанхае представила второе поколение вычислительной подсистемы для мобильных устройств CSS for Mobile 2. Самое значимое изменение в этой новой платформе произошло в GPU.

Arm впервые интегрировала специализированный нейронный ускоритель в Mali GPU. Недавно выпущенный Mali G2-Ultra NX позволяет выполнять часть нейросетевых графических рабочих нагрузок непосредственно внутри GPU. Это не единственный случай: 2 сентября Qualcomm представила технологию Adreno Neural Fusion, добавив в следующее поколение Adreno GPU специализированные Matrix Cores для вычислений ИИ.

Qualcomm и Arm последовательно интегрировали специализированные нейронные вычислительные возможности в GPU — это свидетельствует о том, что логика конкуренции на рынке мобильных GPU меняется. Раньше вычисления ИИ в основном выполнялись отдельным NPU в SoC, а GPU отвечал за графическую визуализацию. Однако с появлением таких технологий, как трассировка лучей, AI-суперразрешение и генерация кадров, ИИ теперь напрямую входит в сам процесс графической обработки. Mali G2-Ultra NX — это ответ Arm на эти изменения.

Эта видеокарта поддерживает три типа нейрографических технологий: NSS主要用于神经超级采样，NFRU用于通过AI生成中间帧提升帧率，NSSD则将超级采样和降噪结合，面向光线追踪等更复杂的场景。

По данным Arm, в рабочих нагрузках нейрографики Mali G2-Ultra NX может обеспечить повышение производительности на ватт до 4 раз. Традиционная графическая производительность также улучшена. Согласно данным Arm, новое поколение GPU демонстрирует повышение производительности до 14% в не-ИИ-игровом контенте; в сочетании с технологиями нейрографики, такими как NFRU, оно обеспечивает стабильный игровой опыт на мобильных устройствах до 120 FPS.

На самом деле здесь речь идет о новой вычислительной модели. Мобильные устройства имеют ограниченное энергопотребление и пространство для отвода тепла, поэтому GPU сложно бесконечно масштабировать традиционные вычисления. Вместо полной прорисовки каждого кадра восстановление части изображения и генерация промежуточных кадров с помощью нейронных сетей позволяют получить более высокое качество изображения и частоту кадров при меньших традиционных вычислительных затратах. Однако в конечном итоге все зависит от того, будут ли производители игровых движков и других компаний «оплачивать» это решение. Arm уже начинает восполнять этот слой экосистемы.

Игровые компании纷纷接入

《光影新生》由Arm и Sumo Digital совместно разработано и впервые демонстрирует практический эффект Mali G2-Ultra NX в нейрографике.

Техническая линия игр Tencent внедряет технологию нейронных сетей Arm в игровую платформу Magic Dawn, управляемую ИИ, а Unity China также нативно интегрирует соответствующие возможности в движок Unity.

В отношении конкретных игровых аспектов NetEase внедряет технологию Arm Neural Networks в движок Misha и планирует выпустить версию игры «Яньюнь Шиь Люнь» с поддержкой NSS в этом году. Чжоу Кэли, руководитель команды разработки движка игры, заявил, что эта игра станет одной из первых, использующих технологию Arm Neural Networks.

Тенсент проводит демонстрацию технологии NSSD в игре «Dark Zone Breakthrough: Infinity» совместно с Arm, улучшая сложные графические сцены с помощью нейросупервзятия и шумоподавления; также компания Diepao продвигает интеграцию технологии NSS в игру «Infinite暖暖».

Сможет ли Arm продвинуть Mali G2-Ultra NX в большее количество китайских производителей, рынок продолжает следить за этим.