Arm lance à Shanghai la deuxième génération du sous-système de calcul mobile CSS for Mobile 2, qui intègre pour la première fois le GPU Mali G2-Ultra avec un accélérateur de réseaux de neurones dédié.

Auteur de l'article : Zheng Minfang

Source : Wall Street Journal

Arm lance CSS for Mobile 2 à Shanghai

Le 8 septembre, Arm a lancé le CSS for Mobile 2 lors de la conférence annuelle Arm Everywhere China à Shanghai. Le changement le plus notable de cette nouvelle plateforme se produit au niveau du GPU.

Arm intègre pour la première fois un accélérateur de réseaux de neurones dédié dans une GPU Mali. Le nouveau Mali G2-Ultra NX permet d'exécuter certaines charges de travail de graphisme neuronal directement à l'intérieur du GPU. Ce n'est pas Arm seul à avancer dans ce domaine. Le 2 septembre, Qualcomm a dévoilé la technologie Adreno Neural Fusion, qui intègre des Matrix Cores dédiés au calcul IA dans les prochaines générations de GPU Adreno.

Qualcomm et Arm ont intégré des capacités de calcul neuronale dédiées dans leurs GPU, ce qui reflète une évolution de la logique de concurrence sur les GPU mobiles. Autrefois, le calcul AI était principalement assuré par un NPU indépendant intégré au SoC, tandis que le GPU se concentrait sur le rendu graphique. Toutefois, avec l'arrivée de technologies telles que le ray tracing, le super-résolution AI et la génération d'images, l'IA entre directement dans le processus de traitement graphique. Le Mali G2-Ultra NX est la réponse d'Arm à ce changement.

Cette GPU prend en charge trois technologies de graphisme neuronal : NSS est principalement utilisé pour le super-échantillonnage neuronal, NFRU permet d'augmenter le taux d'images en générant des images intermédiaires via l'IA, et NSSD combine le super-échantillonnage et le débruitage, conçu pour des scènes plus complexes telles que le ray tracing.

Selon Arm, sous charge de travail de graphisme neuronal, le Mali G2-Ultra NX peut atteindre une amélioration de performance par watt jusqu'à 4 fois supérieure. Les performances graphiques traditionnelles sont également améliorées simultanément. Les données fournies par Arm indiquent que la nouvelle génération de GPU offre une augmentation de performance jusqu'à 14 % dans les contenus de jeu non IA ; combinée à des technologies de graphisme neuronal telles que NFRU, elle permet de soutenir une expérience de jeu mobile continue jusqu'à 120 FPS.

En réalité, il s'agit d'un nouveau compte de puissance de calcul. La consommation d'énergie et l'espace de dissipation thermique des téléphones mobiles étant limités, il est difficile d'augmenter indéfiniment la puissance de calcul traditionnelle avec un GPU. Plutôt que de rendre complètement chaque image, reconstruire partiellement certaines images et générer des images intermédiaires via un réseau de neurones permet d'obtenir une qualité d'image et un taux de rafraîchissement plus élevés avec moins de calculs traditionnels. Toutefois, cela dépendra finalement de la volonté des fabricants, tels que les moteurs de jeu, de « payer » cette approche. Arm a déjà commencé à compléter cette couche d'écosystème.

Les éditeurs de jeux intègrent progressivement

Light and Shadow Reborn, développé en collaboration par Arm et Sumo Digital, présente en premier lieu les effets réels de Mali G2-Ultra NX sur le graphisme neuronal.

La ligne de technologie publique de Tencent Games intègre la technologie de réseau neuronal Arm dans la plateforme de jeux pilotée par l'IA, Magic Dawn, tandis que Unity Chine intègre nativement ces capacités dans l'engine Unity.

En ce qui concerne le jeu lui-même, NetEase intègre la technologie de réseau neuronal Arm dans le moteur Miseya et prévoit de lancer cette année une version du jeu prenant en charge NSS. Zhou Keli, responsable de l'équipe moteur de ce jeu, a déclaré que ce jeu sera l'un des premiers à intégrer la technologie de réseau neuronal Arm.

Tencent effectue une démonstration de la technologie NSSD dans « Dark Zone Breakthrough: Infinity » en collaboration avec Arm, améliorant les scènes graphiques complexes grâce au super-échantillonnage neuronal et au débruitage ; Papergames intègre également la technologie NSS dans « Infinite暖暖 ».

Arm peut-elle faire entrer le Mali G2-Ultra NX chez davantage de fabricants chinois ? Le marché suit cela de près.