IT之家 11月12日消息,苹果今日发布一篇技术文章,详细介绍其Apple Silicon芯片中的安全架构Secure Exclaves(安全隔离区),解释这套机制如何在处理摄像头和麦克风采集的数据时,避免原始音视频信息被操作系统、应用程序,甚至苹果自身访问。

L'équipe d'ingénierie et d'architecture sécurité d'Apple (SEAR) et l'équipe du système d'exploitation principal (Core OS) ont publié le 12 novembre sur le blog de recherche sécurité d'Apple un article intitulé « Secure Exclaves and Ambient Sensing », présentant les principes de conception, l'architecture sous-jacente et les cas d'utilisation pratiques des Secure Exclaves.
Apple indique qu'à mesure que les appareils acquièrent des capacités de perception environnementale de plus en plus avancées, les caméras et les microphones doivent traiter en continu les informations de l'environnement. Par exemple, les appareils doivent identifier si l'utilisateur est à proximité, détecter des commandes vocales spécifiques et déterminer si quelqu'un utilise actuellement l'appareil. Ces fonctionnalités nécessitent le traitement de données audio et vidéo sensibles, mais cela ne signifie pas que l'appareil doit enregistrer ou stocker continuellement ces informations.
À cet effet, Apple a lancé Secure Exclaves, qui déplace le traitement des données de la caméra et du microphone dans un environnement d'exécution indépendant et isolé. Selon Apple, en mode perception environnementale, les données audio et vidéo brutes ne sont pas transmises au système d'exploitation principal, aux applications ou à Apple lui-même, et sont supprimées après traitement. Le système ne fournit à l'extérieur que les métadonnées nécessaires, telles que la détection de sons spécifiques, l'identification d'utilisateurs enregistrés et la localisation de l'utilisateur.
Secure Exclaves est construit autour de trois aspects principaux : l'isolation des données, les interfaces de communication contrôlées et le mécanisme d'indication sécurisé.
En matière d'isolation des données, Secure Exclaves s'exécute dans un environnement d'exécution processeur distinct de celui du système d'exploitation principal et utilise un micro-noyau L4 personnalisé par Apple. Apple gère également les autorisations d'accès mémoire via le moniteur de tables de pages sécurisées (SPTM), garantissant que le noyau du système d'exploitation principal ne peut pas lire les données situées dans la mémoire dédiée à Secure Exclaves.
En matière de communication, Apple a développé un mécanisme de communication appelé Secure IPC, écrit en Swift, qui limite les échanges de données entre les différents composants grâce à des interfaces prédéfinies. Chaque zone isolée ne peut accéder qu'aux ressources explicitement autorisées, et seules les informations nécessaires et vérifiées sont transmises au système d'exploitation principal.
En ce qui concerne les indications de sécurité, Apple a conçu un Exclave Indicator Controller dédié, chargé de gérer quand les données de la caméra et du microphone peuvent quitter l'environnement isolé. Lorsqu'une application nécessite un accès complet aux données des capteurs, le système doit d'abord s'assurer que les indicateurs correspondants ou les notifications à l'écran sont affichés et qu'une durée de visibilité requise est atteinte, avant d'autoriser la transmission des données.

Apple a également présenté l'application des Secure Exclaves sur HomeView. L'appareil peut identifier jusqu'à six utilisateurs enregistrés grâce à la caméra et au microphone, tout en déterminant si l'utilisateur se trouve à proximité de l'appareil. L'exclave caméra détecte les visages et génère les données associées, tandis que l'exclave microphone traite les informations audio, suivies d'une inférence via une file d'attente isolée pour un moteur de réseau neuronal dédié.
Finalement, le système ne transmet au système d'exploitation principal que des métadonnées telles que l'identifiant utilisateur, la localisation et le niveau de confiance d'identification ; il ne lui fournit pas d'images ou d'audio bruts. Le système d'exploitation peut ainsi ajuster le contenu affiché dans les fonctionnalités telles que le calendrier, les messages, Apple Music, etc.
IT之家 note que Secure Exclaves est également utilisé pour les indicateurs d'objectif, de microphone et d'écran sur l'iPhone 18 Pro, l'iPhone 18 Pro Max et l'iPhone Duo, ainsi que pour l'indicateur d'appareil photo sur MacBook Neo et HomeView.
Apple a utilisé la fonction d'activation vocale « Hey Siri » sur l'iPhone 18 Pro pour expliquer comment ce mécanisme fonctionne. L'appareil écoute d'abord le mot de réveil via un processeur toujours actif (AOP) à faible consommation d'énergie ; une fois qu'un éventuel commandement « Hey Siri » est détecté, le tampon audio est transmis à la zone d'isolation audio pour traitement, puis reconnu en deuxième étape par la zone Siri.
Avant la confirmation du mot de réveil, le système d'exploitation principal ne reçoit que des notifications nécessitant le réveil de Siri, sans accéder aux données audio. Seule une fois que l'utilisateur entre en état d'interaction active, et après que le système ait affiché l'indicateur du microphone et effectué les vérifications de sécurité, la transmission audio vers le service Siri est autorisée.
Apple indique que la fonction d'indication à l'écran n'est pas uniquement gérée par le système d'exploitation. Pour les appareils utilisant un point d'indication à l'écran, une zone d'affichage isolée vérifie les pixels réellement affichés à l'écran, y compris la couleur, la forme, la durée et la luminosité, afin de s'assurer que l'indicateur est effectivement visible pour l'utilisateur et d'éviter que les logiciels malveillants ne trompent l'utilisateur en cachant ou en falsifiant l'indicateur.
Sur le plan technologique, Apple indique que le micro-noyau de Secure Exclaves gère les autorisations à l'aide d'un mécanisme de capacités : les composants système n'ont par défaut aucun accès aux autres composants ou aux ressources matérielles, et ne peuvent interagir qu'après avoir obtenu une autorisation explicite.
Apple a également effectué une vérification formelle du micro-noyau, utilisant des méthodes mathématiques pour vérifier que l'implémentation en C respecte les spécifications fonctionnelles prédéfinies, afin de détecter des problèmes logiques sous-jacents que les tests logiciels traditionnels sont difficiles à couvrir. Toutefois, Apple souligne que la vérification formelle actuelle est mise en œuvre progressivement et ne couvre pas encore toutes les parties du micro-noyau.

