NVIDIA a annoncé aujourd'hui une extension majeure de la plateforme open source de développement robotique NVIDIA Isaac™, avec l'ajout d'un robot humanoïde de référence, d'un jeu de données associé et d'un environnement d'exécution, ainsi qu'une mise à jour du cadre d'apprentissage robotique.
Grâce à cette technologie, les développeurs peuvent bénéficier d'une solution intégrée allant de la collecte de données à son déploiement en production, permettant de mettre plus rapidement des robots généraux en situation réelle.
« Les robots universels évoluent à une vitesse fulgurante, et le moment “ChatGPT” de l’robotique est à nos portes », a déclaré Jensen Huang, fondateur et PDG de NVIDIA. « Grâce à la plateforme robotique open source complète NVIDIA Isaac, nous fournissons aux développeurs des modèles, des données, des outils de simulation et des systèmes de calcul pour apporter l’IA physique aux principaux secteurs industriels du monde entier. »
Agile ONE SN — Plateforme de référence pour robots humanoïdes avancés, dédiée à la recherche
Agile Robots lance l'Agile ONE SN, une plateforme de référence complète pour robots humanoïdes, préinstallée avec NVIDIA Isaac GR00T et équipée de la plateforme NVIDIA Jetson Thor™ pour l'IA en périphérie.
Les développeurs de robots font souvent face à un gros point douloureux : les outils de simulation, d'entraînement et de déploiement sont isolés les uns des autres, rendant difficile la migration des compétences robotiques de l'environnement de développement vers les robots physiques. Agile ONE SN intègre tous les outils et workflows au sein d'une seule plateforme, réduisant le temps de préparation au déploiement de plusieurs semaines à quelques jours.
Points forts des paramètres Agile ONE SN :
- Agile ONE S corps humanoïde : hauteur de 1,4 mètre, poids de 40 kg, 31 degrés de liberté, charge maximale d'un bras de 3 kg
- Une paire de WUJI Hand 2 à cinq doigts : 20 degrés de liberté par main, commande de force à 1 kHz, détection tactile pour des opérations précises
- Puissance de calcul intégrée NVIDIA Jetson Thor : 2070 TFLOPS en FP4, mémoire unifiée de 128 Go pour l'inférence embarquée et le contrôle en temps réel
- Perception multimodale : caméras tête et poignet, LiDAR, unité de mesure inertielle pour percevoir et interagir avec l'environnement
- Plateforme NVIDIA Isaac GR00T : inclut le modèle de base GR00T, un flux de travail complet de la collecte de données au déploiement, et un contrôle de mouvement coopératif du corps entier
- Capacités de sécurité : Prévoir l'intégration du protocole de sécurité pour robots et la connexion au système de sécurité complet NVIDIA Halos dédié aux robots.
« La percée des robots humanoïdes réside dans l’application à grande échelle : une machine adaptable capable d’apprendre plusieurs compétences et de fonctionner dans divers environnements conçus pour les humains », déclare Chen Zhaopeng, fondateur et PDG de Siasun Robotics. « Aujourd’hui, Siasun lance Agile ONE SN, une plateforme de référence humanoïde entièrement open source basée sur NVIDIA Isaac GR00T et équipée de Jetson Thor, offrant aux développeurs un système prêt à l’emploi pour développer, entraîner et valider les capacités nécessaires à la mise en œuvre des robots humanoïdes. »
Agile ONE SN devrait être lancé au début de 2027, ciblant le développement de robots humanoïdes de pointe ; des institutions de premier plan telles que Stanford University et l'ETH Zurich ont déjà exprimé leur intérêt à collaborer.
La nouvelle technologie de NVIDIA accélère l'apprentissage des robots : des données à la mise en œuvre
La nouvelle chaîne d'outils d'NVIDIA aide les développeurs à générer des données d'entraînement, à mettre à l'échelle l'apprentissage robotique, à créer des environnements de simulation et à déployer des applications robotiques, réduisant ainsi le cycle de développement.
- SimReady Central Repository : offre plus de 2 000 robots et actifs industriels prêts à l'emploi pour la simulation ; l'ensemble de données Human 1M contient des mouvements humains riches, des vidéos synchronisées multi-angles et des données de suivi 3D des mains. Les deux sont désormais disponibles sur Hugging Face ; l'ensemble complet de données Human 1M est uniquement accessible aux partenaires de l'alliance Cosmos.
- NVIDIA Isaac Lab 3.0 est désormais disponible : un cadre d'apprentissage d'agents open source prenant en charge des flux de travail parallèles multi-GPU, du poste de travail local au centre de données, avec l'entraînement et l'itération des stratégies robotiques via Newton et le moteur physique NVIDIA PhysX™.
- NVIDIA Isaac OS : cadre d'exécution open source construit sur NVIDIA Holoscan, reliant l'IA, les capteurs, les unités de contrôle et le matériel robotique pour permettre un ordonnancement déterministe en temps réel, de la simulation au robot physique.
- NVIDIA publie trois flux de travail open source dédiés au DGX Station™ : l'itération du modèle GR00T 1.7 basée sur l'apprentissage par renforcement, l'entraînement de compétences d'opération délicate dans Isaac Lab, et le fine-tuning du modèle mondial NVIDIA Cosmos™ combiné à ChatGPT Astra pour générer des données synthétiques.
- NVIDIA Halos : une plateforme sécurisée complète basée sur NVIDIA IGX Thor™, permettant aux véhicules autonomes et aux robots de passer du prototype à une mise en œuvre sécurisée et à grande échelle.
Les ressources de la bibliothèque SimReady sur Hugging Face proviennent de : Comau, FANUC, ForgeCAD, Franka Robotics, LG Electronics, Palatial, Robotiq, Standard Bots, Universal Robots, Vertiv.
Le workflow de référence open source d'NVIDIA pour l'apprentissage robotique, exécuté sur DGX Station, est soutenu par 1X, Siasun Robotics, Humanoid, Maven Robotics, Mentee, MicroAGI, Rhoda, Sereact et Skild AI.
Plusieurs partenaires robots ont intégré Halos dans leur architecture de sécurité : Siasun, Agility, Dexory, FORT Robotics et KION, pour des solutions de sécurité destinées aux robots d’entrepôt ; SICK évalue actuellement Halos afin de développer des capacités de sécurité dynamique pour les robots industriels, dépassant les limites des zones de sécurité fixes et s’adaptant à des scénarios dynamiques.
Advantech et NexCOBOT développent une plateforme de calcul industriel basée sur NVIDIA IGX ; Reynolds & Moore, Accenture et TÜV SÜD accélèrent le processus d'homologation pour le déploiement sécurisé de l'IA physique industrielle.
Les fabricants européens de robots développent leurs produits en s'appuyant sur les technologies open source de NVIDIA
Les robots ABB intègrent la bibliothèque NVIDIA Omniverse™ dans RobotStudio HyperReality pour simuler et effectuer un débogage virtuel des systèmes robotiques avant leur mise en service, couvrant plusieurs secteurs. Le groupe KUKA intègre des composants Omniverse dans Visual Components FactoryLens pour ajouter un rendu en temps réel à la simulation d'usine. Sereact utilise Isaac GR00T + Cosmos Transfer pour former et affiner la plateforme Cortex dédiée au tri de marchandises, déployée sur des bras robotiques UR.
Humanoid développe et valide les comportements robotiques grâce à Jetson Thor, Holoscan Sensor Bridge, Halos et Isaac OS avant tout déploiement industriel ; Hexagon Robotics développe les capacités de perception AEON, incluant la vidéo en téléguidage, le positionnement, la cartographie et la détection de la pose des objets ; Bear Robotics accélère la perception et l'exécution des modèles de KR1 en affinant Isaac GR00T avec Kino-2, ciblant les scénarios de entrepôt, de retours et industriels.
Toyota Material Handling Europe et SoftServe utilisent Omniverse + NVIDIA Isaac Sim™ pour développer des solutions de manutention autonome, réduisant jusqu'à 50 % le délai de déploiement. Idealworks exploite les modèles open source de NVIDIA et Jetson pour doter les robots mobiles autonomes d'usines d'une capacité de mémoire. ADI > Analog Devices (ADI) utilise Jetson AGX Orin™ et la bibliothèque cuVSLAM pour développer des robots mobiles autonomes.
Hugging Face et Pollen Robotics ont développé Microduck, un petit robot open source basé sur Isaac Lab, Isaac Sim et Newton, permettant aux développeurs et aux étudiants d'entraîner, de modifier et de partager de nouveaux comportements incarnés. Franka Robotics s'intègre aux microservices NIM™ d'NVIDIA et à Isaac Sim pour convertir les instructions en langage naturel en mouvements du bras robotique Franka FR3 Duo. Bellboy utilise Jetson et GR00T pour piloter le robot Billie, son premier partenaire robotique d'IA physique, déjà déployé dans des hôtels Marriott, Hilton, InterContinental et OYO.
Flexion utilise Isaac Lab et Newton pour étendre l'entraînement du modèle unifié de robotique Reflect ; Reflect intègre raisonnement et mouvement corporel complet, permettant des opérations complexes sur plusieurs plateformes. Schaeffler fournit exclusivement à Newton des technologies d'actionneurs, en complément d'Isaac Lab et d'Isaac Sim, pour accélérer le développement de robots humanoïdes.
NEURA Robotics utilise Isaac Sim et Isaac Lab pour générer des données d'entraînement synthétiques et former des compétences robotiques pour le modèle fondamental multimodal Neuron AI dans un environnement de simulation.
Rédacteur en chef : Liu Mingliang