NVIDIA anunciou hoje uma expansão significativa da plataforma de desenvolvimento de robôs de código aberto NVIDIA Isaac™, adicionando um novo robô humanoide de referência, um conjunto de dados associado e um tempo de execução, além de atualizar o framework de aprendizado de robôs.
Com base nessa tecnologia, os desenvolvedores podem obter uma solução integrada, desde a coleta de dados até a implantação prática, acelerando a introdução de robôs gerais em cenários reais.
“Os robôs gerais estão se desenvolvendo rapidamente, e o momento ‘ChatGPT’ da robótica está à porta,” disse Jensen Huang, fundador e CEO da NVIDIA. “Por meio da plataforma de robótica de pilha completa e de código aberto NVIDIA Isaac, fornecemos aos desenvolvedores modelos, dados, ferramentas de simulação e sistemas de computação para trazer a IA física para os principais setores globais.”
Agile ONE SN — Plataforma de referência para robôs humanóides avançados, voltada para pesquisa
Agile Robots lança o Agile ONE SN, um conjunto de referência de robôs humanoides completo, pré-instalado com NVIDIA Isaac GR00T e equipado com a plataforma de IA de borda NVIDIA Jetson Thor™.
Desenvolvedores de robôs frequentemente enfrentam um grande desafio: as ferramentas de simulação, treinamento e implantação são desconectadas, tornando difícil migrar habilidades de robô do ambiente de desenvolvimento para robôs físicos. O Agile ONE SN integra todas as ferramentas e fluxos de trabalho em uma única plataforma, reduzindo o tempo de preparação para implantação de semanas para dias.
Principais destaques dos parâmetros do Agile ONE SN:
- Agile ONE S corpo humanoide: altura de 1,4 metro, peso de 40 kg, 31 graus de liberdade, carga máxima de um braço de 3 kg
- Um par de WUJI Hand 2 com cinco dedos: cada mão com 20 graus de liberdade, controle de força de 1 kHz e percepção tátil para operações precisas
- Potência de processamento NVIDIA Jetson Thor integrada: 2070 TFLOPS de potência FP4, memória unificada de 128GB para inferência embarcada e controle em tempo real
- Percepção multimodal: câmeras na cabeça e no pulso, LiDAR e unidade de medição inercial para perceber e interagir com o ambiente
- Plataforma NVIDIA Isaac GR00T: inclui o modelo base GR00T, fluxo de trabalho completo da coleta de dados à implantação e controle de movimento coordenado de todo o corpo
- Capacidades de segurança: Planejado para integrar o protocolo de segurança para robôs, conectando-se ao sistema completo de segurança da NVIDIA para robôs, Halos
“A ruptura para robôs humanoides está na aplicação em escala: uma máquina adaptável que aprende múltiplas habilidades e opera em diversos ambientes projetados para humanos,” afirmou Chen Zhaopeng, fundador e CEO da Siasun Robotics. “Hoje, a Siasun lança o Agile ONE SN, um referencial aberto de robô humanoide baseado no NVIDIA Isaac GR00T e equipado com Jetson Thor, fornecendo aos desenvolvedores um sistema pronto para desenvolver, treinar e validar as capacidades necessárias para a implementação de robôs humanoides.”
Agile ONE SN está previsto para lançamento no início de 2027, voltado para o desenvolvimento avançado de robôs humanóides, com instituições de ponta como Stanford University e ETH Zurich já expressando interesse em colaboração.
Nova tecnologia da NVIDIA acelera o aprendizado de robôs: dos dados à implementação
A nova cadeia de ferramentas da NVIDIA ajuda os desenvolvedores a gerar dados de treinamento, escalar o aprendizado de robôs, criar ambientes de simulação e implantar aplicações robóticas, reduzindo o ciclo de desenvolvimento.
- SimReady Central Repository: oferece mais de 2.000 robôs e ativos industriais prontos para simulação; o conjunto de dados Human 1M inclui movimentos humanos ricos, vídeos sincronizados em múltiplas câmeras e dados de rastreamento manual em 3D. Ambos já estão disponíveis no Hugging Face; o conjunto de dados completo Human 1M está disponível apenas para parceiros da aliança Cosmos.
- NVIDIA Isaac Lab 3.0 agora disponível: framework de aprendizado de agentes open source, que suporta fluxos de trabalho paralelos em múltiplos GPUs, desde estações de trabalho locais até data centers, com treinamento e iteração de estratégias robóticas baseadas no Newton e no motor físico NVIDIA PhysX™.
- NVIDIA Isaac OS: framework de execução aberto construído sobre o NVIDIA Holoscan, integrando IA, sensores, unidades de controle e hardware robótico para agendamento determinístico em tempo real, da simulação ao robô físico.
- A NVIDIA lançou três fluxos de trabalho de referência abertos para o DGX Station™: iteração do modelo GR00T 1.7 com aprendizado por reforço, treinamento de habilidades de manipulação delicada no Isaac Lab e fine-tuning do modelo mundial NVIDIA Cosmos™ combinado com o ChatGPT Astra para gerar dados sintéticos.
- NVIDIA Halos: Plataforma segura de pilha completa baseada no NVIDIA IGX Thor™, ajudando veículos autônomos e robôs a passar de protótipos para implementação segura e escalável.
Os ativos do repositório SimReady no Hugging Face são provenientes de: Comau, FANUC, ForgeCAD, Franka Robotics, LG Electronics, Palatial, Robotiq, Standard Bots, Universal Robots, Vertiv.
O fluxo de trabalho de referência de aprendizado de robótica de código aberto da NVIDIA, executado na DGX Station, conta com o apoio de empresas como 1X, Siasun Robotics, Humanoid, Maven Robotics, Mentee, MicroAGI, Rhoda, Sereact e Skild AI.
Várias parceiras robóticas integraram o Halos em suas arquiteturas de segurança: Siasun, Agility, Dexory, FORT Robotics e KION, para soluções de segurança de robôs de armazém; a SICK está avaliando o Halos para desenvolver capacidades dinâmicas de segurança para robôs industriais, superando limitações de áreas de segurança fixas e lidando com cenários dinâmicos.
Advantech e NexCOBOT estão desenvolvendo uma plataforma de computação industrial baseada no NVIDIA IGX; Reynolds & Moore, Accenture e TÜV Süd estão acelerando o processo de certificação para implantação segura de IA física industrial.
Fabricantes europeus de robôs estão desenvolvendo tecnologias com base na tecnologia de código aberto da NVIDIA
A ABB integrou a biblioteca NVIDIA Omniverse™ ao RobotStudio HyperReality para simulação e调试 virtual de sistemas robóticos antes da produção, abrangendo múltiplos setores. O Grupo KUKA integrou componentes Omniverse ao Visual Components FactoryLens para adicionar renderização em tempo real à simulação de fábricas. A Sereact treinou e ajustou a plataforma Cortex para classificação de cargas, utilizando Isaac GR00T + Cosmos Transfer, e implantou em braços robóticos industriais UR.
Humanoid desenvolve e valida comportamentos robóticos antes da implantação industrial, utilizando Jetson Thor, Holoscan Sensor Bridge, Halos e Isaac OS; Hexagon Robotics desenvolve capacidades de percepção AEON, incluindo vídeo teleoperado, localização, mapeamento e detecção de pose de objetos; Bear Robotics acelera a percepção e execução de modelos do KR1, ajustando o Isaac GR00T com o Kino-2 para cenários de armazém, devoluções e industriais.
A Toyota Material Handling Europe e a SoftServe utilizam o Omniverse e o NVIDIA Isaac Sim™ para desenvolver soluções autônomas de manipulação de materiais, reduzindo em até 50% o tempo de implantação. A Idealworks, com base em modelos abertos da NVIDIA e no Jetson, desenvolve capacidade de memória para robôs móveis autônomos em fábricas. A ADI > Analog Devices (ADI) utiliza o Jetson AGX Orin™ e a biblioteca cuVSLAM para desenvolver robôs móveis autônomos.
Hugging Face e a Pollen Robotics desenvolveram o Microduck, um robô pequeno e de código aberto, baseado no Isaac Lab, Isaac Sim e Newton, para que desenvolvedores e estudantes possam treinar, modificar e compartilhar novos comportamentos embutidos. A Franka Robotics integrou os microserviços NIM™ da NVIDIA e o Isaac Sim para converter instruções em linguagem natural em ações do braço robótico Franka FR3 Duo. O Bellboy utiliza Jetson e GR00T para operar o robô Billie, seu primeiro parceiro robótico de IA física, já implantado em hotéis da Marriott, Hilton, InterContinental e OYO.
A Flexion utiliza o Isaac Lab e o Newton para escalar o treinamento do modelo unificado de inteligência robótica Reflect; o Reflect integra raciocínio e movimento corporal completo, realizando operações complexas em diferentes plataformas. A Schaeffler fornece exclusivamente à Newton tecnologia de atuadores, acelerando o desenvolvimento de robôs humanoides em conjunto com o Isaac Lab e o Isaac Sim.
A NEURA Robotics utiliza Isaac Sim e Isaac Lab para gerar dados de treinamento sintéticos e treinar habilidades de robôs para o modelo base multimodal Neuron AI em ambiente de simulação.
Editor-chefe: Liu Mingliang