NVIDIA hari ini mengumumkan ekspansi besar terhadap platform pengembangan robot open-source NVIDIA Isaac™, menambahkan referensi humanoid robot, dataset pendukung, dan runtime, sekaligus meningkatkan kerangka pembelajaran robot.
Dengan teknologi ini, pengembang dapat memperoleh solusi terpadu mulai dari pengumpulan data hingga pelaksanaan, sehingga dapat lebih cepat menerapkan robot umum ke dalam skenario nyata.
“Robot generik sedang berkembang pesat, dan 'saat ChatGPT' di bidang robotika sudah di ambang pintu,” kata Jensen Huang, pendiri dan CEO NVIDIA, “Dengan platform robotika open-source seluruh stack, NVIDIA Isaac, kami menyediakan model, data, alat simulasi, dan sistem komputasi kepada pengembang untuk membawa AI fisik ke dalam berbagai industri utama di seluruh dunia.”
Agile ONE SN——Platform Referensi Robot Humanoid Terdepan untuk Penelitian
Agile Robots meluncurkan Agile ONE SN, sebuah referensi seluruh sistem robot humanoid yang telah dipasang NVIDIA Isaac GR00T dan dilengkapi platform AI edge NVIDIA Jetson Thor™.
Para pengembang robot sering menghadapi tantangan besar: alat simulasi, pelatihan, dan penyebaran saling terpisah, sehingga sulit memindahkan keterampilan robot dari lingkungan pengembangan ke robot fisik. Agile ONE SN mengintegrasikan seluruh alat dan alur kerja dalam satu platform, mengurangi waktu persiapan penyebaran yang awalnya berlangsung selama beberapa minggu menjadi hanya beberapa hari.
Fitur utama parameter Agile ONE SN:
- Agile ONE S Tubuh humanoid: Tinggi 1,4 meter, berat 40 kg, 31 derajat kebebasan, beban maksimum satu lengan 3 kg
- Sepasang WUJI Hand 2 lima jari yang lincah: masing-masing tangan memiliki 20 derajat kebebasan, kontrol gaya 1 kHz, dan persepsi taktil untuk operasi halus
- Daya komputasi NVIDIA Jetson Thor bawaan: daya FP4 2070 TFLOPS, memori terpadu 128GB, untuk inferensi onboard dan kontrol real-time
- Multi-modal perception: Head and wrist cameras, LiDAR, inertial measurement unit to perceive and interact with the environment
- Platform NVIDIA Isaac GR00T: mencakup model dasar GR00T, alur kerja lengkap dari pengumpulan data hingga peluncuran, dan kontrol gerakan koordinasi tubuh penuh
- Kemampuan keamanan: Berencana mengintegrasikan protokol keamanan bot, terhubung dengan sistem keamanan seluruh stack NVIDIA Halos yang ditujukan untuk bot
“Kunci terobosan robot humanoid adalah penerapan skala besar: mesin yang dapat beradaptasi, belajar berbagai keterampilan, dan bekerja di berbagai lingkungan yang dirancang untuk manusia,” kata Chen Zhaopeng, pendiri dan CEO Siasun Robotics. “Hari ini, Siasun meluncurkan Agile ONE SN, referensi humanoid open-source penuh berbasis NVIDIA Isaac GR00T dan Jetson Thor, yang menyediakan sistem siap pakai bagi pengembang untuk mengembangkan, melatih, dan menguji kemampuan yang diperlukan untuk menerapkan robot humanoid.”
Agile ONE SN diharapkan diluncurkan pada awal 2027, ditujukan untuk pengembangan robot humanoid mutakhir, dengan institusi top seperti Stanford University dan ETH Zurich telah menyatakan minat kolaborasi.
Teknologi terbaru NVIDIA mempercepat pembelajaran robot: dari data hingga penerapan
Rangka alat baru dari NVIDIA membantu pengembang menghasilkan data pelatihan, menskalakan pembelajaran robot, membangun lingkungan simulasi, dan menerapkan aplikasi robot, sehingga memperpendek siklus pengembangan.
- SimReady Central Repository: Menyediakan lebih dari 2.000 robot dan aset industri yang siap digunakan langsung untuk simulasi; Dataset Human 1M mencakup gerakan manusia yang kaya, video multi-sudut yang disinkronkan, dan data pelacakan tangan 3D. Keduanya telah tersedia di Hugging Face; Dataset Human 1M lengkap hanya tersedia untuk mitra konsorsium Cosmos.
- NVIDIA Isaac Lab 3.0 resmi diluncurkan: kerangka kerja pembelajaran agen open-source, mendukung alur kerja paralel multi-GPU dari workstation lokal hingga pusat data, dilatih dan diiterasi dengan Newton dan mesin fisika NVIDIA PhysX™.
- NVIDIA Isaac OS: Kerangka kerja runtime open-source yang dibangun berdasarkan NVIDIA Holoscan, mengintegrasikan AI, sensor, unit kontrol, dan perangkat keras robot untuk menjalankan penjadwalan real-time deterministik dari simulasi ke robot fisik.
- NVIDIA merilis tiga alur kerja referensi open-source untuk DGX Station™: iterasi model GR00T 1.7 berbasis reinforcement learning, pelatihan keterampilan manipulasi cekatan di Isaac Lab, serta fine-tuning model dunia NVIDIA Cosmos™ dan menggabungkannya dengan ChatGPT Astra untuk menghasilkan data sintetis.
- NVIDIA Halos: Platform keamanan penuh berbasis NVIDIA IGX Thor™ yang membantu kendaraan otonom dan robot dari prototipe menuju penerapan yang aman dan berskala.
Aset repositori SimReady di Hugging Face berasal dari: Comau, FANUC, ForgeCAD, Franka Robotics, LG Electronics, Palatial, Robotiq, Standard Bots, Universal Robots, Vertiv.
Workflow referensi pembelajaran robotik open-source NVIDIA yang berjalan di DGX Station didukung oleh 1X, Siasen Robotics, Humanoid, Maven Robotics, Mentee, MicroAGI, Rhoda, Sereact, dan Skild AI.
Beberapa mitra robot mengintegrasikan Halos ke dalam arsitektur keamanan: Siasense, Agility, Dexory, FORT Robotics, dan KION, untuk solusi keamanan robot gudang; SICK sedang mengevaluasi Halos untuk mengembangkan kemampuan keamanan dinamis pada robot industri, melampaui batasan area keamanan tetap, serta menghadapi skenario yang berubah-ubah.
Advantech dan NexCOBOT sedang mengembangkan platform komputasi industri berbasis NVIDIA IGX; Reynolds & Moore, Accenture, dan TÜV Süd sedang mempercepat proses sertifikasi untuk penerapan AI fisik industri yang aman.
Produsen robot Eropa mengembangkan teknologi berdasarkan teknologi open-source NVIDIA
ABB Robotics mengintegrasikan pustaka NVIDIA Omniverse™ ke dalam RobotStudio HyperReality untuk mensimulasikan dan melakukan debugging virtual sistem robot sebelum peluncuran, mencakup berbagai industri. KUKA Group mengintegrasikan komponen Omniverse ke dalam Visual Components FactoryLens untuk menambahkan rendering real-time ke simulasi pabrik. Sereact memanfaatkan Isaac GR00T + Cosmos Transfer untuk melatih dan menyesuaikan platform Cortex yang ditujukan untuk pemilahan barang, yang diterapkan pada lengan robot industri Universal Robots.
Humanoid mengembangkan dan memverifikasi perilaku robot sebelum uji coba industri dengan memanfaatkan Jetson Thor, Holoscan Sensor Bridge, Halos, dan Isaac OS; Hexagon Robotics mengembangkan kemampuan persepsi AEON, yang mencakup video teleoperasi, lokalisasi, pemetaan, dan deteksi pose objek; Bear Robotics mempercepat persepsi dan eksekusi model KR1 dengan memfine-tune Isaac GR00T menggunakan Kino-2, untuk aplikasi di gudang, pengembalian barang, dan lingkungan industri.
Toyota Material Handling Eropa dan SoftServe menggunakan Omniverse + NVIDIA Isaac Sim™ untuk mengembangkan solusi material handling otonom, mengurangi waktu penyebaran hingga 50%. Idealworks memanfaatkan model open-source NVIDIA dan Jetson untuk mengembangkan kemampuan memori pada robot mobile otonom pabrik. ADI> Analog Devices (ADI) menggunakan Jetson AGX Orin™ dan pustaka cuVSLAM untuk mengembangkan robot mobile otonom.
Hugging Face dan Pollen Robotics mengembangkan Microduck, robot open-source berukuran kecil berbasis Isaac Lab, Isaac Sim, dan Newton, yang dirancang bagi pengembang dan siswa untuk melatih, memodifikasi, dan berbagi perilaku tubuh baru. Franka Robotics terintegrasi dengan layanan mikro NIM™ NVIDIA + Isaac Sim untuk mengubah perintah bahasa alami menjadi gerakan lengan robot Franka FR3 Duo. Bellboy mengandalkan Jetson dan GR00T untuk menggerakkan robot Billie, sebagai mitra AI fisik pertamanya, yang telah dideploy di hotel-hotel milik Marriott, Hilton, InterContinental, dan OYO.
Flexion menggunakan Isaac Lab dan Newton untuk memperluas pelatihan model robot cerdas terpadu Reflect; Reflect menggabungkan penalaran dan gerakan tubuh penuh untuk menyelesaikan operasi kompleks lintas perangkat. Schaeffler memberikan teknologi aktuator eksklusif ke Newton, yang dipadukan dengan Isaac Lab dan Isaac Sim, mempercepat pengembangan robot humanoid.
NEURA Robotics menggunakan Isaac Sim dan Isaac Lab untuk menghasilkan data pelatihan sintetis, melatih keterampilan robot untuk model dasar multimodal Neuron AI dalam lingkungan simulasi.
Editor: Liu Mingliang