NVIDIA, bugün开源机器人 geliştirme platformu NVIDIA Isaac™ için büyük bir genişleme duyurdu, yeni bir insan benzeri robot referans modeli, eşlik eden veri seti ve çalışma zamanı eklendi, aynı zamanda robot öğrenme çerçevesi güncellendi.
Bu teknoloji sayesinde geliştiriciler, veri toplamadan gerçek dünyaya entegrasyona kadar tüm süreci tek bir çözümde sunar ve genel amaçlı robotları daha hızlı gerçek senaryolara yönlendirebilir.
“Genel amaçlı robotlar hızla ilerliyor ve robotik alanında ‘ChatGPT anı’ yakında gerçekleşecek.” dedi NVIDIA kurucusu ve CEO’su Jensen Huang. “NVIDIA Isaac adlı tam yığın açık kaynak robotik platformuyla, fiziksel AI’yi küresel ana endüstrilere kazandırmak için geliştiricilere modeller, veriler, simülasyon araçları ve hesaplama sistemleri sunuyoruz.”
Agile ONE SN——Araştırmalar için öncü insan benzeri robot referans platformu
Agile Robots, NVIDIA Isaac GR00T ile önceden yüklenmiş ve NVIDIA Jetson Thor™ kenar AI platformu ile donatılmış olan Agile ONE SN adlı tam yığın insansı robot referans modelini duyurdu.
Robotik geliştiriciler genellikle bir büyük zorlukla karşılaşıyor: simülasyon, eğitim ve dağıtım araçları birbirinden ayrılmış ve robot becerilerini geliştirme ortamından fiziksel robotlara aktarmak zor oluyor. Agile ONE SN, tüm araçları ve iş akışlarını tek bir platformda birleştirerek dağıtım hazırlık süresini haftalardan günlere indiriyor.
Agile ONE SN Parametre Öne Çıkanları:
- Agile ONE S insan benzeri vücut: 1,4 metre boy, 40 kilogram ağırlık, 31 serbestlik derecesi, tek kolda maksimum 3 kilogram yük taşıma kapasitesi
- Bir WUJI Hand 2 beş parmaklı esnek el: Her elde 20 serbestlik derecesi, 1 kHz kuvvet kontrolü ve dokunsal algılama ile ince işlemler gerçekleştirin
- Yerleşik NVIDIA Jetson Thor işlem gücü: FP4 işlem gücü 2070 TFLOPS, birleşik bellek 128GB, yerinde çıkarım ve gerçek zamanlı kontrol için
- Çok modlu algılama: Baş ve bilek kameraları, laser radarı, enersiyonel ölçüm birimi ile çevre algılanır ve etkileşim kurulur.
- NVIDIA Isaac GR00T Platformu: GR00T temel büyük modeli, veri toplamadan dağıtıma kadar tam iş akışı, tam vücut koordinasyonlu hareket kontrolü
- Güvenlik yetenekleri: Robot uç güvenlik protokolüne entegrasyon planlanmaktadır; robotlara yönelik NVIDIA tam yığın güvenliği Halos ile bağlantı kurulacaktır.
“İnsan benzeri robotların kritik noktası ölçeklenebilir pratik uygulamadır: Çeşitli insanlar için tasarlanmış ortamlarda çalışmak üzere birçok beceriyi öğrenen, kendini uyarlayan bir makine,” dedi思灵机器人创始人兼 CEO 陈兆芃. “Bugün,思灵, NVIDIA Isaac GR00T ve Jetson Thor tabanlı tam yığın açık kaynaklı bir insan benzeri referans modeli olan Agile ONE SN’i tanıttı ve geliştiricilere insan benzeri robotların uygulama için gerekli yeteneklerini geliştirmek, eğitmek ve doğrulamak üzere hazır bir sistem sundu.”
Agile ONE SN, 2027 başlarında piyasaya sürülecek ve öncü insan benzeri robot geliştirme hizmetleri sunacak; Stanford Üniversitesi, Zürih Federal Teknoloji Enstitüsü gibi önde gelen kurumlar iş birliği talebinde bulundu.
NVIDIA'nın yeni teknolojisi, robot öğrenmeyi veriden uygulamaya kadar hızlandırıyor
NVIDIA'nın bu tamamen yeni araç zinciri, geliştiricilere eğitim verileri üretmeyi, robotik öğrenmeyi ölçeklendirmeyi, simülasyon ortamları kurmayı ve robot uygulamalarını dağıtmayı sağlayarak araştırma ve geliştirme döngüsünü kısaltır.
- SimReady Merkezi Kaynak Kütüphanesi: 2.000'den fazla doğrudan simülasyon için kullanılabilir robot ve endüstriyel varlık sunar; Human 1M veri seti, zengin insan hareketleri, senkronize çoklu açılı videolar ve üç boyutlu el takibi verilerini içerir. İkisi de Hugging Face'de yayınlanmıştır; tam Human 1M veri seti yalnızca Cosmos ittifak ortakları için erişilebilirdir.
- NVIDIA Isaac Lab 3.0 Resmi Olarak Yayınlandı: Yerel istasyondan veri merkezine kadar çoklu GPU paralel iş akışlarını destekleyen açık kaynaklı ajan öğrenme çerçevesi, Newton ve NVIDIA PhysX™ fizik motoru ile robot stratejilerini eğitmek ve yinelemek için.
- NVIDIA Isaac OS: NVIDIA Holoscan üzerine kurulan açık kaynak çalışma zamanı çerçevesi, AI, sensörler, kontrol birimleri ve robotik donanımı birleştirerek simülasyondan fiziksel robotlara deterministik gerçek zamanlı zamanlama sağlar.
- NVIDIA, DGX Station™ için üç adet açık kaynak referans iş akışı yayınladı: Güçlendirilmiş öğrenmeye dayalı olarak GR00T 1.7 modelini yinelemek, Isaac Lab'de zorlu operasyon becerilerini eğitmek ve NVIDIA Cosmos™ dünya modelini ince ayarlamak ve ChatGPT Astra ile sentetik veri üretmek.
- NVIDIA Halos: NVIDIA IGX Thor™ tabanlı tam yığın güvenli platform, otonom araçlar ve robotların prototipten güvenli ve ölçeklenebilir uygulamalara geçişini sağlar.
Hugging Face'deki SimReady kaynak kütüphanesi varlıkları: Comau, FANUC, ForgeCAD, Franka Robotics, LG Elektronik, Palatial, Robotiq, Standard Bots, Universal Robots, Vertiv.
NVIDIA DGX Station üzerinde çalışan NVIDIA açık kaynak robotik öğrenme referans iş akışı, 1X, Siling Robotics, Humanoid, Maven Robotics, Mentee, MicroAGI, Rhoda, Sereact ve Skild AI gibi şirketlerin desteğiyle sağlanmaktadır.
Birden fazla robot ortağı, Halos'u depo robotu güvenlik çözümleri için entegre ediyor: Sias, Agility, Dexory, FORT Robotics ve KION; SICK ise Halos'u, sabit güvenlik bölgelerinin sınırlarını aşarak dinamik senaryolara cevap verebilen endüstriyel robotlar için dinamik güvenlik yetenekleri geliştirmek amacıyla değerlendiriyor.
Advantech ve NexCOBOT, NVIDIA IGX tabanlı bir endüstriyel hesaplama platformu geliştiriyor; Reynolds & Moore, Accenture ve TÜV SÜD endüstriyel fiziksel AI güvenli dağıtımının sertifikasyon süreçlerini hızlandırıyor.
Avrupa robot üreticileri, NVIDIA'nın açık kaynak teknolojisini kullanarak araştırma ve geliştirme yapıyor.
ABB, RobotStudio HyperReality'a NVIDIA Omniverse™ kütüphanelerini entegre ederek robot sistemlerini üretim öncesi simüle edip sanal olarak test eder ve çoklu endüstrileri kapsar. KUKA Grubu, Visual Components FactoryLens'e Omniverse bileşenlerini entegre ederek fabrika simülasyonlarına gerçek zamanlı rendering ekler. Sereact, Isaac GR00T + Cosmos Transfer kullanarak kargo sıralama için Cortex platformunu eğitir ve ince ayarlar,优傲 endüstriyel robot kollarına dağıtır.
Humanoid, Jetson Thor, Holoscan Sensor Bridge, Halos ve Isaac OS ile endüstriyel pilot öncesi robot davranış geliştirme ve doğrulama tamamlar; Hexagon Robotics, AEON algılama yeteneklerini, uzaktan kumanda videosu, konumlandırma, haritalama ve nesne pozisyon tespiti içerecek şekilde geliştirir; Bear Robotics, KR1 algılama ve model yürütmesini hızlandırır ve Kino-2 ile Isaac GR00T'i ince ayarlayarak depolama, iade ve endüstriyel senaryolara odaklanır.
Toyota Material Handling Europe ve SoftServe, Omniverse + NVIDIA Isaac Sim™ kullanarak kendi kendine hareket eden malzeme taşıma çözümleri geliştiriyor ve dağıtım süresini en fazla %50 oranında kısaltıyor. Idealworks, NVIDIA'nın açık kaynak modellerini ve Jetson'u kullanarak fabrika otonom hareketli robotları için hafıza yeteneği geliştiriyor. ADI>亚德诺 (ADI), Jetson AGX Orin™ ve cuVSLAM kütüphanesini kullanarak kendi kendine hareket eden robotlar geliştiriyor.
Hugging Face ve Pollen Robotics, Isaac Lab, Isaac Sim ve Newton tabanlı olarak geliştiriciler ve öğrencilerin yeni vücutsal davranışları eğitmek, değiştirmek ve paylaşmak için kullanabileceği küçük bir açık kaynak robotu olan Microduck’i oluşturdu. Franka Robotics, NVIDIA NIM™ mikroservisleri ve Isaac Sim’i entegre ederek doğal dil komutlarını Franka FR3 Duo robot kolu hareketlerine dönüştürdü. Bellboy, Jetson ve GR00T ile desteklenen Billie adlı ilk fiziksel AI robot ortağını, Marriott, Hilton, InterContinental ve OYO otellerinde yayına aldı.
Flexion, Isaac Lab ve Newton kullanarak, tek bir robot akıllık modeli Reflect için ölçeklendirilmiş eğitim gerçekleştiriyor; Reflect, çıkarım ve tam vücut hareketini birleştirerek farklı cihazlarda karmaşık işlemler tamamlıyor. Schaeffler, Newton'a özel olarak aktüatör teknolojisi sağlıyor ve Isaac Lab ile Isaac Sim ile birlikte insan benzeri robot geliştirme sürecini hızlandırıyor.
NEURA Robotics, Isaac Sim ve Isaac Lab kullanarak sentetik eğitim verileri oluşturarak, simülasyon ortamında Neuron AI çok modlu temel modeli için robot becerilerini eğitiyor.
Düzenleyici: Liu Mingliang