Beating İzleme'ye göre, Xiaomi Otomobil, Xiaomi EV World Model adlı yeni bir yardımcı sürüş dünya modeli çerçevesini resmen duyurdu ve ilk kez üç boyutlu yeniden yapılandırma ile video üretme modüllerini derin bir şekilde birleştirdi. Otonom sürüş simülasyonunda geleneksel teknolojiler genellikle yeniden yapılandırmayı ve üretmeyi birbirinden ayırmaktadır. Yeniden yapılandırma modülü sahneyi geri yükleyebilir ancak değişimi tahmin edemez; üretme modülü ise gelecekteki durumları tahmin edebilir ancak uzun zaman serilerinde bozulma ve kayma eğilimindedir. Takım, sahneyi fiziksel bir iskelet olarak sabitlemek için üç boyutlu geometrik yapıyı kullanan JointWM mimarisini önerdi ve ardından üretme modülüyle görsel detayları tamamlayıp gözlenmeyen bölgeleri tahmin etti. Waymo ve nuScenes gibi ana standartlarda birçok en iyi performans rekorunu kırdı. Spesifik mekanizma olarak, WorldRec yeniden yapılandırma modülü geleneksel piksel bazlı yaklaşımı bırakarak seyrek üç boyutlu sorgu noktalarını kullanarak sahne temsili oluşturuyor ve bu noktaları çapraz bakış açılı 4D Gaussian uzay iskeletine artımlı olarak birleştirerek 10 saniyelik bir videoyu 10 saniyede hızlıca yeniden oluşturuyor. Yeniden yapılandırma modülünden sağlanan geometrik öncü bilgilerle, WorldGen üretme modülü, iskeletin fiziksel sınırları içinde kalarak yalnızca gerçekçi ışık ve doku üretimiyle görevli. Gelecek çerçeveler ve görüş açısı boşlukları gibi sınırların dışındaki içerikler için üretme modülü, iki aşamalı zaman serisi eğitimi ve dağılım eşleştirme distilasyon mekanizması ile fiziksel tahminler yapıyor. Tüm mimari, H20 GPU üzerinde tek bakış açısı için 0,19 saniye, üç bakış açısı için 0,46 saniye üretim hızı sağlıyor ve en fazla 1 dakikalık video üretimi destekliyor. Bu çözüm, Waymo yeniden yapılandırma doğruluk testinde 28,48 PSNR puanı elde etti ve nuScenes sıfır örnek genellemede önde kaldı. Üretim verimliliği açısından, bu çözüm otoregresif temel Epona'dan 5,6 kat daha hızlıdır ve uzamsal-zamanlı tutarlılığı benzer algoritmalar arasında önde yer alır. Şu anda bu araştırma sonuçları, Xiaomi Otomobil'in üç ana senaryosunda uygulanmıştır: algılama modeli eğitimi için 100.000'den fazla kaliteli sentetik veri teslimi, uzun kuyruklu trafik durumlarını gerçeğe yakın bir şekilde simüle eden yüksek gerçekçilikli kapalı döngü simülasyon ortamı kurulması ve kullanıcı operasyonlarını generatif videolarla rehberlik eden yardımcı sürüş akademisinin başlatılması.
Xiaomi, Otonom Sürücülük İçin JointWM Çerçevesini Başlatıyor ve Yeni Bir Başarı Markezi Oluşturuyor
MarsBitPaylaş
Özet
Xiaomi EV, otonom sürüş için JointWM çerçevesini tanıttı; bu yeni model, 3D yeniden yapılandırma ve video üretimi birleştiriyor. Çerçeve, Waymo testlerinde 28,48 PSNR değeri elde ederek mevcut modellere kıyasla verimliliği ve tutarlılığı artırıyor. Gerçek dünya varlıkları (RWA) haberleri, bu çerçevenin eğitim için 100.000'den fazla sentetik veri segmenti üretmede kullanılmasını vurguluyor. Teknoloji, şu anda üç ana senaryoda aktif durumda. Yeni token listelemeleri, kripto alanındaki ayrı bir trend olarak kalıyor.
Kaynak:Orijinalini göster
Yasal Uyarı: Bu sayfadaki bilgiler üçüncü şahıslardan alınmış olabilir ve KuCoin'in görüşlerini veya fikirlerini yansıtmayabilir. Bu içerik, herhangi bir beyan veya garanti olmaksızın yalnızca genel bilgilendirme amacıyla sağlanmıştır ve finansal veya yatırım tavsiyesi olarak yorumlanamaz. KuCoin, herhangi bir hata veya eksiklikten veya bu bilgilerin kullanımından kaynaklanan sonuçtan sorumlu değildir.
Dijital varlıklara yapılan yatırımlar riskli olabilir. Lütfen bir ürünün risklerini ve risk toleransınızı kendi finansal koşullarınıza göre dikkatlice değerlendirin. Daha fazla bilgi için lütfen Kullanım Koşullarımıza ve Risk Açıklamamıza bakınız.