Команда Seed от ByteDance запускает Seed3D 2.0 с улучшенной генерацией геометрии и материалов

Согласно новости ME, 23 апреля (UTC+8), по данным мониторинга Beating, команда Seed ByteDance выпустила Seed3D 2.0 — инструмент для генерации 3D-моделей из изображений, который на вход принимает одно изображение и выдает 3D-активы с текстурами. Это обновление сосредоточено на повышении геометрической точности и реалистичности текстур; API уже доступен на Huoshan Ark. Генерация геометрии использует двухэтапную стратегию «от грубого к тонкому»: сначала крупномасштабная DiT-модель создает грубую топологию, а затем восстанавливаются острые края и детализированные поверхности. Для текстур применяется архитектура MoE для улучшения деталей высокого разрешения, а также вводится предварительная информация VLM для повышения стабильности разложения текстур при неизвестном освещении, в результате чего генерируются полные PBR-текстуры, совместимые со стандартными рендеринговыми конвейерами. Шестьдесят экспертов с опытом 3D-моделирования провели слепую оценку на основе около 200 тестовых случаев, сравнивая Seed3D 2.0 попарно с Hunyuan3D-2.5/3.1, Tripo 3.0, Rodin Gen2, HiTem v2.0 и предыдущей версией Seed3D 1.0. Предпочтение к генерации геометрии составило от 65,1% до 98,3%, а предпочтение к 3D-активам с текстурами превысило 69% во всех случаях. В плане применения в нижестоящих задачах Seed3D 2.0 может разделять 3D-активы на отдельные компоненты по функциональности и добавлять информацию о суставах, выводя данные в формате URDF, совместимом с симуляторами, такими как Isaac Sim, что делает его пригодным для динамических сценариев, например, захвата роботами. На уровне сцен также поддерживается ввод текста, нескольких изображений или видео для комбинирования нескольких активов и создания полных сцен. (Источник: BlockBeats)