Đội ngũ Seed của ByteDance ra mắt Seed3D 2.0 với khả năng tạo hình học và vật liệu được nâng cao

Tin tức từ ME News, ngày 23 tháng 4 (UTC+8), theo giám sát của Beating, đội ngũ Seed của ByteDance đã ra mắt Seed3D 2.0, một công cụ chuyển ảnh thành mô hình 3D, cho phép đầu vào một hình ảnh đơn lẻ và đầu ra tài sản 3D có chất liệu. Lần nâng cấp này tập trung vào độ chính xác hình học và độ chân thực của chất liệu, API đã được triển khai trên Volcano Ark. Việc tạo hình học sử dụng chiến lược hai giai đoạn từ thô đến tinh: trước tiên dùng DiT tham số lớn để xây dựng cấu trúc topo thô, sau đó phục hồi các cạnh sắc nét và bề mặt tinh tế. Về chất liệu, kiến trúc MoE được áp dụng để nâng cao chi tiết độ phân giải cao, đồng thời tích hợp tiên đề VLM để tăng tính ổn định trong phân tách chất liệu dưới điều kiện ánh sáng chưa biết, đầu ra là bản đồ PBR hoàn chỉnh, có thể tích hợp trực tiếp vào quy trình render tiêu chuẩn. 60 chuyên gia có kinh nghiệm mô hình 3D đã thực hiện đánh giá mù với khoảng 200 trường hợp kiểm tra, so sánh từng cặp Seed3D 2.0 với Hunyuan3D-2.5/3.1, Tripo 3.0, Rodin Gen2, HiTem v2.0 và phiên bản trước đó là Seed3D 1.0. Tỷ lệ ưa thích về tạo hình học dao động từ 65,1% đến 98,3%, tỷ lệ ưa thích đối với tài sản 3D có chất liệu đều vượt quá 69%. Về các tác vụ hạ lưu, Seed3D 2.0 có thể tách tài sản 3D thành các bộ phận độc lập theo chức năng và thêm thông tin khớp nối, đầu ra định dạng URDF tương thích với các động cơ mô phỏng như Isaac Sim, phù hợp với các cảnh tương tác động như robot nắm bắt. Ở cấp độ cảnh, công cụ hỗ trợ đầu vào bằng văn bản, nhiều ảnh hoặc video từ nhiều góc nhìn, kết hợp nhiều tài sản để tạo ra cảnh hoàn chỉnh. (Nguồn: BlockBeats)