ทีม Seed ของ ByteDance เปิดตัว Seed3D 2.0 พร้อมการสร้างเรขาคณิตและวัสดุที่ดีขึ้น

ข่าวจาก ME News เมื่อวันที่ 23 เมษายน (UTC+8) ตามการติดตามของ Beating ทีม Seed ของ ByteDance เปิดตัว Seed3D 2.0 ซึ่งเป็นระบบสร้างแบบจำลอง 3D จากภาพเดียว โดยสามารถรับภาพเดียวแล้วส่งออกทรัพย์สิน 3D ที่มีพื้นผิว การอัปเกรดครั้งนี้มุ่งเน้นที่ความแม่นยำทางเรขาคณิตและความสมจริงของพื้นผิว โดย API ได้เปิดใช้งานบน Huoshan Ark การสร้างเรขาคณิตใช้กลยุทธ์สองขั้นตอนแบบ Coarse-to-Fine: ก่อนหน้าใช้ DiT ขนาดใหญ่เพื่อสร้างโครงสร้างทอพอโลยีแบบหยาบ จากนั้นจึงฟื้นฟูขอบคมและพื้นผิวละเอียด ส่วนพื้นผิวใช้สถาปัตยกรรม MoE เพื่อเพิ่มรายละเอียดความละเอียดสูง และนำ VLM Prior มาใช้เพื่อเสริมความมั่นคงในการแยกส่วนพื้นผิวภายใต้แสงที่ไม่รู้จัก ส่งออกแผนที่ PBR แบบสมบูรณ์ซึ่งสามารถเชื่อมต่อได้โดยตรงกับระบบเรนเดอร์มาตรฐาน ผู้ประเมิน 60 คนที่มีประสบการณ์ในการสร้างแบบจำลอง 3D ได้ทำการประเมินแบบไม่รู้ชื่อผู้ผลิตด้วยตัวอย่างทดสอบประมาณ 200 ชุด โดยเปรียบเทียบ Seed3D 2.0 กับ Hunyuan3D-2.5/3.1, Tripo 3.0, Rodin Gen2, HiTem v2.0 และรุ่นก่อนหน้า Seed3D 1.0 เป็นคู่ๆ ผลลัพธ์แสดงว่าอัตราความชอบในการสร้างเรขาคณิตอยู่ระหว่าง 65.1% ถึง 98.3% และอัตราความชอบสำหรับทรัพย์สิน 3D ที่มีพื้นผิวทั้งหมดเกิน 69% ในแง่ของงานรอง เกิด Seed3D 2.0 สามารถแยกทรัพย์สิน 3D เป็นชิ้นส่วนอิสระตามฟังก์ชันและเพิ่มข้อมูลข้อต่อ เพื่อส่งออกในรูปแบบ URDF ที่เข้ากันได้กับซิมูเลเตอร์ต่างๆ เช่น Isaac Sim เหมาะสำหรับสถานการณ์การโต้ตอบแบบไดนามิก เช่น การจับของหุ่นยนต์ ในระดับฉาก รองรับการป้อนข้อมูลผ่านข้อความ ภาพหลายมุมมอง หรือวิดีโอ เพื่อรวมทรัพย์สินหลายชิ้นสร้างฉากที่สมบูรณ์ (ที่มา: BlockBeats)