GPT-6 dan ByteDance Seedance 2.5 Bekerjasama dalam Penghasilan Video Berasaskan AI

icon MarsBit
Kongsi
AI summary iconRingkasan
GPT-6 Astra dan Seedance 2.5 milik ByteDance sedang mempermudah penghasilan video berbasis AI. GPT-6 mengurus penciptaan cerita, pra-visualisasi 3D, dan penyuntingan, manakala Seedance 2.5 menghasilkan rakaman animasi daripada kerangka rujukan. Sistem ini telah mencipta filem pendek, termasuk klip bergaya Naruto dan adaptasi lintas budaya. Isyarat perdagangan atas rantai menunjukkan minat yang semakin meningkat terhadap alat AI, dengan paras sokongan dan rintangan berubah seiring permintaan yang meningkat. Fable 5.1 dan Gemini 3.8 juga telah diuji bersama Seedance 2.5 untuk tugas serupa.

GPT-6 kenapa pergi bekerja untuk Seedance ByteDance??

Dan pukulan ini, masih lagi dengan pelbagai peranan—

Menulis cerita, menyusun adegan, menempatkan pelakon, menentukan kamera, membuat storyboard, menghasilkan video, mengedit menjadi file akhir…

ByteDance

Baik, baik, baik, kali ini GPT-6 bertindak sebagai pengarah, dan Seedance2.5 bertanggung jawab untuk menghasilkan file.

Secara lahiriah, dua watak anime sedang menarik pedang dan bertarung di jalan raya bergaya Jepun.

Kamera melintas sekejap di atas atap, kemudian mendekat dengan cepat mengikuti tokoh, dengan karakter berpindah dari saling menghadap, berlari, hingga pertarungan jarak dekat, beberapa adegan berturut-turut tetap berada dalam latar yang sama.

 

Dalam lingkungan video AI semasa ini, melihat hasil akhirnya sahaja mungkin tidak sampai membuat anda terduduk lemah (doge).

Tetapi lihat semula tugas yang diberikan Higgsfield kepada Astra:

Cipta sebuah cerita pertarungan pedang, lakukan pra-visualisasi di Blender, gunakan Seedance 2.5 untuk menghasilkan kamera, kemudian sunting bahan-bahan ini menjadi versi akhir, sambil mengekalkan kekonsistenan watak dan latar.

Dengan kata lain, manusia hanya memberikan satu permintaan umum, dan selebihnya, dari Brief hingga eksport akhir, GPT-6 Astra menangani semuanya sendiri di atas meja.

Tidak, di acara pelancaran GPT-6, masih melukis papan litar di KiCad, membina rumah di Blender—

Hanya dua hari berlalu, netizen sudah secara spontan memasukkannya ke dalam tapak filem...

GPT-6 sebagai pengarah, Seedance bertanggung jawab untuk memainkan peran

Jalur pelaksanaan keseluruhan, kelihatan agak seperti sebuah pasukan animasi versi AI.

Setelah GPT-6 Astra menerima tugas, langkah pertama yang perlu dilakukan ialah menciptakan cerita yang boleh difilmkan dari awal.

Siapa berlawan siapa, mengapa berlawan, di mana berlawan, bagaimana aksi diproyeksikan, dan berapa banyak bidikan yang diperlukan, perkara-perkara ini perlu dipahami terlebih dahulu.

Cerita sudah ada, ia membuka Blender lagi.

Bina adegan 3D yang disederhanakan terlebih dahulu dengan jalan, rumah, watak, dan alat peraga berdasarkan cerita, kemudian letakkan dua watak tersebut dan tetapkan kedudukan serta laluan pergerakan mereka dalam setiap adegan.

Fasa ini melibatkan previs sinematik.

Selepas melalui seluruh proses ini, aksi pertarungan keseluruhan sebenarnya telah dilatih sekali gus dalam Blender menggunakan model 3D.

GPT-6 Astra kemudian berterusan menghasilkan kerangka rujukan yang sepadan dengan adegan latihan, sebelum menghantar imej watak, adegan latar, dan rujukan gerakan kepada Seedance 2.5.

Pada tahap ini, Byte Seedance baru secara rasmi masuk ke pasukan.

 

Ia bertanggungjawab untuk mengubah kerangka rujukan statik dan pra-paparan kasar menjadi video sebenar dengan gerakan watak, pergerakan kamera, dan kualiti animasi.

Tentu saja, selepas penghasilan selesai, Astra belum pulang kerja.

Ia kemudian menarik bahan-bahan yang dihasilkan oleh Seedance ke dalam alat penyuntingan, memilih adegan, menyusun garis masa, dan menyusun versi lengkap, sebelum mengeksport file akhir.

Lebih tepatnya, GPT-6 menggabungkan beberapa alat dan model menjadi sebuah set sementara:

GPT-6 Astra menulis cerita, mengendalikan Blender untuk pra-penayangan, kemudian memanggil Seedance 2.5 untuk menghasilkan adegan rasmi, akhirnya kembali ke meja kerja untuk menyunting dan mengeksport.

Manusia sedang menunggu di luar untuk menerima kupon...

Apa pun AGI, Seedance 2.5 kali ini diterima dengan cukup stabil.

Seterusnya, netizen membawa permainan ini ke Desa Konoha.

Astra terlebih dahulu menjadikan adegan sebagai 3D Blockout, iaitu hanya mengekalkan struktur bangunan, kedudukan watak, dan hubungan ruang kasar dalam model ringkas.

Kemudian, sediakan enam kamera di Blender terlebih dahulu, dan tentukan cara pengambilan enam adegan tersebut.

Selepas kamera ditetapkan, setiap titik pemotongan akan mengeksport satu gambar.

Gambar-gambar ini kemudian diberikan kepada GPT Image 2 untuk disempurnakan, mengubah model 3D kasar asal menjadi frame kunci bergaya Naruto.

Akhirnya, Seedance 2.5 muncul, sebuah short film penggemar desa Konoha selama 30 saat yang terdiri daripada 6 adegan, berjaya dikumpulkan.

 

Animasi belum lagi habis, GPT-6 dan Seedance sekali lagi menyerang drama pendek China.

Permainan kali ini lebih abstrak, satu ayat: ubah drama pendek Cina 30 episod menjadi versi Amerika.

ByteDance

Dalam video perbandingan itu, alur cerita dan ritme kamera pada dasarnya disalin, tetapi semua karakter, latar, bahasa, dan latar budaya telah diganti sepenuhnya.

Wajah pelakon AI China ditukar kepada wajah pelakon AI Amerika, ruangan, jalan, dan pakaian asal dihasilkan semula, sementara komposisi gambar dan gerakan watak diikuti seberapa rapat mungkin dengan filem asal.

 

GPT-6, Fable5.1, Gemini 3.8 semua datang untuk membuat video bersama Seedance

Selain itu, bukan hanya GPT-6 yang datang mencari Seedance untuk membentuk pasukan.

Dua hari ini, GPT-6 Astra, Fable 5.1, dan Gemini 3.1 Flash menulis Prompt secara bergiliran, kemudian semuanya diserahkan kepada Seedance 2.5 untuk dijadikan video.

Baik, baik, baik, Seedance terus: Hidupkan!!!

Brief yang sama, apabila sampai ke tiga model yang berbeza, benar-benar menghasilkan tiga rasa yang berbeza.

Beberapa versi menekankan tindakan watak, dengan kamera bergerak cepat mengikuti peristiwa; beberapa lagi lebih menekankan komposisi, cahaya, dan suasana, sehingga keseluruhannya kelihatan seperti direka berdasarkan storyboard; sementara yang lain mengikuti tugas secara ketat, memberikan maklumat yang lengkap tetapi rasa pengarahnya kurang kuat.

 

GPT-6 Astra dan Fable 5.1 masih ditahan untuk ujian berperingkat, tetap Seedance 2.5.

Sebagai contoh, kisah seram Jepang yang dilukis tangan:

 

Atau, animasi tinta Cina:

 

Jangan fikirkan siapa yang menang antara GPT-6 dan Fable, efek tinta hitam putih Seedance memang ada sesuatu.

Setelah dibandingkan sekeliling, kelebihan tiga model besar masih belum diputuskan, tetapi ByteDance Seedance sudah duduk nyaman di posisi utama lokasi syuting...

Selepas Seedance tamat kerja, GPT-6 pergi ke DaVinci sebagai penyesuai warna.

Selepas tamat kerja di lokasi penggambaran, GPT-6 terus pergi bekerja sambilan sebagai pakar penyesuaian warna.

Kali ini GPT-6 membuka DaVinci Resolve.

Seorang pengguna memberikan gambar rujukan kepada GPT-6 Astra, memintanya untuk menyesuaikan warna video asal ke gaya yang serupa, seolah-olah ia adalah seorang pakar penyesuai warna.

Ia perlu memerhatikan suhu warna, kontras, bayangan, sorotan, dan kecenderungan warna keseluruhan dalam gambar rujukan, kemudian mengendalikan alat penyesuaian warna di DaVinci, satu Titik titik Sunting video.

Kesan penggunaan akhir selama 4 minit:

 

Dari perbandingan sebelum dan sesudah, video asal keseluruhan kelihatan datar dan kelabu, selepas pemprosesan, warna menjadi jauh lebih pekat, bayangan ditekan, dan hubungan sejuk-gelap dalam gambar lebih dekat dengan gambar rujukan.

Of course, netizens' evaluations of this AI colorist are not as consistent as those for the animated short film.

Ada yang merasa bahawa menyelesaikan pencocokan gaya gambar rujukan dalam 4 minit memang mudah;

Ada juga yang secara terus terang menyatakan, selepas penyesuaian, ia jadi kelihatan lebih buruk... Penyesuaian warna seharusnya melayani cerita, warna itu sendiri juga boleh menjadi tema naratif, AI jelas belum mampu memahami niat kreatif ini...

ByteDance

Hanya boleh dikatakan, ini adalah tradisi lama industri filem, alat baru saja masuk pasukan, tetapi perdebatan estetika sudah bermula dahulu.

ByteDance

Di acara pelancaran, OpenAI masih berusaha membuktikan bahawa Astra boleh mengendalikan pelbagai perisian profesional, tetapi di tangan pengguna internet, panduan penggunaan telah dijadikan kreatif.

Mengenai Seedance——

Duduk di ByteDance, tiba-tiba GPT-6 menjadi pasangan terbaik saya tanpa sebab.

Sora: Lalu saya? ???

Pautan rujukan: [1] https://x.com/higgsfield_ai/status/2096352124754104618?s=20 [2] https://x.com/groovestreetgen/status/2096354475879600432?s=20 [3] https://x.com/Pinkuo_/status/2095754189548986426 [4] https://x.com/eachlabs/status/2095911062499381467 [5] https://x.com/eachlabs/status/2095911062499381467 [6] https://x.com/higgsfield_ai/status/2095609438946394380 [7] https://x.com/AngryTomtweets/status/2095654817154908253 [8] https://x.com/higgsfield_ai/status/2096334648016253339

Artikel ini berasal daripada akaun微信公众号 "Quantum Bit", penulis: Wen Le

Penafian: Maklumat yang terdapat pada halaman ini mungkin telah diperoleh daripada pihak ketiga dan tidak semestinya menggambarkan pandangan atau pendapat KuCoin. Kandungan ini adalah disediakan bagi tujuan maklumat umum sahaja, tanpa sebarang perwakilan atau waranti dalam apa jua bentuk, dan juga tidak boleh ditafsirkan sebagai nasihat kewangan atau pelaburan. KuCoin tidak akan bertanggungjawab untuk sebarang kesilapan atau pengabaian, atau untuk sebarang akibat yang terhasil daripada penggunaan maklumat ini. Pelaburan dalam aset digital boleh membawa risiko. Sila menilai risiko produk dan toleransi risiko anda dengan teliti berdasarkan keadaan kewangan anda sendiri. Untuk maklumat lanjut, sila rujuk kepada Terma Penggunaan dan Pendedahan Risiko kami.