GPT-6 at ByteDance Seedance 2.5 ay nagtatrabaho kasama sa paggawa ng video na nilikha ng AI

Nagtrabaho na ba ang GPT-6 para sa Seedance ng ByteDance??

At ang pagpapalabas na ito, may maraming tungkulin pa—

Isulat ang kuwento, itayo ang setting, ilagay ang mga aktor, tukuyin ang posisyon ng kamera, gumawa ng storyboard, lumikha ng video, i-edit ang final cut...

Sige sige, ang GPT-6 ang nagtatanggol bilang direktor, at ang Seedance2.5 ang nagbibigay ng pelikula.

Sa surface, dalawang karakter ng anime ang nagpapalabas ng kanilang mga espada sa isang Japanese-style na kalye.

Ang kamera ay tumatakbo sa ibabaw ng bubong, pagkatapos ay mabilis na lumalapit sa mga karakter; ang mga tauhan ay mula sa pagkakasundo, pagtakbo, hanggang sa malapit na pakikidigma, at ang ilang mga shot ay nananatiling nasa iisang lugar.

 

Sa kasalukuyang kalagayan ng AI video scene, ang pagtingin lamang sa final cut ay hindi pa siguradong magdudulot ng pagkabigla (doge).

Ngunit tingnan mo muli ang gawain na ibinigay ni Higgsfield kay Astra:

Gumawa ng isang kuwento ng pakikidigma sa Blade, gawin ang pre-visualization sa Blender, gamitin ang Seedance 2.5 para sa mga shot, at i-edit ang mga materyales sa huling bersyon habang pinapanatili ang pagkakatulad ng mga karakter at escena.

Ibig sabihin, ang tao ay nagbigay lang ng isang pangkabuuang kahilingan, at mula sa Brief hanggang sa huling paglalabas, ang GPT-6 Astra ang nagawa lahat sa kanyang desktop.

Hindi, habang nasa GPT-6 launch event, naglalaro pa rin ng circuit board sa KiCad at nagtatayo ng bahay sa Blender—

Dalawang araw lang naman ang nakalipas, ngunit ang mga netizen ay agad nang isinama na ito sa isang film studio...

Ang buong proseso ay tila isang anime studio na may AI.

Pagkatapos makatanggap ng gawain, ang unang gagawin ng GPT-6 Astra ay magbuo ng isang kuwento mula sa simula na maaaring isagawa.

Sino ang nagtatagpo, bakit sila nagtatagpo, saan sila nagtatagpo, paano ipinapalaganap ang aksyon, at ilang shot ang kailangan—dapat muna itong maunawaan.

May kwento na, at buksan niya ang Blender.

Iayos ang mga kalye, bahay, mga karakter, at mga prop sa isang relatiwong simpleng 3D scene batay sa kuwento, pagkatapos ay isisigaw ang dalawang karakter at iayos ang kanilang posisyon at lakad sa iba’t ibang shot.

Ang ginagawa sa panahong ito ay ang previs na pang-telebisyon.

Pagkatapos ng buong proseso, ang buong laban ay nagsagawa na ng isang rehearsal sa Blender gamit ang 3D models.

Pagkatapos ay ginawa ng GPT-6 Astra ang mga reference frame na tumutugon sa iba’t ibang shot batay sa mga preview footage, at ipinadala ang mga reference para sa karakter, escena, at galaw sa Seedance 2.5.

Sa punto na ito, ang Byte Seedance ay opisyal na sumali sa grupo.

 

Naglalayon ito na i-convert ang mga static na reference frames at rough animatics sa mga tunay na video na may character animation, camera movement, at anime-style aesthetic.

Siyempre, pagkatapos ng pagbuo, ang Astra ay hindi pa nagtatapos ng trabaho.

Ipinapadala niya ang bawat fragment na ginawa ng Seedance sa editing tool, pinipili ang mga shot, inaayos ang timeline, at pinagsasama upang makabuo ng kompletong bersyon, at pagkatapos ay i-export ang final video.

Mas tiyak na sinasabi, ang GPT-6 ay nagbukod ng maraming kasangkapan at modelo upang gumawa ng isang pansamantalang set:

Isusulat ni GPT-6 ang kuwento, ginagamit ang Blender para sa pre-visualization, tinatawag ang Seedance 2.5 para sa pagbuo ng mga eksaktong shot, at bumabalik sa desktop para sa pag-edit at pag-export.

Naghihintay ang mga tao sa labas para makatanggap ng mga file...

Iwanan muna ang AGI, ang pagtanggap sa Seedance 2.5 ay talagang maayos.

Agad na isinama ng netizens ang这套玩法 sa Leaf Village.

Ang Astra ay gumagawa muna ng 3D Blockout, kung saan tanging ang istruktura ng gusali, posisyon ng mga tao, at malawak na ugnayan ng espasyo ang pinapanatili bilang simpleng modelo.

Pagkatapos ay i-setup ang anim na kamera sa Blender at tukuyin kung paano i-capture ang bawat anim na shot.

Pagkatapos matukoy ang kamera, ang bawat cut point ay maglalabas ng isang frame.

Ipinapasa ang mga larawang ito sa GPT Image 2 para sa pagpapabuti, upang isalin ang orihinal na magaspang na 3D grayscale model sa mga keyframe na may estilo ng Naruto.

Sa huli, lumabas ang Seedance 2.5, isang 30-segundong amateurlarong maikling pelikula na may anim na eksena ng Konoha.

 

Hindi pa natapos ang animasyon, at bumaba na naman ang GPT-6 at Seedance sa mga maikling dula ng China.

Mas abstrak ang paraan ngayon: isang pangungusap, baguhin ang isang 30-episodyong Chinese short drama sa bersyon ng Amerika.

Sa video na ihahambing, ang pangunahing kuwento at ritmo ng mga eksena ay kumopya nang malapit, ngunit ang mga karakter, setting, wika, at kultural na konteksto ay buong-buo nang palitan.

Nilipat ang mukha ng Chinese AI actor sa mukha ng American AI actor, at muling ginawa ang kuwarto, kalye, at damit, habang sinubukan pang sundin ang komposisyon ng imahe at galaw ng mga karakter mula sa orihinal na pelikula.

 

At hindi lang si GPT-6 ang lumapit sa Seedance para magkasama.

Sa loob ng dalawang araw, ang GPT-6 Astra, Fable 5.1, at Gemini 3.8 Flash ay bumabagsak ng Prompt nang paulit-ulit, at pagkatapos ay ipinapasa lahat sa Seedance 2.5 para i-videong i-produce.

Sige sige, Seedance directly: Turn on!!!

Ang iisang brief ay nagresulta sa tatlong iba’t ibang lasa kapag ipinasa sa iba’t ibang model.

May ilang bersyon na nagtataglay ng teksto sa mga galaw ng tauhan, kung saan ang kamera ay sumusunod sa mabilis na pag-unlad ng pangyayari; may ilang iba naman na nagbibigay-diin sa komposisyon, liwanag, at atmospera, kaya mas tila ito ay disenyo na may storyboard; at mayroon ding mga bersyon na sumusunod nang mahigpit sa mga gawain, kung saan ang impormasyon ay kompletong ibinibigay, ngunit ang damdamin ng direktor ay hindi gaanong malakas.

 

Ginamit pa rin ang GPT-6 Astra at Fable 5.1 sa maraming pagsusulit, at patuloy pa ring Seedance 2.5.

Halimbawa, kamay na ginawa na Japanese horror tale:

 

O, animated ink wash:

 

Huwag muna mag-alala kung sino ang mananalo sa GPT-6 at Fable, ang effect ng ink wash ni Seedance ay talagang may kakaibang bagay.

Pagkatapos ng paghahambing, ang resulta ng laban sa tatlong malalaking model ay hindi pa rin malinaw, ngunit ang ByteDance Seedance ay nagsisimula nang manatili sa sentro ng set...

Pagkatapos mag-wrap sa set, agad umalis ang GPT-6 para sa kanyang part-time job bilang colorist.

Ito ay ang DaVinci Resolve na binuksan ng GPT-6.

Binigyan ng isang reference image ng netizen ang GPT-6 Astra upang i-adjust ang kulay ng orihinal na video sa parehong estilo tulad ng isang propesyonal na colorist.

Kailangan nating obserbahan ang kolor temperature, kontraste, anino, highlight at pangkalahatang kulay trend sa reference image, bago gamitin ang color grading tools sa DaVinci, isang I-click I-edit ang video.

Ang epekto pagkatapos ng 4 minuto ay ganito:

 

Batay sa pagkukumpara ng bago at dating, ang orihinal na video ay mas patag at mas abo, habang ang naproseso ay mas malalim ang kulay, nabawasan ang mga anino, at mas malapit ang relasyon ng mainit at malamig sa reference image.

Siyempre, ang mga komento ng mga netizen tungkol sa AI colorist ay hindi ganito magkakasunod kaysa sa animated short film.

May ilan na nagsasabi na ang pagkumpleto ng pagkakatugma ng istilo ng reference image sa 4 minuto ay talagang kapaki-pakinabang;

May ilan na walang paki-asa na sinabi na mas masama pa ang hitsura pagkatapos ng pag-adjust ng kulay... Ang pag-adjust ng kulay ay dapat na maglilingkod sa kuwento, at ang kulay mismo ay maaaring maging tema ng pagsasalaysay; ang AI ay tila hindi pa kayang maunawaan ang mga intensyon sa paggawa na ito...

Maaaring sabihin lamang na ito ay tradisyonal na gawa ng industriya ng pelikula: ang mga kasangkapan ay kahit pa lang ay pumasok sa set, ang mga digmaan sa estetika ay nagsimula na.

Sa pagpapakilala, hinahangad pa ng OpenAI na patunayan na ang Astra ay kayang gamitin ang iba’t ibang propesyonal na software, ngunit sa kamay ng mga netizen, ang mga tagubilin ay naging mas kreatibo.

Tungkol sa Seedance—

Nakakasupo sa ByteDance, biglang naging pinakamagandang kasama ang GPT-6.

Sora: Ano naman ako???

Mga link na pang-referensya: [1] https://x.com/higgsfield_ai/status/2096352124754104618?s=20 [2] https://x.com/groovestreetgen/status/2096354475879600432?s=20 [3] https://x.com/Pinkuo_/status/2095754189548986426 [4] https://x.com/eachlabs/status/2095911062499381467 [5] https://x.com/eachlabs/status/2095911062499381467 [6] https://x.com/higgsfield_ai/status/2095609438946394380 [7] https://x.com/AngryTomtweets/status/2095654817154908253 [8] https://x.com/higgsfield_ai/status/2096334648016253339

Ang artikulong ito ay mula sa WeChat public account na "Quantum Bit", may-akda: Wen Le