GPT-6 ve ByteDance Seedance 2.5, AI ile üretilen video üretimi üzerinde iş birliği yapıyor

icon MarsBit
Paylaş
AI summary iconÖzet
GPT-6 Astra ve ByteDance'ın Seedance 2.5, AI tarafından oluşturulan video üretimi sürecini basitleştiriyor. GPT-6 hikaye oluşturma, 3D ön görselleştirme ve düzenleme işlemlerini yönetirken, Seedance 2.5 referans çerçevelerden animasyonlu sahneler üretiyor. Sistem, Naruto tarzı bir kısım ve çok kültürlü bir uyarlama da dahil olmak üzere kısa filmler oluşturdu. Zincir üzerindeki işlem sinyalleri, talep arttıkça destek ve direnç seviyelerinin değiştiğini gösteriyor. Fable 5.1 ve Gemini 3.8 de Seedance 2.5 ile benzer görevler için test edildi.

GPT-6, ByteDance'ın Seedance'e neden katıldı???

Ve bu atış, aynı anda birçok görevi üstlenen bir türdü—

Hikâye yazın, sahne kurun, oyuncuları yerleştirin, kamera pozisyonlarını belirleyin, sahne planları oluşturun, video üretin, montaj yapın…

ByteDance

Tamam, bu sefer GPT-6 yönetmenlik yapıyor, Seedance2.5 filmi üretiyor.

Yüzde görünüşe göre, iki anime karakteri Japon tarzı bir sokakta kılıç çektikten sonra birbirine saldırmaktadır.

Kamera bir an çatıdan geçiyor, bir an karakterlere yakınlaşarak ilerliyor; karakterler çatışma, koşu ve yakın mücadele aşamalarını geçiriyor ve birkaç kamera açısı aynı sahne içinde kalıyor.

 

Şu anki AI videolar dünyasında, yalnızca nihai ürün bakıldığında hemen yere yuvarlanmayabilir (doge).

Ancak Higgsfield'in Astra'ya verdiği görevi tekrar gözden geçirin:

Bir kılıç dövüşü hikayesi düşünün, Blender'da bir önizleme tamamlayın, Seedance 2.5 ile sahneler oluşturun ve bu malzemeleri son sürüm haline getirin, aynı zamanda karakterleri ve sahne tutarlılığını koruyun.

Yani insan sadece genel bir talimat verdi, geri kalanı, Brief'ten son çıktıya kadar, GPT-6 Astra masaüstüde tamamen yürüttü.

Hayır, GPT-6 tanıtım etkinliğinde hâlâ KiCad ile devre kartı çiziyor, Blender ile evler inşa ediyor—

Sadece iki gün geçti, ancak internet kullanıcıları zaten bunu bir sinema setine dahil ettiler...

GPT-6 yönetmenlik yapacak, Seedance oyunu canlandıracak

Tüm uygulama yolu, biraz bir AI versiyonu animasyon ekibi gibi görünüyor.

GPT-6 Astra görevi aldıktan sonra önce çekilebilecek bir hikâye oluşturmaya başlamalıdır.

Kimin kimle, neden, nerede savaşacak, eylem nasıl ilerleyecek, kaç kamera açılımı gerekli, bunlar öncelikle netleştirilmeli.

Hikaye hazır, şimdi Blender'ı açıyor.

Sahne için caddeleri, evleri, karakterleri ve eşyaları nispeten basit bir 3D sahne olarak oluşturun, ardından iki karakteri ekleyin ve farklı kamera açılarında pozisyonlarını ve hareket rotalarını belirleyin.

Bu aşamada Previs film öncesi görselleştirme yapılır.

Bu tüm süreçten sonra, tüm dövüş sahnesi aslında Blender'da 3D modelle bir kez rehearsed edilmişti.

GPT-6 Astra, ön gösterim sahnelerine göre, farklı kamera açılarına karşılık gelen referans çerçeveleri oluşturur ve karakter tasarımı, sahne görselleri ile hareket referanslarını Seedance 2.5'e iletir.

Bu adıma kadar, Byte Seedance resmen ekip katıldı.

 

Statik referans çerçeveleri ve kaba önizlemeleri, karakter hareketleri, kamera hareketleri ve anime tarzı bir videoya dönüştürür.

Elbette, oluşturuma tamamlandıktan sonra Astra hâlâ işte.

Seedance tarafından oluşturulan her bir malzeme parçasını düzenleme aracına sürükleyin, sahneleri seçin, zaman çizelgesini düzenleyin ve tam versiyonu oluşturun, ardından son ürünü dışa aktarın.

Daha doğru bir ifadeyle, GPT-6 birden fazla aracı ve modeli geçici bir sete birleştirdi:

GPT-6, hikâye yazıyor, ön izlemeyi tamamlamak için Blender’ı kullanıyor, ardından resmi sahneleri oluşturmak için Seedance 2.5’i çağırıyor ve son olarak masaüstüne dönerek düzenleme ve dışa aktarma yapıyor.

İnsanlar dışarıda film bekliyor...

AGI'yi bir kenara bırakın, Seedance 2.5 bu sefer gerçekten iyi yakaladı.

Daha sonra internet kullanıcıları bu oyunu Konoha köyüne taşıdı.

Astra, sahneyi yalnızca bina yapısını, karakter konumlarını ve yaklaşık uzaysal ilişkileri koruyan basit model olarak 3D Blockout haline getirir.

Ardından Blender'da 6 kamera ayarlayıp, 6 farklı kamera açısını önceden belirleyin.

Kamera açısı belirlendikten sonra her kesimden bir görüntü dışa aktarılır.

Bu sahneler, GPT Image 2'ye verilerek orijinal kaba 3D gri model, Naruto tarzı anahtar kareler haline getirilecektir.

Son olarak, Seedance 2.5 ile 30 saniyelik, altı sahne içeren bir Konohagakure fan kısa filmi tamamlandı.

 

Animasyon hâlâ yeterli değil, GPT-6 ve Seedance yeniden Çin kısa dizilerine saldırdı.

Bu seferki oyun kuralları daha soyut; bir cümleyle, 30 bölümlük bir Çin kısa dizisini Amerikan versiyonuna çevirin.

ByteDance

Karşılaştırmalı videoda, hikâye çizgisi ve kamera ritmi neredeyse aynen korunmuş, ancak karakterler, sahneler, dil ve kültürel arka plan tamamen değiştirilmiştir.

Çinli AI aktörün yüzü, Amerikalı AI aktörün yüzüyle değiştirildi, orijinal odalar, sokaklar ve kıyafetler yeniden oluşturuldu, sahne kompozisyonu ve karakter hareketleri ise orijinal filmi mümkün olduğunca takip edildi.

 

GPT-6, Fable5.1, Gemini 3.8 hepsi Seedance için film çekmeye geldi

Ayrıca, Seedance ile işbirliği yapmaya gelenler sadece GPT-6 değil.

Bu iki gün içinde, GPT-6 Astra, Fable 5.1 ve Gemini 3.1 Flash sırayla Prompt yazdı ve ardından tümü Seedance 2.5'e videoya dönüştürmek için verildi.

Tamam, Seedance doğrudan: Açılış!!!

Aynı brief farklı modellere ulaşınca gerçekten üç farklı tat verdi.

Bazı sürümler karakterlerin hareketlerine odaklanır ve kamera olayları hızla takip eder; bazıları ise kompozisyon, ışık ve atmosfere daha çok vurgu yapar ve genel olarak bir senaryo planına benzer; bazıları ise görevleri tamamen takip eder, bilgileri tam olarak sunar ancak yönetmenlik hissi nispeten daha zayıftır.

 

GPT-6 Astra ve Fable 5.1 hâlâ birkaç tur daha sınava tabi tutuldu, yine Seedance 2.5.

Örneğin, el ile çizilmiş Japon korku hikayesi:

 

Veya suya dayalı animasyon:

 

GPT-6 ile Fable'in kimin kazandığını şimdilik unutun, Seedance'in bu mürekkep suyu efekti gerçekten bir şey.

Bir tur karşılaştırmadan sonra üç büyük modelin zaferi hâlâ tartışılmakta, ancak ByteDance Seedance zaten sahnenin merkezinde sabitlendi...

Seedance'nin mesai bitiminde, GPT-6, DaVinci'de renk düzeltmeci olarak çalıştı.

Çekim yerinden ayrıldıktan sonra GPT-6 hemen renk düzeltme uzmanı olarak ikinci bir işe başladı.

Bu sefer GPT-6, DaVinci Resolve'u açtı.

Bir kullanıcı, GPT-6 Astra'ya orijinal videonun rengini profesyonel bir renk düzenleyicisi gibi benzer bir stile ayarlaması için bir referans fotoğrafı verdi.

Referans resimdeki renk sıcaklığı, kontrast, gölgeler, highlights ve genel renk eğilimini gözlemlemesi gerekir, ardından DaVinci'deki renk düzeltme araçlarını kullanır. Nokta Nokta Videoyu değiştirin.

Son 4 dakikanın etkisi şöyle:

 

Önce ve sonra karşılaştırıldığında, orijinal video genel olarak daha düzgün ve griydi; işlemden sonra renk tonları daha yoğun hale geldi, gölgeler düşürüldü ve görüntüdeki soğuk-sıcak ilişkisi referans resme daha yakın hale getirildi.

Elbette,网民对这位AI调色师的评价并没有像动画短片那样一致。

Bazıları, referans görsel stili eşleştirmeyi 4 dakikada tamamlamanın kolay olduğunu düşünüyor;

Bazıları, ayarlandıktan sonra daha da kötü göründüğünü açıkça ifade etti... Renk ayarı hikâyeye hizmet etmelidir, renkler kendileri de bir anlatı teması olabilir; AI şu anda bu yaratıcı niyetleri gerçekten anlayamıyor...

ByteDance

Sadece sinema endüstrisinin geleneksel bir alışkanlığı olduğunu söyleyebiliriz; araçlar henüz takıma katıldı, estetik tartışmaları zaten başlamıştı.

ByteDance

Tanıtım toplantısında OpenAI, Astra'nın çeşitli profesyonel yazılımları kullanabileceğini kanıtlamaya çalışırken, internett kullanıcıları kullanım kılavuzunu farklı şekillerde deneyimlemeye başladı.

Seedance hakkında—

ByteDance'te otururken, GPT-6 neden bilinmez bir şekilde en iyi ortağım oldu.

Sora: Peki ben?

Referans bağlantıları: [1] https://x.com/higgsfield_ai/status/2096352124754104618?s=20 [2] https://x.com/groovestreetgen/status/2096354475879600432?s=20 [3] https://x.com/Pinkuo_/status/2095754189548986426 [4] https://x.com/eachlabs/status/2095911062499381467 [5] https://x.com/eachlabs/status/2095911062499381467 [6] https://x.com/higgsfield_ai/status/2095609438946394380 [7] https://x.com/AngryTomtweets/status/2095654817154908253 [8] https://x.com/higgsfield_ai/status/2096334648016253339

Bu yazı, WeChat hesabından "Quantum Bits" tarafından yazılmıştır, yazar: Wen Le

Yasal Uyarı: Bu sayfadaki bilgiler üçüncü şahıslardan alınmış olabilir ve KuCoin'in görüşlerini veya fikirlerini yansıtmayabilir. Bu içerik, herhangi bir beyan veya garanti olmaksızın yalnızca genel bilgilendirme amacıyla sağlanmıştır ve finansal veya yatırım tavsiyesi olarak yorumlanamaz. KuCoin, herhangi bir hata veya eksiklikten veya bu bilgilerin kullanımından kaynaklanan sonuçtan sorumlu değildir. Dijital varlıklara yapılan yatırımlar riskli olabilir. Lütfen bir ürünün risklerini ve risk toleransınızı kendi finansal koşullarınıza göre dikkatlice değerlendirin. Daha fazla bilgi için lütfen Kullanım Koşullarımıza ve Risk Açıklamamıza bakınız.