Bahagian penyelidikan AI ByteDance, Seed, telah beroperasi di bawah peraturan yang ringkas tetapi tidak biasa sejak hari pertama: tiada pengekstrakan pengetahuan. Dalam bidang di mana meniru tingkah laku model yang lebih kuat adalah amalan lazim, syarikat induk TikTok memilih jalan yang lebih sukar.
Kedudukan keputusan itu memisahkan ByteDance daripada kalangan ramai makmal AI Cina yang secara terbuka atau senyap telah mendistil kemampuan daripada model yang lebih besar, banyak daripadanya dibina oleh syarikat AS seperti OpenAI dan Anthropic.
Apakah yang dimaksud dengan penyulingan, dan mengapa melewatinya penting
Pengurangan pengetahuan pada dasarnya adalah latihan AI. Model yang lebih kecil dan lebih murah belajar meniru output model yang lebih besar dan lebih kuat. Hasilnya adalah model ringkas yang berkinerja di atas kemampuannya, dilatih dengan sebahagian kecil daripada kos.
Teknik ini telah menjadi luas di ekosistem AI China. Apabila model R1 DeepSeek menjadi berita utama dalam perbincangan luas mengenai penyaringan, ia menonjolkan bagaimana makmal China memanfaatkan output daripada model hadapan AS untuk mempercepatkan pembangunan mereka sendiri. OpenAI dan Anthropic kedua-duanya telah mengemukakan kebimbangan mengenai amalan ini, dan perbincangan mengenai penguatkuasaan syarat perkhidmatan untuk mencegahnya semakin meningkat.
Dengan menolak untuk menyaring, Seed membina modelnya dari awal menggunakan saluran pengumpulan, sintesis, dan pembersihan data miliknya sendiri.
Kalkulus strategik di sebalik keputusan untuk bersendirian
Seorang pekerja ByteDance merumuskan ambisi tersebut dengan jelas: “Matlamat ByteDance bagi hampir semua modelnya adalah mencapai tahap teratas global, atau bahkan piawai terkini.”
Lab telah memasang ujian ke papan. Seedance, model penghasilan video ByteDance, dibangunkan di bawah kerangka tanpa distilasi. Model ini kuasai ciri-ciri di seluruh produk pengguna ByteDance, termasuk Doubao, asisten AI perbualan syarikat, dan CapCut, alat penyuntingan video yang banyak digunakan.
Geopolitik sebagai parit persaingan
Persaingan teknologi AS-Cina telah mengubah pembangunan AI menjadi sesuatu yang menyerupai perlombaan senjata, lengkap dengan kawalan eksport, sekatan cip, dan retorika yang semakin meningkat mengenai pemindahan teknologi. Dalam persekitaran ini, sebarang syarikat AI Cina yang bergantung kepada pengecilan daripada model Amerika membawa tanggungjawab geopolitik di neracanya.
Perdebatan mengenai distilasi telah menarik hampir semua pemain utama dalam ruang AI. OpenAI telah secara terbuka mengemukakan kebimbangan mengenai penggunaan modelnya untuk melatih pesaing. Anthropic telah memberikan pandangan mengenai etika dan implikasi persaingan. Dalam konteks ini, keputusan awal ByteDance untuk mengelakkan distilasi sepenuhnya kelihatan kurang seperti pengekangan sendiri dan lebih seperti pertaruhan bahawa pembangunan bebas akhirnya akan menghasilkan teknologi yang lebih baik dan lebih boleh dipertahankan.