Kunlun Wanwei meluncurkan platform drama pendek AI pertama di dunia, SkyReels
2024-08-19
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
Pada 19 Agustus, Kunlun Wanwei merilis SkyReels, platform drama pendek AI pertama di dunia yang mengintegrasikan model video besar dan model besar 3D. Platform SkyReels mengintegrasikan pembuatan skrip, penyesuaian karakter, papan cerita, plot, dialog/BGM, dan sintesis video, memungkinkan pembuat "membuat drama dengan satu klik" dan dengan mudah menghasilkan video AI berkualitas tinggi.
Film laris fantasi, sadomasokisme yang mengharukan, komedi lucu... Cukup masukkan ide sederhana dan SkyReels dapat menyelesaikan seluruh proses produksi mulai dari naskah hingga drama pendek yang telah selesai.
Platform SkyReels mengintegrasikan skrip model besar SkyScript yang dikembangkan sendiri oleh Kunlun Wanwei, model besar storyboard StoryboardGen yang dikembangkan sendiri, model besar Sky3DGen yang dihasilkan 3D yang dikembangkan sendiri, dan platform inovatif pertama di industri, WorldEngine, yang secara mendalam mengintegrasikan mesin AI 3D dan model video besar.
SkyReels berada di depan model besar seperti GPT-4o dalam evaluasi kualitas kualitas skrip, kualitas storyboard, performa karakter, dan dimensi lainnya.
SkyReels dapat menghasilkan skrip lengkap, papan cerita, dialog karakter, dan BGM dengan satu klik melalui AI. SkyReels mendukung penyesuaian khusus pada gambar karakter, suara, dan papan cerita, dan secara otomatis dapat mengubah konten menjadi video definisi tinggi 1080P 60 bingkai, dan dapat menghasilkan video sekaligus. Durasinya mencapai 180 detik, yang merupakan terobosan signifikan dibandingkan Sora yang mampu menghasilkan video berdurasi 60 detik sekaligus dan Keling yang mampu menghasilkan video berdurasi 10 detik sekaligus. Integrasikan semua hasil materi iklan dengan satu klik, sangat meningkatkan efisiensi pembuatan video, mengurangi biaya pembuatan, dan mempercepat era "satu orang, satu drama".
Pada saat yang sama, WorldEngine menggabungkan kemampuan pengendalian mesin yang presisi (seperti simulasi pencahayaan, simulasi fisik, ruang 3D, interaksi waktu nyata, dll.) dengan kemampuan pembuatan fantasi model besar video AI, menyediakan video hybrid online baru mode pembuatan, memungkinkan pembuatan video Beralih dari generasi fuzzy ke generasi yang lebih presisi dan terkendali.
Sorotan SkyReels adalah sebagai berikut:
Pembuatan skrip yang sepenuhnya otomatis: Pengguna memasukkan konsep atau ide, dan AI akan menghasilkan skrip dengan struktur lengkap dan plot yang kaya dengan satu klik, serta mendukung pengaturan otomatis dan pemolesan skrip yang ada untuk meningkatkan efisiensi materi iklan.
Desain plot berkualitas tinggi: Sistem menghasilkan alur cerita berkualitas tinggi, konflik dramatis, poin menarik, dan ekspresi emosional dengan menganalisis plot naskah dalam jumlah besar untuk memastikan kekayaan dan daya tarik naskah.
Pembuatan storyboard cerdas: Berdasarkan konten skrip, gambar storyboard dan skrip teks terkait dihasilkan dengan satu klik. Pengguna juga dapat dengan bebas menyesuaikan parameter seperti storyboard, sudut kamera, dan metode pergerakan kamera untuk memastikan realisasi kreativitas yang akurat.
Dialog Emosional/BGM: Melalui teknologi sintesis ucapan emosional, karakter diberikan jeda antar kalimat, ekspresi emosional, dan irama yang alami, dan AI BGM secara otomatis dihasilkan berdasarkan konten video untuk mengintegrasikan gambar dan musik dengan sempurna.
Kustomisasi yang dipersonalisasi: mendukung pembuatan cerdas dan penyesuaian kustom gambar karakter, warna nada, dan papan cerita untuk memenuhi kebutuhan individu pembuat konten, dan menyediakan berbagai pilihan gaya visual seperti animasi, kartun, dan 3D aksi langsung untuk beradaptasi dengan preferensi dan preferensi pembuat konten yang berbeda.
Konsistensi dan akurasi konten: Pastikan konsistensi karakter dan adegan di papan cerita yang berbeda, dan secara otomatis menyimpulkan penampilan karakter berdasarkan deskripsi cerita untuk mencapai koordinasi ekspresi karakter, tindakan, dan alur untuk meningkatkan ekspresi cerita.
Pembuatan video yang efisien: Secara otomatis mengubah storyboard menjadi video definisi tinggi berkelanjutan, memberikan output 1080P 60-frame untuk memastikan pengalaman menonton yang lancar.
Sintesis pascaproduksi yang nyaman: Integrasikan semua hasil kreatif dengan satu klik, dan dapat dengan cepat mengekspor dan berbagi. Mendukung pengunduhan dalam berbagai format untuk memfasilitasi pasca-pengeditan.
Fungsi pembuatan skrip AI SkyReels didasarkan pada model skrip besar SkyScript yang dikembangkan sendiri oleh Kunlun Wanwei. Untuk membuat skrip yang dihasilkan oleh AI memiliki plot drama pendek dengan kepadatan tinggi dan menarik, Kunlun Wanwei pertama-tama membuat kumpulan data terstruktur drama pendek berkualitas tinggi tingkat miliaran SkyScript-100M. Kumpulan data ini menargetkan ritme plot dan kegembiraan drama pendek besar-besaran. Poin dan perubahan emosi dijelaskan dengan kualitas tinggi;
Kedua, tim algoritme merancang kerangka kerja pembuatan skrip yang dihasilkan secara progresif, sehingga model dapat menghasilkan skrip yang sangat terstruktur dan menarik. Baik penulis pemula maupun penulis naskah berpengalaman dapat menggunakannya untuk merangsang kreativitas dan dengan mudah membuat skrip drama pendek yang menarik.
Langkah penting lainnya dalam pembuatan drama pendek - pembuatan papan cerita, model besar generasi papan cerita yang dikembangkan sendiri oleh Kunlun Wanwei, StoryboardGen, menyediakan teknologi yang mendasarinya. StoryboardGen adalah model pembuatan storyboard pertama milik Kunlun Wanwei berdasarkan arsitektur DiT-MoE (arsitektur ahli hybrid Mixed-of-Experts berdasarkan teknologi Diffusion Transformer). Model ini dapat menghasilkan pembuatan informasi storyboard dengan kepadatan tinggi dan sangat meningkatkan kemampuan ekspresi narasi visual.
Setelah memasukkan skrip, model StoryboardGen akan menguraikan skrip menjadi dua bagian: bagian global dan bagian utama mencakup deskripsi keseluruhan storyboard seperti adegan, adegan, komposisi, dll. Bagian utama mencakup penyesuaian dari gambar karakter dan action figure, yang akhirnya dikumpulkan menjadi agen Storyboard menghasilkan storyboard yang lengkap. Arsitektur multi-agen khusus StoryboardGen dapat secara efektif memastikan pengendalian dan konsistensi karakter dan adegan, serta menciptakan storyboard kelas industri berkualitas tinggi.
Diagram skema teknis model storyboard besar Kunlun Wanwei StoryboardGen
Dalam proses pembuatan gambar akhir, WorldEngine adalah platform inovatif pertama di industri yang mengintegrasikan mesin AI 3D dan model video besar secara mendalam. Ini adalah inovasi teknologi terkini. WorldEngine menggunakan teknologi fusi lapisan sebagai jembatan untuk menciptakan mode kreasi hybrid 3D dan video yang belum pernah ada sebelumnya.
Saat pengguna menggunakan SkyReels untuk menghasilkan video AI, mereka dapat dengan bebas memilih untuk menggunakan pembuatan mesin AI 3D atau pembuatan model video besar untuk elemen apa pun. Model inovatif ini memecahkan masalah "pemecahan jamur" dan "anti-gravitasi" yang sering terjadi model besar video AI saat ini. Fenomena hukum anti-fisik mencapai perpaduan sempurna antara presisi simulasi fisik dan kreativitas fantasi model video besar secara maksimal. Sejak saat itu, model besar generasi video AI akan berpindah dari era "kontrol fuzzy" ke era "pengendalian yang tepat".
Dalam hal mesin AI 3D, model besar Sky3DGen yang dikembangkan sendiri oleh Kunlun Wanwei dapat menghasilkan beragam elemen dan pemandangan 3D, mulai dari lanskap alam hingga kota masa depan, dari objek statis hingga karakter dinamis, dan menyediakan kemampuan interaksi adegan 3D secara real-time, sehingga Pengguna dapat langsung melihat efek penyesuaian dan pengeditan, mempercepat proses kreatif. Dengan dukungan WorldEngine, pengguna juga dapat dengan mudah membangun studio virtual 3D untuk mencapai pengalaman pengambilan gambar virtual seperti mimpi.
Penampilan tokoh merupakan salah satu mata rantai inti dalam penyajian lakon pendek. Oleh karena itu, dalam hal performa karakter AI, tim Kunlun SkyReels secara khusus mengembangkan model pembuatan karakter ActorShow, sehingga karakter AI yang dihasilkan oleh SkyReels memiliki kemampuan pembangkitan ekspresi mulut dan gerakan tubuh yang lebih terkontrol, dan presentasi karakter lebih alami.
Menanggapi perbedaan pencahayaan, perbedaan gaya, dan kebutuhan lain yang dihadapi dalam pasca-sintesis video, tim Kunlun SkyReels secara terpisah melatih model pembuatan fusi khusus, sehingga video setelah fusi lapisan menyajikan konsistensi yang baik.
Peluncuran platform drama pendek AI Kunlun Wanwei, SkyReels, menandai lompatan teknologi dalam pembuatan drama pendek AI global. Platform ini akan sepenuhnya menumbangkan proses pembuatan konten video, membebaskan pembuat konten dari proses produksi yang membosankan dan rumit untuk fokus pada realisasi kreatif dan ekspresi inspiratif. mimpi "satu orang, satu drama" menjadi kenyataan.
Platform drama pendek AI SkyReels tidak hanya menyediakan alat kreatif yang canggih bagi pembuat konten profesional, namun juga sangat menurunkan ambang batas pembuatan drama pendek AI, sehingga memudahkan pengguna non-profesional untuk memulai. Alat revolusioner ini diharapkan dapat menghasilkan pertumbuhan eksplosif pada konten buatan pengguna (UGC) drama pendek AI dan konten buatan pengguna (PUGC) profesional, memberikan vitalitas yang belum pernah ada sebelumnya ke dalam ekosistem konten drama pendek, dan mendorong pengembangan drama pendek. pasar pembuatan konten dan konsumsi. Era penciptaan dan konsumsi drama pendek yang didorong oleh teknologi AI akan segera tiba.
Teknologi Kunlun selalu berkomitmen untuk menyediakan alat yang lebih cerdas, efisien, dan personal bagi pembuat konten global melalui teknologi AIGC yang canggih. Didorong oleh strategi "Semua dalam AGI dan AIGC", Teknologi Kunlun selalu berkomitmen untuk "mewujudkan kecerdasan buatan secara umum dan memungkinkan setiap orang untuk membentuk dan mengekspresikan diri mereka dengan lebih baik" sebagai misinya. Di masa depan, Kunlun Wanwei akan terus berinovasi dan menyediakan produk dan layanan AIGC berkualitas tinggi kepada pengguna melalui eksplorasi mendalam di pasar global.
menerjemahkan
mencari
menyalin
