berita

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Teknologi Teks/Tencent Zhou Xiaoyan

Izinkan saya memberi tahu Anda sesuatu yang baru - dalam drama pendek yang Anda tonton di masa depan, dari depan hingga belakang panggung, mungkin tidak ada "orang" di dalamnya.

Dalam model tradisional, rantai produksi sebuah drama pendek, mulai dari pengembangan naskah, produksi hingga distribusi, penuh dengan "orang". Namun kini, karena munculnya AI, mungkin hanya diperlukan satu orang yang dapat mengayunkan mouse depan layar. Sutradara dapat menyelesaikan semua proses.

Pada 19 Agustus, Kunlun Wanwei merilis SkyReels, platform drama pendek AI pertama di dunia yang mengintegrasikan model video besar dan model besar 3D. Platform SkyReels mengintegrasikan pembuatan skrip, penyesuaian karakter, papan cerita, plot, dialog/BGM, dan sintesis video, memungkinkan pembuat "membuat drama dengan satu klik" dan dengan mudah menghasilkan video AI berkualitas tinggi. Peluncuran platform drama pendek AI Kunlun Wanwei, SkyReels, menandai lompatan teknologi besar dalam pembuatan drama pendek AI global.

Dengan kata lain, tidak perlu menyewa aktor atau mencari tempat. Anda dapat menggunakan kekuatan AI untuk membuat drama pendek dengan membuka SkyReels dan mengoperasikan keyboard.

AI melakukan sandiwara dan mulai memasuki "tanah tak bertuan".

Ambisi Kunlun Wanwei dalam drama pendek AI: menciptakan spesies baru yang menumbangkan model produksi aslinya

Pergi ke luar negeri untuk melakukan pementasan drama pendek bukanlah hal yang baru.

Pada tahun 2022, produk drama pendek Chinese Online, ReelShort, diluncurkan, dan setahun kemudian menduduki peringkat No. 1 di daftar hiburan gratis iOS AS. Segera setelah itu, bintang baru seperti ShortTV dan DramaBox juga terus memproduksi drama pendek hit. Tema mereka sebagian besar adalah bos, cinta, dan manusia serigala. Drama pendek hit ReelShort "The Double Life of My Billionaire Husband" mencakup "pahlawan yang menyelamatkan keindahan", "perkelahian properti", dan segmen lainnya.

Drama pendek jenis ini biasanya asli lokal, artinya tim luar negeri perlu menggabungkan budaya lokal dan minat pengguna untuk membuat naskah yang memenuhi selera estetika pengguna lokal. Mereka dapat secara akurat menangkap poin plot yang membuat masyarakat lokal "menarik".

Permasalahan inti dari drama pendek ini adalah memerlukan pemahaman dan kajian budaya lokal yang memadai, siklus produksi yang panjang, dan sejumlah biaya yang dikeluarkan untuk mencari aktor lokal.

Faktanya, model drama pendek luar negeri awal sangat sederhana dan kasar. Mereka biasanya langsung memberi subtitle pada drama lokal Tiongkok dan kemudian menyiarkannya secara lokal untuk mengurangi rasa disonansi, beberapa tim luar negeri akan menggunakan AI untuk berbicara dengan para aktor di dalamnya drama pendek. Bentuknya sudah dioptimasi sehingga terlihat seperti "seorang aktor berwajah Tionghoa yang berbicara dalam bahasa Inggris", namun sebagian penonton masih merasa kaku, seperti saat kita menonton film dan serial TV Eropa dan Amerika di China, kita. melihat aktor Eropa dan Amerika dengan mata biru dan rambut hijau. Ini seperti orang yang berbicara bahasa Mandarin dengan nada yang aneh, sehingga sulit bagi penonton untuk merasakan keterlibatan yang sebenarnya.

Akibatnya, beberapa tim luar negeri akan menggunakan AI untuk "mengubah wajah" para aktor dalam drama pendek agar lebih diterima oleh penduduk setempat.

Terlihat bahwa dulu untuk membuat sebuah drama pendek populer, tim luar negeri akan melakukan berbagai "trik" dan membakar banyak CPU otak.

Lantas, di era big model, adakah produk drama pendek yang mampu mendobrak perbedaan budaya, tidak terikat pada batasan bahasa, dan menggunakan AI untuk menyelesaikan segala aspek?

Kebetulan pada tahun yang sama ketika ReelShort melaut, Kunlun Wanwei memperhatikannya.AIGCPeluang sistemik. Dengan meninjau model-model yang sukses di era Internet seluler, kami menemukan bahwa kata sandinya terletak pada model "gratis + Ke C". Dan jika kita mengamati perusahaan "raksasa" yang masih hidup dan sehat, kita akan menemukannya banyak dari mereka akan menjadi spesies tertentu yang telah mencapai puncaknya. Berdasarkan penilaian ini, Fang Han, ketua dan CEO Kunlun Wanwei, dapat mengikuti rangkaian logika ini untuk menyerang pasar AIGC.

Kunlun Wanwei memikirkan “AI UGCStrateginya, mulailah dengan skenario frekuensi tinggi di sisi C, seperti menjelajahi potret unicorn di trek yang dibagi lagi seperti artikel online, drama pendek, animasi, musik, dll. Diantaranya, drama pendek juga menjadi pilihan penting bagi Kunlun Wanwei. Para eksekutif. Saya berharap dapat menciptakan spesies baru yang menumbangkan model produksi drama pendek asli.

Platform drama pendek AI SkyReels juga lahir dengan logika ini. Ini adalah platform pembuatan video drama pendek terpadu yang digerakkan oleh AI. Dari pembuatan skrip, pembuatan karakter, fusi pengambilan gambar hingga pembuatan drama pendek akhir, semuanya ditangani oleh AI dihasilkan.

Secara keseluruhan, SkyReels bekerja seperti Agen AI sutradara, mengubah ide sederhana menjadi drama pendek.

Agen dari awal hingga akhir

olehSoraSetelah munculnya model generasi video AI yang diwakili oleh , banyak pemain di dalam dan luar negeri yang berturut-turut meluncurkan model generasi video besar, seperti Pixverse,Cepat dan mudah, Zhiying Qingyuan, dan ada juga sejumlah sutradara baru yang menggunakan model besar ini untuk memproduksi karya film dan televisi. Meskipun penggunaan model ini dapat menghasilkan efek pembuatan video yang bagus, namun jika ingin membuat film dewasa, tetap ada persyaratan tertentu untuk kemampuan profesional penggunanya, yaitu kemampuan menulis skenario yang tinggi dan kemampuan estetika artistik.

Misalnya, pengguna perlu menyusun bidikan terlebih dahulu, membayangkan bidikan yang diinginkan, lalu menggunakan petunjuk yang berisi istilah profesional untuk melakukannyatengah perjalananSetelah men-debug gambar yang memuaskan pada produk, kemudian mengimpornya ke produk pembuatan video untuk melakukan penyesuaian lensa, dan terakhir mengekspor karya tersebut.

Meskipun alat-alat ini juga sangat memperpendek rantai produksi film dan televisi, namun alat-alat ini lebih berorientasi pada hal tersebutPUGCGrup, dan SkyReels memiliki ambang penggunaan yang lebih rendah. Seluruh proses operasinya sederhana dan cerdas. Masukkan ide dan sisanya dapat diserahkan kepada AI.Sebagai perbandingan, SkyReels, sebagai platform drama pendek AI pertama di dunia, merupakan produk UGC dengan audiens yang lebih besar.

(Demonstrasi produk SkyReels)

SkyReels merupakan platform pembuatan video pertama di dunia yang memadukan mesin 3D dan AI generatif. Proses penggunaannya juga sangat sederhana. Setelah memilih untuk membuat film pendek, masukkan ide kreatif Anda dan pilih gaya video yang Anda inginkan, seperti gaya anime, realisme , dan gaya Ghibli. Tunggu, Anda dapat membuat skrip dengan satu klik. Sistem akan secara otomatis menghasilkan karakter sesuai dengan kebutuhan skrip dan cerita. Kemudian pengguna dapat melihat skrip storyboard yang dibuat secara otomatis, mengubahnya menjadi video dengan satu klik, dan secara otomatis mengubah konten menjadi1080P 60 bingkaivideo HD;Durasi video dapat dihasilkan hingga 180 detik sekaligus, dibandingkan dengan Sora, yang dapat menghasilkan video berdurasi 60 detik sekaligus, dan Keling, yang dapat menghasilkan video berdurasi 10 detik sekaligus, merupakan terobosan yang signifikan.

Secara keseluruhan, rantai produksi lengkap dari sebuah drama pendek mencakup pembuatan naskah, penyesuaian karakter, pembuatan papan cerita, pengambilan gambar episode dan pasca produksi, dan SkyReels dapat meningkatkan efisiensi rantai produksi ini dengan tiga model besar yang dikembangkan sendiri.

Dalam proses pengembangan konten, metode produksi drama pendek tradisional,Ia memilih beberapa bab dari novel online yang sudah jadi dan kemudian mengadaptasinya sesuai dengan karakteristik drama pendeknya. Penulis skenario harus mampu memadukan minat penonton dan dengan terampil mengatur titik balik plot, sehingga dapat meningkat. kesediaan pengguna untuk membayar untuk bab berikutnya.

SkyReels menggunakan model besar skrip yang dikembangkan sendiri di tautan iniNaskah Langit, menggantikan pengembangan konten manual dari drama pendek tradisional. Kunlun Wanwei pertama kali membuat SkyScript-100M, kumpulan data terstruktur drama pendek berkualitas tinggi berlevel 100 juta. Kumpulan data ini memiliki anotasi berkualitas tinggi untuk ritme plot, poin menarik, dan perubahan emosional dari sejumlah besar drama pendek yang indah; selain itu, tim algoritme merancang Kerangka kerja pembuatan skrip yang dihasilkan secara progresif memungkinkan model menghasilkan skrip yang sangat terstruktur dan menarik Baik penulis skenario pemula maupun berpengalaman dapat membuat skrip drama pendek yang menarik melalui model ini.

Setelah memiliki cerita yang mengharukan, langkah selanjutnya adalah mengubah cerita-cerita ini menjadi naskah pengambilan gambar. Dalam model produksi tradisional, tautan ini memerlukan mengundang aktor dan mengatur adegan secara offline. Sutradara perlu berkomunikasi dengan para aktor mengenai hal-hal penting sebelum pembuatan film melibatkan tenaga kerja dan menetapkan biaya. Tapi ini semua bisa digantikan oleh model AI besar. SkyReels menggunakan Kunlun Wanwei di tautan ini.Model storyboard besar yang dikembangkan sendiri StoryboardGen,Model ini memproses balik data animasi film dan televisi untuk mendapatkan kumpulan data storyboard tingkat industri berkualitas tinggi, dan merancang kerangka kerja multi-agen storyboard untuk menghasilkan pembuatan adegan, pengambilan gambar, karakter, dan tindakan berkualitas tinggi. Dalam hal efek pembuatan gambar, Kunlun Wanwei menggunakan model DiT-Moe yang dikembangkan sendiri untuk meningkatkan kualitas gambar.

Sama seperti dalam proses pengambilan gambar formal, pengambilan gambar perlu diintegrasikan secara organik untuk mendapatkan sistem cerita yang lengkap.SkyReels menggunakan WorldEngine, yang merupakan platform inovatif pertama di industri yang mengintegrasikan mesin AI 3D dan model video besar secara mendalam untuk mencapai generasi 3D, generasi video, serta pembuatan 3D dan video hybrid.。

Platform inovasi WorldEngine terdiri dari beberapa sub-link, yang masing-masing menggunakan model berbeda.

Dalam modul generasi 3D,Model besar Sky3DGen yang dikembangkan sendiri digunakan, yang dapat menghasilkan berbagai elemen dan pemandangan 3D, dari lanskap alam hingga kota masa depan, dari objek statis hingga karakter dinamis, dan menyediakan kemampuan interaksi adegan 3D waktu nyata sehingga pengguna dapat langsung melihat Sesuaikan dan edit efek untuk mempercepat proses kreatif. Dengan dukungan WorldEngine, pengguna dapat membangun studio virtual 3D untuk mencapai pengalaman pengambilan gambar virtual.

(Pembuatan adegan 3D yang cerdas)

Pada modul pembuatan 3D dan video hybrid, Kunlun Wanwei menggunakan teknologi fusi lapisan sebagai inti untuk membuat model pembuatan 3D dan video hybrid. Elemen apa pun dalam video dapat dipilih secara bebas untuk dibuat menggunakan mesin AI 3D atau model video besar. Selain itu, Kunlun Wanwei secara terpisah melatih model generasi fusi untuk mengetahui detail pencahayaan dan perbedaan gaya yang ditemui dalam pencampuran, sehingga video setelah fusi lapisan menyajikan konsistensi yang lebih baik.

(Dicampur untuk menghasilkan video)

Karena penggunaan mesin tersebut, WorldEngine telah mencapai pengurangan biaya dibandingkan dengan pembuatan video tradisional, dan pada saat yang sama, kecepatan pembuatan juga meningkat beberapa kali lipat.

Meskipun pada dasarnya video pendek telah dibuat di sini, orang-orang yang sering menonton drama juga akan merasakan bahwa keterampilan garis yang baik dan penyajian plot BGM memiliki efek mendapatkan hasil dua kali lipat dengan setengah usaha.

Dalam hal baris, teknologi pemahaman teks AI SkyReels, setelah pembelajaran mendalam dari puluhan ribu novel, dapat secara otomatis mengidentifikasi dialog karakter dan ekspresi emosional dari teks, dan memprediksi jeda yang wajar antar kalimat. Dari segi narasi, SkyReels menggunakan teknologi sintesis ucapan emosional untuk membantu narasi menggunakan ritme naik turun untuk membuat dialog karakter penuh dengan emosi yang kaya.

Kunlun Wanwei mengungkapkan bahwa agen cerdas SkyReels tidak hanya dapat memahami teks, tetapi juga secara cerdas menganalisis suasana adegan dalam naskah. “Berdasarkan kemampuan pengambilan multi-modal dan pembuatan musik latar (BGM) yang canggih, kami dapat mencocokkan kecerdasan video dengan latar belakang yang masuk akal. musik membuat setiap frame berpadu sempurna dengan musik.”

Platform drama pendek AI milik Kunlun Wanwei, SkyReels, adalah sebuah alat revolusioner yang diharapkan dapat membawa pertumbuhan eksplosif pada konten buatan pengguna (UGC) drama pendek AI dan konten buatan pengguna profesional (PUGC), sehingga memberikan vitalitas yang belum pernah ada sebelumnya ke dalam ekologi konten drama pendek semakin pesatnya pertumbuhan pembuatan konten drama pendek dan pasar konsumen. Era penciptaan dan konsumsi drama pendek yang didorong oleh teknologi AI akan segera tiba.

Tata letak global Ubuntu Wanwei AI UGC

Laporan penelitian Guohai Securities menyebutkan bahwa AI diharapkan dapat meningkatkan kapasitas produksi drama pendek dan mengurangi biaya. Ruang pasar untuk drama pendek luar negeri diperkirakan secara konservatif berjumlah sekitar US$36 miliar.

SkyReels adalah lambang strategi tata letak luar negeri Kunlun Wanwei, yang di belakangnya terdapat pemikiran strategis All in AIGC.

Pada tahun 2020, pendiri Kunlun Wanwei, Zhou Yahui melihat potensi AIGC, dan mereka memperkirakan bahwa sistem AI akan mengantarkan era keemasan konten baru.

Ketua dan CEO Kunlun Wanwei, Fang Han meninjau peluang di era Internet seluler, merangkum aturan produk konten populer, dan menemukan bahwa sebagian besar adalah model "gratis + To C", karena basis grupnya cukup besar, asalkan produk dapat menjangkau pengguna Dengan mengidentifikasi titik permintaan, kami dapat mencapai pertumbuhan pengguna secara eksponensial. Membangun platform "AI UGC" telah menjadi strategi inti Kunlun Worldwide, yaitu memberikan layanan kepada 1% pembuat konten dan memungkinkan 99% pengguna untuk mencapainya. mengkonsumsi konten.

Lantas, apa saja gambaran produk yang menjadi populer di era AIGC?

Fang Han percaya bahwa ketika perangkat keras sisi terminal baru dan ponsel baru yang disesuaikan dengan AI lahir, AIGC mungkin akan mencapai hasil yang mengganggu, namun proses ini masih akan memakan waktu 3 hingga 5 tahun, dan tugas inti saat ini adalah mengidentifikasi peluang manfaatkan AIGC.

Menurut aturan era Internet seluler, setiap negara mungkin memiliki Aplikasi supernya sendiri, atau Aplikasi super dapat membagi wilayah di beberapa negara secara bersamaan. Setelah beberapa pemikiran, Fang Han percaya bahwa pertama-tama ia harus menduduki negara-negara dengan kinerja dan penerimaan biaya pengguna yang tinggi, seperti Eropa, Amerika Serikat, Jepang, Korea Selatan, dan Tiongkok, dan kemudian secara bertahap menyebar ke Timur Tengah, Asia Tenggara, dan Amerika Selatan. dan wilayah lainnya.

Setelah memilah negaranya, manajemen Kunlun Wanwei mulai memikirkan kategori vertikal yang bisa melahirkan super app. Mereka terus bertanya pada diri sendiri, “Bagaimana kita bisa menjadi raksasa?” Raksasa konten yang masih hidup di era sebelumnya pada dasarnya sangat dalam terlibat dalam industri hiburan vertikal tertentu, seperti artikel online, drama pendek, dan animasi, logika yang sama akan diulangi di AIGC.

Saat ini, Kunlun Wanwei telah melakukan tata letak sistematis di Tiongkok sebagai respons terhadap strategi "AI UGC", dan telah membangun matriks produk dalam model besar, penelusuran AI, musik AI, dan sektor lainnya.

Diantaranya, model besar Kunlun Wanwei telah melalui banyak iterasi:

Versi baru diluncurkan pada bulan FebruariKementerian Lingkungan HidupModel bahasa besar "Tiangong 2.0" dan versi baru dari aplikasi "Tiangong AI Intelligent Assistant";

Pada bulan April, model dasar "Tiangong 3.0" dan model musik "Tiangong SkyMusic" secara resmi diluncurkan untuk pengujian publik;

Pada bulan Juni, Kunlun Wanwei melakukan open source pada model besar Skywork-MoE senilai 200 miliar, yang merupakan bagian dari "Tiangong 3.0".Buka AIKetika mengklaim memblokir lalu lintas API dari negara dan wilayah yang tidak didukung, Tiangong Open Platform meluncurkan "rencana relokasi sekali klik" untuk pengguna OpenAl API dan menyediakan sumber daya panggilan API sebesar 150 juta Token, termasuk Model Tiangong 2.0 dan Tiangong 3.0.

Saat mengulangi model besar, penelusuran AI juga telah memasuki fokus utama Fang Han. dapat menyajikan hasil dalam bentuk peta pikiran, tabel, outline, dll, dan dapat menyimpan outline dan peta pikiran untuk langsung menghasilkan PPT.

Selain tingkat produk, Kunlun Wanweiya telah bekerja sama dengan universitas internasional untuk mengembangkan perangkat R&D agen digital open source AgentStudio untuk menyediakan platform komprehensif bagi peneliti dan pengembang yang mencakup proses pengembangan agen secara lengkap.

Baik di dalam negeri maupun di luar negeri, setiap sistem bahasa memerlukan rangkaian produknya sendiri. Kunlun Wanwei yakin bahwa periode dividen global dari platform AIGC akan segera tiba.