uutiset

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Teksti / Tencent Technology Zhou Xiaoyan

Kerron teille jotain uutta - lyhyissä draamoissa, joita katsotte tulevaisuudessa, edestä kulissien taakse, niissä ei ehkä ole "ihmisiä".

Perinteisessä mallissa lyhyen draaman tuotantoketju käsikirjoituksen kehittämisestä tuotannosta jakeluun on täynnä "ihmisiä", mutta nyt tekoälyn ilmaantumisen vuoksi se voi vaatia vain yhden henkilön, joka osaa heiluttaa hiiren Ohjaaja voi suorittaa kaikki prosessit.

Kunlun Wanwei julkaisi 19. elokuuta SkyReelsin, maailman ensimmäisen AI-lyhytdraamaalustan, joka yhdistää suuret videomallit ja 3D-suuret mallit. SkyReels-alusta integroi käsikirjoituksen luomisen, hahmojen mukauttamisen, kuvakäsikirjoitukset, juonen, dialogin/BGM- ja videosynteesin, jolloin tekijät voivat "tehdä draaman yhdellä napsautuksella" ja tuottaa helposti korkealaatuisia tekoälyvideoita. Kunlun Wanwei AI -lyhytdraamaalustan SkyReels lanseeraus merkitsee suurta teknologista harppausta globaalissa tekoälyn lyhytdraamassa.

Toisin sanoen, sinun ei tarvitse palkata näyttelijöitä tai etsiä paikkaa. Voit käyttää tekoälyn voimaa luodaksesi lyhyen näytelmän avaamalla SkyReelsin ja käyttämällä näppäimistöä.

AI suorittaa sketsejä ja alkaa astua "ei kenenkään maahan".

Kunlun Wanwein tavoite tekoälyn lyhytdraamassa: luoda uusi laji, joka kumoaa alkuperäisen tuotantomallin

Ulkomaille lähteminen tekemään lyhyitä näytelmiä ei ole uusi asia.

Vuonna 2022 Chinese Onlinen lyhytdraamatuote ReelShort lanseerattiin, ja vuotta myöhemmin se sijoittui ykköseksi Yhdysvaltain iOS-viihdeluettelossa. Pian sen jälkeen nousevat tähdet, kuten ShortTV ja DramaBox, jatkoivat myös hittilyhytdraaman tuotantoa. Heidän teemansa ovat pääasiassa pomot, rakkaus ja ihmissudet.

Tämäntyyppiset lyhytdraamat ovat yleensä paikallisia alkuperäiskappaleita, toisin sanoen ulkomaisten tiimien on yhdistettävä paikallinen kulttuuri ja käyttäjien kiinnostuksen kohteet luodakseen käsikirjoituksia, jotka vastaavat paikallisten käyttäjien esteettisiä makuja.

Näiden lyhyiden näytelmien ydinongelmana on, että ne edellyttävät riittävää paikallisen kulttuurin ymmärtämistä ja opiskelua, tuotantosykli on pitkä ja paikallisten toimijoiden löytämiseen kuluu tietty määrä kustannuksia.

Itse asiassa alkuperäinen ulkomaisen lyhytdraamamalli on hyvin yksinkertainen ja karkea. He yleensä tekstittävät kiinalaiset paikalliset draamat ja lähettävät ne sitten paikallisesti. lyhyitä draamoja Muoto on optimoitu niin, että se näyttää "näyttelijältä, jolla on kiinalaiset kasvot puhumassa englanniksi", mutta joidenkin katsojien mielestä se on jäykkä, aivan kuten katsoessamme eurooppalaisia ​​ja amerikkalaisia ​​elokuvia ja tv-sarjoja Kiinassa. katso eurooppalaisia ​​ja amerikkalaisia ​​näyttelijöitä, joilla on siniset silmät ja vihreät hiukset. Se on kuin ihmiset puhuisivat kiinaa oudolla äänellä, mikä vaikeuttaa yleisön todellista osallistumisen tunnetta.

Tämän seurauksena jotkut ulkomaiset joukkueet käyttävät tekoälyä "muuttaakseen näyttelijöiden kasvoja" lyhyissä näytelmissä, jotta paikalliset hyväksyisivät heidät paremmin.

Voidaan nähdä, että ennen suositun lyhytdraaman tekemiseksi ulkomaiset joukkueet keksivät erilaisia ​​"temppuja" ja polttivat paljon aivoprosessoria.

Joten onko suurten mallien aikakaudella olemassa lyhyttä draamatuotetta, joka voi rikkoa kulttuurierot, olla riippumaton kielirajoituksista ja käyttää tekoälyä kaikkien näkökohtien ratkaisemiseen?

Se sattui olemaan samana vuonna, kun ReelShort lähti merelle, ja Kunlun Wanwei huomasi sen.AIGCJärjestelmälliset mahdollisuudet Mobiili-Internetin aikakauden menestyneitä malleja tarkasteltaessa havaitsimme, että salasana piilee "free + To C" -mallissa monet heistä tulee Tietty laji on saavuttanut äärimmäisen. Tämän tuomion perusteella Fang Han, Kunlun Wanwein puheenjohtaja ja toimitusjohtaja, voi seurata tätä logiikkaa hyökätäkseen AIGC-markkinoita vastaan.

Kunlun Wanwei ajatteli "AI UGC"Strategia, aloita C-puolen korkean taajuuden skenaarioista, kuten yksisarvismuotokuvien tutkimisesta jaetuista kappaleista, kuten verkkoartikkeleista, lyhyistä näytelmistä, animaatioista, musiikista jne. Niiden joukossa lyhyistä näytelmistä on tullut myös tärkeä vaihtoehto Kunlun Wanweille johtajat Toivon voivansa luoda uuden lajin, joka kumoaa alkuperäisen lyhytdraaman tuotantomallin.

Tekoälyn draamaalusta SkyReels syntyi myös tämän logiikan mukaisesti. Se on tekoälyn ohjaama yhden luukun lyhyt draamavideo luotu.

Kaiken kaikkiaan SkyReels toimii kuin ohjaajan tekoälyagentti ja muuttaa yksinkertaisen idean lyhyeksi näytelmäksi.

Agentti alusta loppuun

kirjoittajaSoraTekoälyn videosukupolven mallin, jota edustaa , syntymisen jälkeen monet pelaajat kotimaassa ja ulkomailla ovat peräkkäin julkaisseet suuria videosukupolvimalleja, kuten Pixverse,Nopeaa ja helppoa, Zhiying Qingyuan, ja on myös joukko nousevia ohjaajia, jotka käyttävät näitä suuria malleja elokuva- ja televisioteosten tuottamiseen. Vaikka näillä malleilla voidaan saavuttaa hyviä videon luontitehosteita, jos haluat tehdä kypsän elokuvan, käyttäjän omille ammatillisille kyvyille on silti olemassa tiettyjä vaatimuksia.

Käyttäjien on esimerkiksi laadittava kuva etukäteen, kuviteltava haluttu otos ja käytettävä sitten ammattitermejä sisältäviä kehotteitaKeskimatkaKun olet tehnyt virheenkorjauksen tuotteessa, tuo se sitten videontuotantotuotteeseen objektiivin säätöjen tekemiseksi ja lopuksi vie työ.

Vaikka nämä työkalut ovat myös huomattavasti lyhentäneet elokuva- ja televisioteosten tuotantoketjua, ne ovat enemmän suuntautuneitaPUGCRyhmät, ja SkyReelsillä on matalampi käyttökynnys. Koko toimintaprosessi on yksinkertainen ja älykäs.Vertailun vuoksi SkyReels, maailman ensimmäinen tekoälyn lyhytdraamaalusta, on UGC-tuote, jolla on suurempi yleisö.

(SkyReels-tuote-esittely)

SkyReels on maailman ensimmäinen videon luontialusta, joka yhdistää 3D-moottorit ja generatiivisen tekoälyn. Käyttöprosessi on myös hyvin yksinkertainen , ja Ghibli-tyyliin, voit luoda skriptin yhdellä napsautuksella. Järjestelmä luo automaattisesti hahmoja käsikirjoituksen ja tarinan tarpeiden mukaan. Sitten käyttäjä voi tarkastella automaattisesti luotua kuvakäsikirjoitusta, muuntaa sen videoksi yhdellä napsautuksella ja muuntaa sisällön automaattisesti.1080p 60 kehyksiäHD-video;Videon pituus voi olla enintään 180 sekuntia kerrallaan, verrattuna Soraan, joka voi tuottaa 60 sekunnin videon kerrallaan, ja Kelingiin, joka voi tuottaa 10 sekunnin videon kerrallaan, mikä on merkittävä läpimurto.

Kaiken kaikkiaan lyhyen draaman koko tuotantoketju kattaa käsikirjoituksen luomisen, hahmojen mukauttamisen, kuvakäsikirjoituksen, jaksokuvauksen ja jälkituotannon, ja SkyReels voi parantaa tämän tuotantoketjun tehokkuutta kolmella itsekehitetyllä suurella mallilla.

Sisällönkehitysprosessissa perinteinen lyhytdraamatuotantomenetelmä,Se valitsee joitain lukuja valmiista verkkoromaaneista ja mukauttaa ne sitten lyhytdraaman ominaisuuksien mukaan. Käsikirjoittajan on kyettävä yhdistämään yleisön kiinnostuksen kohteet ja asettamaan taitavasti juonen käännekohdat lisätäkseen. käyttäjän halukkuus maksaa seuraavasta luvusta.

SkyReels käyttää tässä linkissä itse kehitettyjä skriptimallejaSkyScript, joka korvaa perinteisten lyhytnäytelmien manuaalisen sisällönkehityksen. Kunlun Wanwei rakensi ensimmäisenä SkyScript-100M:n, 100 miljoonan tason korkealaatuisen lyhytdraaman strukturoidun tietojoukon. Tämä tietojoukko sisältää laadukkaita huomautuksia useiden upeiden lyhytdraamien juonen rytmistä, jännittävistä kohdista ja tunnemuutoksista. Lisäksi algoritmiryhmä on suunnitellut Jatkuvasti luotu skriptien luontikehys mahdollistaa erittäin jäsenneltyjen ja jännittävien käsikirjoitusten tulostamisen Sekä aloittelevat että kokeneet käsikirjoittajat voivat luoda houkuttelevia lyhyitä käsikirjoituksia tämän mallin avulla.

Liikkuvan tarinan jälkeen seuraava vaihe on muuntaa nämä tarinat käsikirjoituksiksi. Perinteisessä tuotantomallissa tämä linkki edellyttää näyttelijöiden kutsumista ja kohtausten määrittämistä offline-tilassa työvoimaa ja kustannuksia. Mutta nämä kaikki voidaan korvata suurilla AI-malleilla SkyReels käyttää Kunlun Wanwei tässä linkissä.Itse kehitetty suuri kuvakäsikirjoitusmalli StoryboardGen,Tämä malli käänteisprosessoi elokuva- ja televisioanimaatiotiedot korkealaatuisen teollisuustason kuvakäsikirjoituksen tietojoukon saamiseksi ja suunnittelee kuvakäsikirjoituksen usean agentin kehyksen laadukkaan kohtausten, otosten, hahmojen ja toimintojen luomiseksi. Mitä tulee kuvien luomiseen, Kunlun Wanwei käyttää itse kehitettyä DiT-Moe-mallia parantaakseen kuvan laatua.

Aivan kuten muodollisessa kuvausprosessissa, otokset on integroitava orgaanisesti, jotta saadaan täydellinen tarinajärjestelmä.SkyReels käyttää WorldEngineä, joka on alan ensimmäinen innovatiivinen alusta, joka integroi syvästi tekoälyn 3D-moottorit ja suuret videomallit 3D-sukupolven, videon sukupolven sekä 3D- ja videohybridin luomiseen.。

WorldEngine-innovaatioalusta koostuu useista alilinkeistä, joista jokainen käyttää eri mallia.

3D-sukupolvimoduulissaKäytössä on itse kehitetty Sky3DGen-suuri malli, joka voi luoda erilaisia ​​3D-elementtejä ja -kohtauksia luonnonmaisemista tulevaisuuden kaupunkeihin, staattisista kohteista dynaamisiin hahmoihin ja tarjoaa reaaliaikaisia ​​3D-kohtausten vuorovaikutusominaisuuksia, jotta käyttäjät voivat katsella niitä välittömästi. Säädä ja muokkaa tehosteita nopeuttaaksesi luovaa prosessia. WorldEnginen tuella käyttäjät voivat rakentaa 3D-virtuaalistudion saavuttaakseen virtuaalisen kuvauskokemuksen.

(Älykäs 3D-kohtausten sukupolvi)

Kunlun Wanwei käyttää 3D- ja videohybridin luontimoduulissa kerrosfuusioteknologiaa ytimenä luodakseen 3D- ja videohybridin luontimallin. Mikä tahansa videon elementti voidaan vapaasti valita generoitavaksi 3D-AI-moottorilla tai suurella videomallilla. Lisäksi Kunlun Wanwei koulutti erikseen fuusiosukupolven mallin miksauksessa havaittujen valaistuksen ja tyylierojen yksityiskohtiin, jotta video kerrosfuusiossa on parempi yhtenäisyys.

(Sekoitettu videon luomiseksi)

Moottorin käytön ansiosta WorldEngine on saavuttanut kustannussäästön verrattuna perinteiseen videontuotantoon, ja samalla myös sukupolven nopeus on kasvanut useita suuruusluokkia.

Vaikka tähän on periaatteessa luotu lyhyt video, usein draamoja katsovat ihmiset kokevat myös, että hyvät linjataidot ja taustamusiikin esittämä juonen esitys saa kaksinkertaisen tuloksen puolella vaivalla.

Mitä tulee riveihin, SkyReelsin AI-tekstinymmärrystekniikka voi kymmenistä tuhansista romaaneista syvällisen oppimisen jälkeen tunnistaa tekstistä automaattisesti hahmovuoropuhelut ja tunneilmaisut ja ennustaa kohtuullisia taukoja lauseiden välillä. Kerronnassa SkyReels käyttää emotionaalista puhesynteesitekniikkaa auttamaan kerrontaa käyttämään ylä- ja alamäkirytmejä, jotta hahmojen vuoropuhelusta tulee täyteläisiä tunteita.

Kunlun Wanwei paljasti, että SkyReelsin älykäs agentti ei voi vain ymmärtää tekstiä, vaan myös älykkäästi analysoida kohtauksen ilmapiiriä käsikirjoituksessa "Kehittyneen multimodaalisen haun ja taustamusiikin (BGM) sukupolven ominaisuuksien perusteella voimme yhdistää videon älykkyyden kohtuulliseen taustaan. musiikki yhdistää jokaisen ruudun täydellisesti musiikkiin."

Kunlun Wanwein AI-lyhytdraama-alusta SkyReels on vallankumouksellinen työkalu, jonka odotetaan tuovan räjähdysmäistä kasvua tekoälyn lyhytdraamasisällölle (UGC) ja ammattikäyttäjien luomalle sisällölle (PUGC), mikä lisää ennennäkemätöntä elinvoimaa lyhytdraamasisällön ekologiaan lyhytdraaman sisällöntuotannon ja kuluttajamarkkinoiden nopea kasvu edelleen. Tekoälytekniikan ohjaama lyhyt draama luomisen ja kulutuksen aikakausi on tulossa.

Kunlun Wanwei AI UGC:n yleinen asettelu

Guohai Securitiesin tutkimusraportissa mainittiin, että tekoälyn odotetaan lisäävän lyhyiden draamien tuotantokapasiteettia ja vähentävän kustannuksia. Ulkomaisten lyhyiden näytelmien markkinatilan ennustetaan konservatiivisesti olevan noin 36 miljardia dollaria.

SkyReels on ruumiillistuma Kunlun Wanwein ulkomaiseen ulkoasustrategiaan, jonka takana on heidän All in AIGC -strateginen ajattelunsa.

Vuonna 2020 Kunlun Wanwein perustaja Zhou Yahui näki AIGC:n mahdollisuudet, ja he ennustivat, että tekoälyjärjestelmä tuo uuden sisällön kulta-ajan.

Kunlun Wanwei puheenjohtaja ja toimitusjohtaja Fang Han tarkasteli mobiili-Internetin aikakauden mahdollisuuksia, teki yhteenvedon suosittujen sisältötuotteiden säännöistä ja totesi, että useimmat niistä ovat "ilmaisia ​​+ to C" -malleja, koska ryhmäkanta on riittävän suuri, kunhan vain tuote voi osua käyttäjiin Tunnistamalla kysyntäpisteet voimme saavuttaa räjähdysmäisen käyttäjien kasvun "AI UGC" -alustan rakentamisesta on tullut Kunlun Worldwiden ydinstrategia, joka on tarjota palveluja 1 %:lle sisällöntuottajista ja antaa 99 %:lle käyttäjistä kuluttaa sisältöä.

Joten, mitkä ovat kuvat tuotteista, joista tuli suosittuja AIGC-aikakaudella?

Fang Han uskoo, että kun uusia päätepuolen laitteistoja ja uusia tekoälyyn mukautettuja matkapuhelimia syntyy, AIGC voi saavuttaa häiritseviä tuloksia, mutta tämä prosessi kestää silti 3–5 vuotta, ja nykyisenä ydintehtävänä on ennusteiden tekeminen hyödyntää AIGC:tä.

Mobiili-Internetin aikakauden sääntöjen mukaan jokaisella maalla voi olla oma supersovellus tai supersovellus voi jakaa alueen useissa maissa samanaikaisesti. Hetken pohdittuaan Fang Han uskoi, että sen pitäisi ensin miehittää maita, joissa käyttäjäkustannustehokkuus ja hyväksyntä on korkea, kuten Eurooppa, Yhdysvallat, Japani, Etelä-Korea ja Kiina, ja sitten vähitellen levitä Lähi-itään, Kaakkois-Aasiaan ja Etelä-Amerikkaan. ja muilla alueilla.

Maiden rajaamisen jälkeen Kunlun Wanwein johto alkoi pohtia vertikaalisia luokkia, jotka voisivat synnyttää supersovelluksia. He kysyivät jatkuvasti: "Kuinka meistä voi tulla jättiläinen?" Edellisen aikakauden sisältöjättiläiset ovat pohjimmiltaan syvästi elossa AIGC:ssä toistetaan sama logiikka.

Tällä hetkellä Kunlun Wanwei on toteuttanut järjestelmällistä ulkoasua Kiinassa vastauksena "AI UGC" -strategiaan ja rakentanut tuotematriisin suuriin malleihin, tekoälyhakuun, tekoälymusiikkiin ja muilla aloilla.

Niistä Kunlun Wanwein suuri malli on käynyt läpi monia iteraatioita:

Uusi versio julkaistiin helmikuussaMoESuuri kielimalli "Tiangong 2.0" ja uusi versio "Tiangong AI Intelligent Assistant" -sovelluksesta;

Huhtikuussa "Tiangong 3.0" -perusmalli ja "Tiangong SkyMusic" -musiikkimalli lanseerattiin virallisesti julkiseen testaukseen;

Kesäkuussa Kunlun Wanwei hankki avoimen lähdekoodin 200 miljardin niukan suuren Skywork-MoE-mallin, joka on osa "Tiangong 3.0:aa".OpenAIVäittäessään estävänsä API-liikenteen maista ja alueilta, joita ei tueta, Tiangong Open Platform käynnisti "yhden napsautuksen siirtosuunnitelman" OpenAl API -käyttäjille ja tarjosi 150 miljoonan Tokenin API-kutsuresursseja, mukaan lukien Tiangong 2.0 ja Tiangong 3.0 Model.

Suuria malleja iteroitaessa tekoälyhaku on myös tullut Fang Hanin pääpainopisteeseen Kunlun Wanwei laati tekoälyhaun vuotta aikaisemmin kuin OpenAI:n SearchGPT, ja päivitti hakutuotteen tänä vuonna tukemaan tekstin, kuvien, videoiden jne. -osion käyttäjiä. voi esittää tuloksia mielenkarttojen, taulukoiden, ääriviivojen jne. muodossa ja voi tallentaa ääriviivoja ja ajatuskarttoja luodakseen suoraan PPT:n.

Tuotetason lisäksi Kunlun Wanweiya on tehnyt yhteistyötä kansainvälisten yliopistojen kanssa kehittääkseen avoimen lähdekoodin digitaalisen agentin T&K-työkalusarjan AgentStudio tarjotakseen tutkijoille ja kehittäjille kattavan alustan, joka kattaa agenttien koko kehitysprosessin.

Kotimaassa tai ulkomailla jokainen kielijärjestelmä tarvitsee oman tuotesarjansa Kunlun Wanwei uskoo, että AIGC-alustan globaali osinkokausi on tulossa.