uutiset

Kunlun Wanwei lanseeraa maailman ensimmäisen tekoälyn lyhytdraamaalustan SkyReelsin, joka aloittaa yhden ihmisen, yhden draaman aikakauden

2024-08-19

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina



Koneen sydän alkuperäinen

Kirjailija: Wu Xin



Kunlun Wanwei julkaisi 19. elokuuta SkyReelsin, maailman ensimmäisen AI-lyhytdraamaalustan, joka yhdistää suuret videomallit ja 3D-suuret mallit. SkyReels-alusta yhdistää käsikirjoituksen luomisen, hahmojen mukauttamisen, kuvakäsikirjoitukset, juonen, dialogin/BGM- ja videosynteesin, jolloin tekijät voivat luoda draamoja yhdellä napsautuksella ja tuottaa helposti korkealaatuisia tekoälyvideoita. Tämä on lyhyt 2 ja puolen minuutin peli.

Linkki videoon: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w

"Meidän pitäisi päästää irti jäykästä ja vastustavasta ajattelustamme ja omaksua tämä pirstaleinen tietokausi Joulukuun 2023 alussa ohjaaja Huang Jianxin valitti Pekingin elokuvaakatemian luentosalissa, että elokuviin verrattuna pystysuorien valkokankaiden nousu on todella muodostanut globaali tuotanto.

Yksittäiset jaksot kestävät muutamasta minuutista yli kymmeneen minuuttiin, vahvaa viihdettä ja nopeatempoisia juonia, joten käyttäjät ovat usein "nauttivia" Vain kolmessa vuodessa (2023 mennessä) Kiinan lyhytdraamamarkkinat ovat saavuttaneet vuotuisen teatterielokuvatason. 70% lipputuloista.

Samaan aikaan maailmanlaajuisesti on lanseerattu suuri määrä itsenäisiä lyhytdraamasovelluksia Kiinalainen online-lyhytdraamaohjelmisto ReelShort on menestynyt hyvin Yhdysvaltain iOS-rankingissa, ohittaen jopa rankingia pitkään hallinneen TikTokin ja saavuttanut läpimurron.

Lyhytdraamista on tullut yksi nopeimmin kasvavista elokuva- ja tv-alueista viime vuosina, ja niistä on tullut myös uusien teknologioiden testausalusta. "Käännös yhdellä napsautuksella" ja "AI-kasvojen muuttaminen" ovat yleisiä. Monet verkkokirjoitusyritykset ovat myös julkaisseet suuria sisällöntuotantomalleja, jotka voivat auttaa kirjoittajia. Tekoälyn suurten mallivideoiden generointiominaisuuksien avulla lyhyt draaman tuotantoaika, joka kesti kolme kuukautta, kestää nyt vain puoli kuukautta.

Tekoälyn luomat lyhyet videoleikkeet voivat saada miljoonia katselukertoja julkaisun jälkeen, mutta koko prosessin kattavan tekoälyn lyhytdraaman tuotantoon liittyy edelleen monia haasteita. Tekijät joutuvat toistuvasti "hyppäämään" useiden tekoälytyökalujen, kuten ChatGPT:n, Midjourneyn, Runwayn, Eleven Labsin, ComfyUin, Adoben ja Cuttingin, välillä, mutta heidän työnsä tulokset ovat edelleen epätyydyttäviä.

Tätä taustaa vasten kiinalainen tekoälyteknologiayritys Kunlun Wanwei, jolla on yli kymmenen vuoden kokemus ulkomailta, lanseerasi maailman ensimmäisen tekoälyn lyhytdraamaalustan SkyReels – tekoälyn lyhytdraamaalustan, joka yhdistää suuret videomallit ja 3D-suuret mallit. Tämä ei ole vain kotimaisten laajamittaisten mallien onnistunut toteutus lyhyiden draamien alalla, vaan se ennakoi "yhden napsautuksen draaman" ja "yksi henkilö, yksi draama" aikakauden tuloa.

Samaan aikaan tämän vallankumouksellisen työkalun odotetaan saavan aikaan räjähdysmäisen kasvun tekoälyn lyhytdraaman käyttäjien luoman sisällön (UGC) ja ammattikäyttäjien luoman sisällön (PUGC) osalta ja edistävän lyhytdraaman sisällöntuotannon nopeaa kasvua edelleen. kulutusmarkkinoilla.

1. Tutustu SkyReelsiin – maailman ensimmäiseen tekoälyn lyhytdraamaalustaan



SkyReelsin tuotteen käyttöesittely

Linkki videoon: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w

Kun avaan SkyReels-verkkosivun, minusta tuntuu heti, että "AI Short Drama" on hyvin erilainen kuin muut "AI Creative" -alustot.

Molempia ohjaa tekoäly, mutta "AI Creative" -alusta keskittyy kuvien ja videoiden luomiseen, kun taas SkyReels yhdistää käsikirjoituksen luomisen, hahmojen mukauttamisen, kuvakäsikirjoituksen, videokuvauksen ja synteesin, mikä toistaa täysin lyhyiden näytelmien teollistumisprosessin.



SkyReels yhdistää tarinan luovuuden, käsikirjoituksen luomisen, hahmojen mukauttamisen, kuvakäsikirjoituksen, videokuvauksen ja synteesin, mikä toistaa täysin lyhyiden draamien teollistumisprosessin.

Tärkeintä on saada hyvä idea ja tehdä siitä hieno käsikirjoitus.

Vaikka tekstin luominen on suuren kielimallin LLM mukavuusalue, ero SkyReelsin välillä on se, että tekstin luomisesta vastaava suuri malli on saanut ammatillisen koulutuksen ja osaa kirjoittaa "cool" ja flow-pohjaisia ​​skriptejä.

Syötä vain konsepti tai tarina-idea ja napsauta "Creation Type", kuten tunnedraamaa, ja järjestelmä luo automaattisesti vaatimukset täyttävän käsikirjoituksen, jossa on täydellinen rakenne ja rikas juoni.

Käyttäjät voivat myös ladata valmiita skriptejä ja antaa tekoälyn auttaa hiomaan ja optimoimaan niitä ammattimaisemmiksi ja luettavammiksi.



Järjestelmä luo automaattisesti vaatimukset täyttävän käsikirjoituksen luovien kehotteiden perusteella ja tekee myös yhteenvedon mukana olevien hahmojen elämäkerrasta valmistautuakseen myöhempään hahmosuunnitteluun.

Kun käsikirjoitus on valmis, seuraava vaihe on "näyttelijöiden etsiminen" SkyReelsissä tätä vaihetta kutsutaan hahmosuunnitteluksi.

Yleensä annamme LLM:n ensin kirjoittaa suunnittelutekstin ja sitten heittää sen graafiseen työkaluun, kuten Midjourney, luomaan hahmokuvan. Selostuksen lisäämiseksi hahmoihin käytetään edelleen äänityökaluja, kuten Elevenlabsia.

Siirry nyt vain sivulle ja kirjoita vastaavat vaatimukset (mukaan lukien merkkien jälkiäänitys), ja voit "luoda" hahmon yhdellä napsautuksella, mikä parantaa huomattavasti tuotannon tehokkuutta.



Mene vain sivulle ja kirjoita vastaavat vaatimukset (mukaan lukien merkkien jälkiäänitys), ja hahmo voidaan luoda yhdellä napsautuksella.

Ennen kuvaamisen alkamista ohjaajan on näyttelijöiden etsimisen lisäksi myös kuvakäsikirjoituksia.Niin kutsuttu kuvakäsikirjoitus jakaa pääosin koko tarinan peräkkäisiksi kuviksi, joista jokainen edustaa tiettyä kohtausta tai toimintaa.



Kuvakäsikirjoitus Studio Ghiblin "Spirited Awaysta".

Ilman taidetaustaa olevaa ohjaajaa on erittäin hankala viimeistellä kuvakäsikirjoitus taidemaalarin avulla. Nyt he voivat antaa LLM:n luoda otoksen tekstikäsikirjoituksen ja sitten piirtää kuvakäsikirjoituksen työkaluilla, kuten Midjourney.

Tämän menetelmän haitat ovat kuitenkin ilmeisiä. On vaikea varmistaa hahmojen ja kohtausten johdonmukaisuutta. Esimerkiksi CCTV:n AI-kanavalla lanseeratussa täyden prosessin tekoälyminisarjassa "Nuwa" Nuwa näyttää erilaiselta joka kerta, kun hän esiintyy, ikään kuin Nuwaja olisi useita.

SkyReelsissä tekoäly luo kuvakäsikirjoituksia ja vastaavat tekstiskriptit yhdellä napsautuksella käsikirjoituksen sisällön perusteella. Sinun tarvitsee vain odottaa 1-2 minuuttia nähdäksesi kunkin kuvan vaikutuksen. Jos et ole tyytyväinen, voit myös säätää kuvakäsikirjoituksen tehostetta muokkaamalla tekstiä (kuten kohtauksia tai hahmotoimintoja).

Vielä tärkeämpää on, että itse kehitetyn tekniikan tuella kuvakäsikirjoituskuvat eivät ole vain teräväpiirtoisia ja yksityiskohtia sisältäviä, vaan hahmot ja kohtaukset voivat säilyttää johdonmukaisuuden ja jatkuvuuden eri kuvakäsikirjoituksissa.



Tekoäly luo kuvakäsikirjoituksen kuvat ja vastaavat tekstiskriptit yhdellä napsautuksella käsikirjoituksen sisällön perusteella.

Kun kuvakäsikirjoitukset on suunniteltu ja näyttelijät paikoillaan, on aika siirtyä "todellisen ammunnan" vaiheeseen.Tällä hetkellä suurin pullonkaula tekoälyelokuvan ja -television kehityksessä on myös täällä, koska hyviä "kameroita" on liian vähän.

Yleinen lähestymistapa on käyttää Pikaa ja Runwayta dynaamisten tehosteiden luomiseen, mutta siinä on monia haittoja. Esimerkiksi kuvanlaatu on heikko, hahmon liikkeet ovat pieniä tai jopa kohtuuttomia (nuudeleiden syömisongelma) ja kohtaukset ovat alttiita epäjohdonmukaisuuksille. Joskus ajoneuvo liikkuu, mutta pyörät eivät pyöri, ja vesiroiskeet ovat paikallaan liikkuva veden pinta veden virtauksen aikana. Hahmojen suun muodot eivät täsmää heidän puhuessaan, ja heidän ilmeensä ovat jäykkiä.

Tekoälyn 3D-moottorin ja suuren videomallin yhdistelmän avulla SkyReels voi automaattisesti muuntaa kuvakäsikirjoituksia jatkuviksi videoiksi, mikä tekee luoduista kohtauksista ja hahmoista elävämpiä ja johdonmukaisempia. Se tukee myös 1080P 60-kehyksen videolähtöä, mikä varmistaa draaman katselukokemuksen.

Lisäksi kerralla generoitavissa oleva videon pituus on jopa 180 sekuntia, mikä on merkittävä läpimurto verrattuna Soraan, joka pystyy tuottamaan 60 sekunnin videon kerralla, ja Kelingiin, joka voi tuottaa 10 sekuntia. video kerrallaan.



SkyReels voi automaattisesti muuntaa kuvakäsikirjoitukset jatkuviksi videoiksi.

Lopuksi kaikki prosessin tulokset voidaan integroida yhdellä napsautuksella, jotta lopullinen lyhyt toisto voidaan luoda nopeasti. Tekoäly luo ja suosittelee myös sopivaa taustamusiikkia ja äänitehosteita käsikirjoituksen teeman ja tiettyjen kohtausten perusteella, ja käyttäjät voivat lisätä niitä yhdellä napsautuksella.



Taustamusiikkia ja äänitehosteita voidaan myös lisätä yhdellä napsautuksella.



Se tukee vientiä yhdellä napsautuksella videoihin ja voidaan julkaista sosiaalisen median alustoille, kuten Douyin, yhdellä napsautuksella.



Tukee hahmojen jakamista yhdellä napsautuksella.

2. "Yhden napsautuksen draaman" takana on kolme teknologista innovaatiotasoa

Kolme teknologista innovaatiotasoa, kuten kolme pilaria, tukevat SkyReelsin "yhden napsautuksen draamaa":

Itse kehitetty käsikirjoituksen suuri malli SkyScript, itse kehitetty kuvakäsikirjoituksen suuri malli StoryboardGen ja alan ensimmäinen innovatiivinen alusta WorldEngine, joka integroi syvästi tekoälyn 3D-moottorit ja suuret videomallit.

SkyScript, suuri käsikirjoitusmalli, vastaa lyhyen näytelmän "sielun" - käsikirjoituksen - hallitsemisesta.Itse asiassa, ei vain käsikirjoitus, vaan myös tekstimalli tukee koko luovaa prosessia.

Jotkut mikrolyhytdraaman kirjoittajat ovat yrittäneet käyttää ChatGPT:tä käsikirjoitusten luomiseen, mutta havainneet, että lopputuloksesta puuttui emotionaalinen jännitys ja juonenmuutos, ja se oli vain kasa litteää tekstiä. Kunlun Wanwei on rakentanut SkyScript-100M:n, 100 miljoonan tason korkealaatuisen lyhytdraaman strukturoidun tietojoukon. Tämä tietojoukko sisältää laadukkaita huomautuksia useiden upeiden lyhytdraamien juonen rytmistä, jännittävistä kohdista ja tunnemuutoksista. , ja se on erityisesti suunniteltu käsikirjoituksen luomiseen.



SkyScript-skriptin suuri malli tekninen kaavio



SkyScript-sarjan suuren mallin kuvakäsikirjoituksen luomisperiaate.

Esimerkiksi massiivisesta datasta luomisen perusperiaatteiden ja yleisten mallien oppimisen lisäksi, jos haluat tulla hitiksi, sinun on myös keksittävä joitain hyväksi todettuja "rutiineja". Yleisö pitää usein selkeästi parempana juonisuunnitelmia, joissa on nopea tahti, voimakkaita konflikteja, toistuvia jännitteitä ja useita käänteisiä teemoja, kuten vastahyökkäys kohtalon muuttamiseksi, dominoiva vaimo, varakkaiden perheiden taistelut, aikamatkailu ja uudestisyntyminen, vampyyrit, ihmissudet jne. ovat myös teemoja, joihin he eivät koskaan väsy.



ReelShortin suosittu lyhytdraama "Miljardöörimieheni kaksoiselämä" käsittelee ensin avioliittoa ja myöhemmin rakkautta. Yksittäinen jakso kestää noin 12. jaksosta lähtien, mies- ja naispäähenkilöt saivat suhteen lämpenemisen nopeasti päätökseen. ylhäällä intensiivisessä juonenristeyksessä ja peitettynä Se sisältää juonet, kuten julma naispuolinen rooli, sopimusavioliitto, sankari pelastamassa kauneutta ja taistelua omaisuudesta. Perusteellinen raportti Guohai Securitiesin kiinalaisten lyhyiden draamien laajentumisesta ulkomaille.

Merkitsemällä huolellisesti tarinan "viileitä kohtia", jotka herättävät yleisössä suurta kiinnostusta, kuten päähenkilön ulkonäkö, otoksen koostumus ja hahmojen ilmaisemat tunteet, SkyScript oppii kiinnittämään huomiota ja luomaan näitä yksityiskohdat.

Malliarkkitehtuurin osalta SkyScript ottaa käyttöön myös moniagenttikehyksen luodun sisällön ammattimaisuuden ja hallittavuuden varmistamiseksi. "Luovien ihmisten", "casting-ohjaajien", "käsikirjoittajien", "romaanien kirjoittajien", "ohjaajien" ja muiden älykkäiden agenttien yhteistyön avulla teollista tuotantoprosessia jäljitellään käsikirjoituksen luomiseksi.



Laadunarviointi skriptin suuren mallin SkyScript.

Lyhyt näytelmä on loppujen lopuksi visuaalisen kielen esitys. Siksi kaksi muuta innovaatiokerrosta - StoryboardGen ja WorldEngine - keskittyvät lyhytnäytelmän "lihaan ja vereen".

Kuten SkyScript, myös StoryboardGen, itse kehitetty suuren mittakaavan kuvakäsikirjoitusmalli, on koulutettu korkealaatuisilla, ammattimaisilla kuvakäsikirjoituksilla .

Samoin moniagenttikehyksen perusteella kuvakäsikirjoituksen eri elementit (kohtaukset, laukaukset, hahmot, toiminnot jne.) jaetaan useiksi agenteiksi prosessointia varten, mikä parantaa huomattavasti kuvakäsikirjoituksen tuotantoprosessin ohjattavuutta ja johdonmukaisuutta.



StoryboardGenin, suuren kuvakäsikirjoitusmallin, tekninen kaavio. Samoin kuin elokuvan kuvaus- ja animaatiotuotannossa, usean agentin kehykseen perustuva StoryboardGen jakaa koko prosessin useiksi agenteiksi, joista jokainen on vastuussa tietystä ominaisuudesta, mikä parantaa kuvakäsikirjoituksen tuotantoprosessin ohjattavuutta ja johdonmukaisuutta.

Oletetaan, että on käsikirjoitus, joka kuvaa kohtauksen, kuten puistossa kävelevän henkilön.

LLM Planner jakaa käsikirjoituksen ensin kahteen osaan.

Niistä maailmanlaajuinen kuvaus (maailmanlaajuinen kehote): "Ihminen kävelee aurinkoisessa puistossa";

Paikallinen kuvaus (paikallinen kehote): "Tämä henkilö on keski-ikäinen mies, joka pukeutuu arkivaatteisiin, pitää kahvikuppia kädessään ja kävelee verkkaiseen tahtiin."

Generointiprosessissa eri agentit suorittavat omia tehtäviään. Esim. kohtausagentti luo puiston taustan ja asettelun globaalin kuvauksen perusteella.

Lopuksi Storyboard-agentti integroi nämä luodut sisällöt ja luo lopullisen kuvakäsikirjoituksen kaikkien kuvaustietojen ja ehtojen perusteella.



StoryboardGen-laadunarvioinnin tila suurelle kuvakäsikirjoitusmallille.

Ohjattavuuden ja johdonmukaisuuden lisäksi StoryboardGen on parantanut huomattavasti kuvien monimutkaisuutta ja tarkkuutta, jotta kuvakäsikirjoituksen kuvat olisivat ilmaisuisempia.

Esimerkiksi StoryboardGen käyttää progressiivista sukupolvikehystä, joka perustuu DiT:hen, luodakseen lopullisen kuvan useiden muokkausten ja parannusten avulla. Verrattuna perinteisiin kertaluontoisiin malleihin, tämä kehys voi hyödyntää täysimääräisesti väliprosessissa tuotettua tietoa luodakseen kuvakäsikirjoituksia, joilla on korkeampi laatu ja rikkaammat visuaaliset tehosteet.

Kolmas teknologisen innovaation kerros on innovatiivinen alusta World Engine, joka on alan ensimmäinen, joka yhdistää saumattomasti 3D-sukupolviteknologian ja videontuotantoteknologian kerrosfuusion ja muiden menetelmien avulla, mikä vastaa tehokkaan "kameran" tarjoamista tekijöille. tai jopa "studio".

WorldEngine yhdistääMoottorin tarkka ohjattavuus (kuten valaistussimulaatio, fyysinen simulointi, 3D-avaruus, reaaliaikainen vuorovaikutus jne.) ja AI-video-suurmallin fantasiatuotantokyky, tarjoaa uuden online-hybridivideonluontitilan, jonka avulla videoiden luominen voi siirtyä sumeasta sukupolvesta tarkempaan ja hallittavampaan.

Oletetaan, että teet kohtauksen, jossa Pikachu pitää hauskaa suihkulähteen alla. Voit antaa Sky3DGenin luoda tarkan suihkulähdekohtauksen samalla, kun videomalli tuottaa realistisen Pikachun.



Hybridi luotu videokotelo

Linkki videoon: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w

Tiedämme, että suuret videomallit, kuten Sora, voivat helposti luoda lähes realistisia tehosteita, joihin pelimoottoreilla ei ole vertaa ja jotka ovat täynnä mielikuvitusta, mutta ne eivät ymmärrä fyysistä maailmaa eivätkä pysty simuloimaan tarkasti joitain alkeellisia fyysisiä vuorovaikutuksia, kuten lasia. murtaa ja syöminen ja niin edelleen.

Pelimoottorin etu on sen todellisten fyysisten lakien tarkka simulointi. Monimutkaisten matemaattisten mallien avulla se voi luoda virtuaalisen ympäristön, joka on johdonmukainen tilassa ja ajassa ja noudattaa objektiivisia lakeja. Se ei ainoastaan ​​takaa tulosten johdonmukaisuutta ja ennustettavuutta, vaan myös osoittaa syvän kolmiulotteisen tilan ymmärtämisen.

Yhtenä Kiinan suurimmista pelikehitys- ja -käyttöyhtiöistä ei ole yllättävää, että Kunlun Wanwei on kehittänyt oman Sky3DGen-suurmallinsa ja "täydentää sen etuja" suurella videomallilla tarjoten tekijöille uuden hybridi-luontimallin.

SkyReelsillä voit muuttaa erilaisia ​​3D-kohtauksia ja -muotoja ja jopa hahmojen esityksiä.



3D prop videon sukupolvikotelo

Linkki videoon: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w



3D-kohtausvideon sukupolvikotelo

Linkki videoon: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w



Hahmoesitys on yksi lyhyiden näytelmien ydinelementeistä Kunlun Wanwei on kehittänyt itsenäisesti ActorShow-hahmojen suoritusmallin, jossa on vahvemmat hallittavat suun ilmaisujen ja kehon liikkeiden generointiominaisuudet.

Linkki videoon: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w



Hahmon suorituskyvyn sukupolvimallien laadun arviointi.

Luomisen aikana käyttäjät voivat myös määritellä vapaasti 3D-virtuaaliammuntastudion.

Haluatko kuvata tarinan autiomaassa tänään? Muutamalla napsautuksella koko kohtaus muuttuu valtavaksi autiomaaksi. Aiotko ampua huomenna avaruusasemalla? Muutamalla napsautuksella ympäristö muuttui korkean teknologian avaruusaseman sisustukseksi.

Voit jopa sijoittaa ja siirtää virtuaalikameroita virtuaalistudioon kokeillaksesi erilaisia ​​kuvauskulmia. Säädä valoa ja lisää erikoistehosteita saadaksesi erittäin ammattimaisen kuvauksen.

Moottorin käytön ansiosta WorldEngine on saavuttanut vallankumouksellisen kustannussäästön verrattuna perinteiseen videontuotantoon, ja samalla sukupolven nopeutta ja ohjattavuutta on parannettu useita suuruusluokkaa.

3. Lyö vetoa AI UGC:stä ja mene sitten pokeripöytään

SkyReels, tekoälyn lyhytdraamaalusta, on Kunlun Wanwein AI-sovelluskerroksen tuotematriisin uusin jäsen.

Ennen tätä he ovat onnistuneesti rakentaneet monipuolisen tuotevalikoiman, joka sisältää tekoälyhaun, tekoälymusiikin, tekoälyvideot, tekoälyn sosiaaliset verkostot, tekoälypelit jne., ja osa heidän yrityksistään on kaupallistettu.

Kunlun Wanwei on yksi ensimmäisistä kiinalaisista yrityksistä, joka on tutkinut globaaleja markkinoita ja jolla on yli kymmenen vuoden kokemus sisältö- ja viihdeteollisuudesta. Hän on ymmärtänyt, että UGC (user-generated content) -alusta on säilyttänyt pitkäkestoisen trendin Sisältö- ja pelikentät On myös ennustettu, että AIGC:n väliintulo ei ainoastaan ​​monipuolista verkkoartikkelien, lyhyiden näytelmien, animaatioiden ja pelien IP-luontimenetelmiä, vaan mikä vielä tärkeämpää, alentaa merkittävästi sisällön luomisen kynnystä.

Kuten teollisuus sanoo: "Joka kerta kun sisällöntuotannon kynnys kaksinkertaistuu, sisältöä luovien ihmisten määrä kymmenkertaistuu. Tämä osoittaa valtavia markkinamahdollisuuksia."

Siksi Kunlun on sitoutunut rakentamaan kattavan UGC-alustan, jonka ytimessä on IP, jotta kaikki luomiseen tekoälyä käyttävät käyttäjät voivat täydentää IP:n suljetun silmukan. He tietävät erittäin hyvin, että työkalulla, joka voi piilottaa kaikki tekniset yksityiskohdat ja tuottaa kokonaisvaltaista sisältöä, on todellista kaupallista arvoa. Tämä on myös SkyReelsin kaltaisten "yhden napsautuksen sukupolven" tuotteiden syvä logiikka.

Sen lisäksi, että Kunlun Wanwei rakentaa AI UGC -alustan ylemmälle tasolle, alatasolle, Kunlun Wanwei on myös sitoutunut kehittämään pohjan yleiskäyttöisille suurille malleille. Tämä johtuu yksinkertaisesta mutta syvällisestä oivalluksesta: teknisestä näkökulmasta inhimillinen viisaus saostuu tekstin muodossa, ja kaikki sosiaalisen verkostoitumisen, pelien, musiikin ja videoiden eksklusiiviset mallit ovat erottamattomia suurten tekstimallien tuesta.

Kunlun Wanwein itse kehittämä Tiangong-malli on iteroitu versioon 3.0. "Tiangong 3.0" käyttää 400 miljardin parametrin MoE-arkkitehtuuria ja on tällä hetkellä yksi avoimen lähdekoodin MoE-malleista, jolla on suurimmat malliparametrit ja vahvin suorituskyky maailmassa. Monissa arvovaltaisissa multimodaalisissa arviointituloksissa, kuten MMBench, "Tiangong 3.0" ylitti GPT-4V:n, ja monet arviointiindikaattorit saavuttivat maailman johtavan tason.

Vankan yleiskäyttöisen suuren mallipohjan ansiosta Kunlun Wanwei on siirtynyt askel askeleelta kohti sisältö- ja viihdekenttiä laajentamalla mallin ominaisuuksia horisontaalisesti - musiikista, kirjallisista kaavioista, videoiden luomisesta lyhyiden draamien sukupolveen ja peräkkäin lanseerannut SkyMusic AI -musiikin suuren osan. malli, Skywork -MM multimodaalinen suuri malli, SkyScript script -suuri malli, StoryboardGen kuvakäsikirjoituksen suuri malli, Sky3DGen 3D suuri malli jne.

Kunlun Wanwein puheenjohtaja ja toimitusjohtaja Fang Han ennusti kerran, että aivan kuten kamerat ovat aiheuttaneet vallankumouksen kuvausmenetelmissä ja synnyttäneet suuren määrän lyhyitä videoalustoja, kuten Douyin ja Kuaishou, tekoäly synnyttää myös suuren määrän uusia tekoälyn UGC:itä. alustat. Hän uskoo vakaasti, että vain "ilmainen + to C" -malli voi kasvattaa todellisia jättiläisyrityksiä tekoälyn aikakaudella.

Kunlun Technologylle, jolla on syvät 2C-geenit, AIGC:n nousu on epäilemättä harvinainen mahdollisuus. Tämä yritys, joka on aina haaveillut kasvavasta johtavaksi tekoälyteknologiayritykseksi, luuli alun perin menettäneensä mahdollisuuden päästä pokeripöytään, mutta se ei odottanut AIGC:n avaavan heille uuden oven. He työskentelevät kovasti, he tekevät kaiken. ‍

Sisäisen beta-sovelluksen osoite: https://skyreels.ai/beta