2024-08-19
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
Maschinenherz Original
Autor: Wu Xin
Am 19. August veröffentlichte Kunlun Wanwei SkyReels, die weltweit erste KI-Plattform für Kurzdramen, die große Videomodelle und große 3D-Modelle integriert. Die SkyReels-Plattform integriert Drehbucherstellung, Charakteranpassung, Storyboards, Handlung, Dialoge/Hintergrundmusik und Videosynthese und ermöglicht es Entwicklern, Dramen mit einem Klick zu erstellen und ganz einfach hochwertige KI-Videos zu produzieren. Dies ist ein kurzes Stück von zweieinhalb Minuten.
Videolink: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w
„Wir sollten unser starres und widerspenstiges Denken loslassen und uns auf dieses fragmentierte Informationszeitalter einlassen.“ Anfang Dezember 2023 beklagte Regisseur Huang Jianxin im Hörsaal der Beijing Film Academy, dass der Aufstieg von Kurzfilmen im Hochformat im Vergleich zu Filmen eine echte Herausforderung darstellt globale Produktion.
Mit einzelnen Episoden von wenigen Minuten bis zu mehr als zehn Minuten Länge, starker Unterhaltung und rasanten Handlungssträngen sind die Nutzer häufig „genießbar“. In nur drei Jahren (bis 2023) hat Chinas Kurzfilmmarkt das jährliche Kinofilmniveau erreicht. 70 % der Abendkasse.
Gleichzeitig wurde weltweit eine große Anzahl unabhängiger Kurzdrama-Apps eingeführt. Die chinesische Online-Kurzdrama-Software ReelShort hat in den US-iOS-Rankings gut abgeschnitten, sogar TikTok übertroffen, das die Rangliste lange dominiert hat, und einen Durchbruch erzielt.
Kurzdramen haben sich in den letzten Jahren zu einem der am schnellsten wachsenden Bereiche von Film und Fernsehen entwickelt und sind auch zu einem Testfeld für neue Technologien geworden. „Ein-Klick-Übersetzung“ und „KI-Gesichtsveränderung“ sind weit verbreitet. Viele Online-Schreibunternehmen haben auch große Modelle zur Inhaltsgenerierung herausgebracht, die Autoren beim Schreiben unterstützen können. Mithilfe der KI-Funktionen zur Videogenerierung großer Modelle beträgt die Produktionszeit für kurze Dramen, die früher drei Monate dauerte, jetzt nur noch einen halben Monat.
Von KI erstellte kurze Videoclips können nach ihrer Veröffentlichung Millionen von Aufrufen erzielen, aber die Produktion eines vollständigen KI-Kurzdramas steht immer noch vor vielen Herausforderungen. Schöpfer müssen immer wieder zwischen mehreren KI-Tools wie ChatGPT, Midjourney, Runway, Eleven Labs, ComfyUi, Adobe und Cutting „springen“, aber die Ergebnisse ihrer Arbeit sind immer noch unbefriedigend.
Vor diesem Hintergrund hat Kunlun Wanwei, ein chinesisches Technologieunternehmen für künstliche Intelligenz mit mehr als zehn Jahren Auslandserfahrung, die weltweit erste KI-Kurzspielplattform SkyReels auf den Markt gebracht – eine KI-Kurzspielplattform, die große Videomodelle und große 3D-Modelle integriert. Dies ist nicht nur die erfolgreiche Umsetzung inländischer Großmodelle im Bereich der Kurzdramen, sondern läutet auch den Beginn der Ära des „One-Click-Dramas“ und „Eine Person, ein Drama“ ein.
Gleichzeitig wird erwartet, dass dieses revolutionäre Tool ein explosionsartiges Wachstum von benutzergenerierten KI-Kurzdrama-Inhalten (UGC) und professionellen benutzergenerierten Inhalten (PUGC) herbeiführt und das weitere schnelle Wachstum der Erstellung und Erstellung von Kurzdrama-Inhalten fördert Konsummarkt.
1. Lernen Sie SkyReels kennen – die weltweit erste KI-Plattform für Kurzdramen
SkyReels-Produktbetriebsdemo
Videolink: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w
Wenn ich die SkyReels-Webseite öffne, habe ich sofort das Gefühl, dass sich das Design von „AI Short Drama“ stark von anderen „AI Creative“-Plattformen unterscheidet.
Beide basieren auf KI, aber die „AI Creative“-Plattform konzentriert sich auf die Bild- und Videogenerierung, während SkyReels Drehbucherstellung, Charakteranpassung, Storyboard-Design, Videoaufnahme und -synthese integriert und so den Industrialisierungsprozess von Kurzspielen vollständig nachbildet.
SkyReels integriert Story-Kreativität, Drehbucherstellung, Charakteranpassung, Storyboard-Design, Videoaufnahmen und -synthese und reproduziert so den Industrialisierungsprozess von Kurzdramen vollständig.
Das Wichtigste ist, eine gute Idee zu haben und daraus ein cooles Drehbuch zu machen.
Obwohl die Texterstellung die Komfortzone des großen Sprachmodells LLM ist, besteht der Unterschied zwischen SkyReels darin, dass das große Modell, das für die Texterstellung verantwortlich ist, eine professionelle Ausbildung erhalten hat und weiß, wie man „coole“ und flussbasierte Skripte schreibt.
Geben Sie einfach ein Konzept oder eine Story-Idee ein und klicken Sie auf „Erstellungstyp“, z. B. emotionales Drama, und das System generiert automatisch ein Drehbuch, das den Anforderungen entspricht, mit einer vollständigen Struktur und einer reichhaltigen Handlung.
Benutzer können auch vorgefertigte Skripte hochladen und sich von der KI dabei helfen lassen, sie zu polieren und zu optimieren, um sie professioneller und lesbarer zu machen.
Das System generiert automatisch ein Skript, das den Anforderungen auf der Grundlage kreativer Anregungen entspricht, und fasst außerdem die Biografien der beteiligten Charaktere zusammen, um das spätere Charakterdesign vorzubereiten.
Sobald das Drehbuch fertig ist, besteht der nächste Schritt darin, „Schauspieler zu finden“. Bei SkyReels wird dieser Schritt als Charakterdesign bezeichnet.
Normalerweise lassen wir LLM zunächst den Designtext schreiben und übergeben ihn dann an ein Grafiktool wie Midjourney, um das Charakterbild zu generieren. Um den Charakteren Voice-Overs hinzuzufügen, werden weiterhin Audio-Tools wie Elevenlabs eingesetzt.
Rufen Sie jetzt einfach die Seite auf und geben Sie die entsprechenden Anforderungen ein (einschließlich Synchronisierung der Charaktere), und Sie können den Charakter mit einem Klick „generieren“, was die Produktionseffizienz erheblich verbessert.
Rufen Sie einfach die Seite auf und geben Sie die entsprechenden Anforderungen ein (einschließlich Synchronisierung der Charaktere), und der Charakter kann mit einem Klick generiert werden.
Bevor die Dreharbeiten beginnen, muss der Regisseur neben der Suche nach Schauspielern auch Storyboards erstellen.Das sogenannte Storyboard zerlegt die gesamte Geschichte im Wesentlichen in eine Reihe aufeinanderfolgender Bilder, wobei jedes Bild eine bestimmte Szene oder Aktion darstellt.
Storyboard aus Studio Ghiblis „Chihiros Reise ins Zauberland“.
Für einen Regisseur ohne künstlerischen Hintergrund ist es sehr mühsam, das Storyboard-Design mit Hilfe eines Malers fertigzustellen. Jetzt können sie LLM das Textskript der Aufnahme erstellen lassen und dann Tools wie Midjourney verwenden, um das Storyboard zu zeichnen.
Allerdings liegen auch die Nachteile dieser Methode auf der Hand: Es ist schwierig, die Konsistenz von Charakteren und Szenen sicherzustellen. In der Full-Process-KI-Miniserie „Nuwa“, die auf dem CCTV-KI-Kanal gestartet wurde, sieht Nuwa beispielsweise jedes Mal anders aus, als ob es mehrere Nuwa gäbe.
Auf SkyReels generiert AI mit einem Klick Storyboard-Bilder und entsprechende Textskripte basierend auf dem Skriptinhalt. Sie müssen nur 1-2 Minuten warten, um die Wirkung jeder Aufnahme zu sehen. Wenn Sie nicht zufrieden sind, können Sie den Storyboard-Effekt auch anpassen, indem Sie den Text (z. B. Szenen oder Charakteraktionen) ändern.
Noch wichtiger ist, dass die Storyboard-Bilder dank der Unterstützung selbst entwickelter Technologie nicht nur hochauflösend und detailreich sind, sondern dass die Charaktere und Szenen auch in verschiedenen Storyboards Konsistenz und Kontinuität wahren können.
Basierend auf dem Inhalt des Skripts generiert die KI mit einem Klick Storyboard-Bilder und entsprechende Textskripte.
Nachdem die Storyboards entworfen und die Schauspieler eingesetzt sind, ist es Zeit, mit der Phase des „eigentlichen Drehs“ zu beginnen.Hier liegt derzeit auch der größte Engpass in der Entwicklung von KI-Film und Fernsehen, weil es zu wenige gute „Kameras“ gibt, die genutzt werden können.
Ein gängiger Ansatz ist die Verwendung von Pika und Runway zur Erzeugung dynamischer Effekte, es gibt jedoch viele Nachteile. Beispielsweise ist die Bildqualität schlecht, die Bewegungen der Figuren sind gering oder sogar unangemessen (Problem beim Nudelfressen) und Szenen neigen zu Inkonsistenzen. Manchmal bewegt sich das Fahrzeug, aber die Räder drehen sich nicht, und der Wasserspritzer steht still bewegte Wasseroberfläche während des Wasserflusses. Die Mundformen der Figuren stimmen beim Sprechen nicht überein und ihre Gesichtsausdrücke sind steif.
Durch die Kombination aus KI-3D-Engine und Video-Großmodell kann SkyReels Storyboards automatisch in fortlaufende Videos umwandeln, wodurch die generierten Szenen und Charaktere lebendiger und konsistenter werden. Außerdem wird die 1080P-Videoausgabe mit 60 Bildern unterstützt, was ein Drama-Erlebnis gewährleistet.
Darüber hinaus beträgt die Videolänge, die gleichzeitig generiert werden kann, bis zu 180 Sekunden, was einen bedeutenden Durchbruch im Vergleich zu Sora darstellt, das jeweils ein 60-Sekunden-Video generieren kann, und Keling, das ein 10-Sekunden-Video generieren kann Video nach dem anderen.
SkyReels kann Storyboards automatisch in fortlaufende Videos umwandeln.
Schließlich können alle Prozessergebnisse mit einem Klick integriert werden, um schnell das endgültige Kurzspiel zu generieren. Basierend auf dem Drehbuchthema und bestimmten Szenen generiert und empfiehlt die KI außerdem passende Hintergrundmusik und Soundeffekte, die Nutzer mit nur einem Klick hinzufügen können.
Auch Hintergrundmusik und Soundeffekte können mit einem Klick hinzugefügt werden.
Es unterstützt den One-Click-Export in Videos und kann mit einem Klick auf Social-Media-Plattformen wie Douyin veröffentlicht werden.
Unterstützt das Teilen von Charakterdesigns mit einem Klick.
2. Hinter dem „One-Click-Drama“ verbergen sich drei Ebenen technologischer Innovation
Drei Schichten technologischer Innovation, wie drei Säulen, unterstützen das „One-Click-Drama“ von SkyReels:
Selbst entwickeltes Skript-Großmodell SkyScript, selbst entwickeltes Storyboard-Großmodell StoryboardGen und die branchenweit erste innovative Plattform WorldEngine, die KI-3D-Engines und Video-Großmodelle tief integriert.
SkyScript, ein großes Drehbuchmodell, ist für die Beherrschung der „Seele“ des Kurzspiels – des Drehbuchs – verantwortlich.Tatsächlich unterstützt nicht nur das Drehbuch, sondern auch das Textmodell den gesamten kreativen Prozess.
Einige Autoren von Mikrokurzdramen haben versucht, ChatGPT zur Erstellung von Drehbüchern zu verwenden, stellten jedoch fest, dass es dem Endergebnis an emotionaler Spannung und Handlungsänderungen mangelte und es sich lediglich um einen Stapel flachen Textes handelte. Kunlun Wanwei hat SkyScript-100M erstellt, einen hochwertigen strukturierten Datensatz für Kurzdramen mit 100 Millionen Ebenen. Dieser Datensatz enthält hochwertige Anmerkungen für den Handlungsrhythmus, spannende Punkte und emotionale Veränderungen einer großen Anzahl wunderbarer Kurzdramen und ist speziell für die Skripterstellung konzipiert.
Technisches Schemadiagramm des großen SkyScript-Skriptmodells
Prinzip der Storyboard-Skriptgenerierung des großen SkyScript-Skriptmodells.
Wenn Sie beispielsweise ein Hit werden wollen, müssen Sie neben dem Erlernen der Grundprinzipien und gängigen Muster der Erstellung aus riesigen Datenmengen auch einige bewährte „Routinen“ erlernen. Das Publikum hat oft eine klare Vorliebe für Handlungsstränge mit schnellem Tempo, starken Konflikten, wiederholter Spannung und mehreren Umkehrungen wie Gegenangriffen zur Schicksalsänderung, herrschsüchtigen Ehefrauen, wohlhabenden Familienkämpfen, Zeitreisen und Wiedergeburt, Vampiren, Werwölfen usw.; sind auch Themen, derer sie nie müde werden.
In ReelShorts beliebtem Kurzdrama „The Double Life of My Billionaire Husband“ geht es zuerst um die Ehe und dann um die Liebe. Die einzelne Episode dauert etwa 1 Minute und 30 Sekunden. Ab etwa der 12. Episode ist die Beziehungserwärmung zwischen den männlichen und weiblichen Protagonisten schnell abgeschlossen Es enthält Handlungsstränge wie eine bösartige weibliche Nebenrolle, eine vertragliche Ehe, einen Helden, der eine Schönheit rettet, und einen Kampf um Eigentum. Ein ausführlicher Bericht über die Auslandsexpansion chinesischer Kurzdramen von Guohai Securities.
Durch die sorgfältige Kommentierung der „coolen Punkte“ in der Geschichte, die beim Publikum großes Interesse wecken, wie etwa das Aussehen des Protagonisten, die Komposition der Einstellung und die von den Charakteren ausgedrückten Emotionen, lernt SkyScript, auf diese zu achten und diese zu generieren Details.
In Bezug auf die Modellarchitektur verwendet SkyScript außerdem ein Multi-Agent-Framework, um die Professionalität und Kontrollierbarkeit der generierten Inhalte sicherzustellen. Durch die Zusammenarbeit von „Kreativen“, „Casting-Direktoren“, „Drehbuchautoren“, „Romanautoren“, „Regisseuren“ und anderen intelligenten Agenten wird der industrielle Produktionsprozess bis zur vollständigen Drehbucherstellung nachgeahmt.
Qualitätsbewertung des Skript-Großmodells SkyScript.
Letztendlich ist ein Kurzspiel die Präsentation einer visuellen Sprache. Daher konzentrieren sich die anderen beiden Innovationsebenen – StoryboardGen und WorldEngine – auf das „Fleisch und Blut“ des Kurzspiels, nämlich das Schießen.
Wie SkyScript wurde auch StoryboardGen, ein selbst entwickeltes Storyboard-Modell im großen Maßstab, anhand hochwertiger, professioneller Storyboard-Beispiele in der realen Welt trainiert. Es ist speziell für das Storyboard-Design konzipiert und weit entfernt von allgemeinen Bildgenerierungsmodellen .
In ähnlicher Weise werden basierend auf dem Multi-Agenten-Framework verschiedene Elemente des Storyboards (Szenen, Einstellungen, Charaktere, Aktionen usw.) zur Verarbeitung in mehrere Agenten zerlegt, was die Kontrollierbarkeit und Konsistenz im Storyboard-Produktionsprozess erheblich verbessert.
Technisches schematisches Diagramm von StoryboardGen, einem großen Storyboard-Modell. Ähnlich wie bei Filmdrehs und der Animationsproduktion zerlegt StoryboardGen auf Basis des Multi-Agenten-Frameworks den Gesamtprozess in mehrere Agenten. Jeder Agent ist für eine bestimmte Funktion verantwortlich, wodurch die Kontrollierbarkeit und Konsistenz im Storyboard-Produktionsprozess verbessert wird.
Angenommen, es gibt ein Drehbuch, das eine Szene beschreibt, beispielsweise eine Person, die im Park spazieren geht.
Der LLM-Planer unterteilt das Skript zunächst in zwei Teile.
Darunter die globale Beschreibung (globale Eingabeaufforderung): „Eine Person geht in einem sonnigen Park spazieren“;
Lokale Beschreibung (örtliche Aufforderung): „Diese Person ist ein Mann mittleren Alters, trägt Freizeitkleidung, hält eine Kaffeetasse in der Hand und geht in gemächlichem Tempo.“
Im Generierungsprozess erfüllen verschiedene Agenten ihre eigenen Aufgaben. Beispielsweise generiert der Szenenagent den Hintergrund und das Layout des Parks basierend auf der globalen Beschreibung.
Abschließend integriert der Storyboard-Agent diese generierten Inhalte und generiert das endgültige Storyboard auf Basis aller Beschreibungsinformationen und Bedingungen.
StoryboardGen-Qualitätsbewertungsstatus des großen Storyboard-Modells.
Neben der Steuerbarkeit und Konsistenz hat StoryboardGen auch die Komplexität und Detailgenauigkeit der Bilder erheblich verbessert, um die Storyboard-Bilder ausdrucksvoller zu machen.
StoryboardGen verwendet beispielsweise ein progressives Generierungsframework auf Basis von DiT, um das endgültige Bild durch mehrere Modifikationen und Verbesserungen zu erstellen. Im Vergleich zu herkömmlichen Modellen zur einmaligen Generierung kann dieses Framework die im Zwischenprozess generierten Informationen vollständig nutzen, um Storyboards mit höherer Qualität und reichhaltigeren visuellen Effekten zu erstellen.
Die dritte Ebene der technologischen Innovation ist eine innovative Plattform World Engine, die als erste in der Branche 3D-Generierungstechnologie und Videogenerierungstechnologie durch Layer-Fusion und andere Methoden nahtlos miteinander verbindet, was der Bereitstellung einer leistungsstarken „Kamera“ für Entwickler gleichkommt. oder auch „Studio“.
WorldEngine vereintDie präzise Steuerbarkeit der Engine (z. B. Lichtsimulation, physikalische Simulation, 3D-Raum, Echtzeitinteraktion usw.) und die Fähigkeit zur Fantasiegenerierung des großen KI-Videomodells, bietet einen neuen Online-Hybrid-Videoerstellungsmodus, der es ermöglicht, die Videoerstellung von der Fuzzy-Generierung zu einer präziseren und kontrollierbaren zu übergehen.
Angenommen, Sie erstellen eine Szene, in der sich ein Pikachu unter einem Brunnen vergnügt. Sie können Sky3DGen gleichzeitig eine genaue Brunnenszene erstellen lassen und das große Videomodell ein realistisches Pikachu erstellen lassen.
Hybrid generierter Videofall
Videolink: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w
Wir wissen, dass große Videomodelle wie Sora leicht nahezu realistische Effekte erzeugen können, die von Game-Engines nicht erreicht werden können und voller Fantasie sind, aber sie verstehen die physische Welt nicht und können einige der grundlegendsten physischen Interaktionen, wie z. B. Glas, nicht genau simulieren Brechen und Essen.
Der Vorteil der Spiel-Engine liegt in der genauen Simulation realer physikalischer Gesetze. Durch komplexe mathematische Modelle kann eine virtuelle Umgebung geschaffen werden, die räumlich und zeitlich kohärent ist und objektiven Gesetzen entspricht. Dies gewährleistet nicht nur die Konsistenz und Vorhersehbarkeit der Rendering-Ergebnisse, sondern demonstriert auch ein tiefes Verständnis des dreidimensionalen Raums.
Als eines der größten Spieleentwicklungs- und -betriebsunternehmen in China ist es nicht verwunderlich, dass Kunlun Wanwei sein eigenes Sky3DGen-Großmodell entwickelt hat und „seine Vorteile ergänzt“ durch das Video-Großmodell, wodurch Entwicklern ein neues Hybrid-Erstellungsmodell zur Verfügung gestellt wird.
Auf SkyReels können Sie verschiedene 3D-Szenen und -Formen und sogar Charakterdarbietungen ändern.
Fall für die Erstellung von 3D-Requisitenvideos
Videolink: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w
Fall zur Erzeugung von 3D-Szenenvideos
Videolink: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w
Die Charakterleistung ist eines der Kernelemente von Kurzstücken. Kunlun Wanwei hat unabhängig das ActorShow-Modell zur Charakterleistungsgenerierung entwickelt, das über stärker kontrollierbare Generierungsfähigkeiten von Mundausdrücken und Körperbewegungen verfügt.
Videolink: https://mp.weixin.qq.com/s/4w5eOquY6p2Z7pXIUuKf9w
Qualitätsbewertung von Modellen zur Charakterleistungsgenerierung.
Während des Erstellungsprozesses können Benutzer das virtuelle 3D-Drehstudio auch frei definieren.
Möchten Sie heute eine Geschichte in der Wüste drehen? Mit ein paar Klicks verwandelt sich die gesamte Szene in eine riesige Wüste. Wirst du morgen auf der Raumstation drehen? Mit ein paar weiteren Klicks verwandelte sich die Umgebung in das Innere einer Hightech-Raumstation.
Sie können sogar virtuelle Kameras im virtuellen Studio platzieren und bewegen, um verschiedene Aufnahmewinkel auszuprobieren. Passen Sie das Licht an und fügen Sie Spezialeffekte hinzu, um einen sehr professionellen Aufnahmeeffekt zu erzielen.
Durch den Einsatz der Engine konnte WorldEngine im Vergleich zur herkömmlichen Videogenerierung eine revolutionäre Kostensenkung erzielen und gleichzeitig die Generierungsgeschwindigkeit und Steuerbarkeit um mehrere Größenordnungen verbessern.
3. Wetten Sie auf AI UGC und gehen Sie dann zum Pokertisch
SkyReels, die KI-Kurzdrama-Plattform, ist das neueste Mitglied der KI-Anwendungsschicht-Produktmatrix von Kunlun Wanwei.
Zuvor haben sie erfolgreich eine vielfältige Produktpalette aufgebaut, darunter KI-Suche, KI-Musik, KI-Video, KI-Social-Networking, KI-Spiele usw., und einige ihrer Geschäfte wurden kommerzialisiert.
Kunlun Wanwei war eines der ersten chinesischen Unternehmen, das den globalen Markt erkundete, und verfügt über mehr als zehn Jahre Erfahrung in der Content- und Unterhaltungsbranche. Er hat erkannt, dass die UGC-Plattform (User Generated Content) einen langanhaltenden Trend in der Welt beibehält Es wird auch vorhergesagt, dass die Intervention von AIGC nicht nur die Methoden zur IP-Erstellung für Webartikel, Kurzspiele, Animationen und Spiele diversifizieren wird, sondern, was noch wichtiger ist, die Schwelle für die Erstellung von Inhalten erheblich senken wird.
Wie die Branche sagt: „Jedes Mal, wenn die Schwelle für die Produktion von Inhalten verdoppelt wird, wird sich die Zahl der Menschen, die Inhalte erstellen, verzehnfachen. Dies deutet auf enorme Marktchancen hin.“
Daher ist Kunlun bestrebt, eine umfassende UGC-Plattform mit IP als Kern aufzubauen, damit alle Benutzer, die KI zum Erstellen verwenden, den vollständigen geschlossenen Kreislauf von IP abschließen können. Sie wissen sehr gut, dass ein Tool, das alle technischen Details verbergen und eine durchgängige Inhaltsgenerierung erreichen kann, einen echten kommerziellen Wert hat. Dies ist auch die tiefe Logik von Produkten zur „Ein-Klick-Generierung“ wie SkyReels.
Neben dem Aufbau einer KI-UGC-Plattform auf der oberen Ebene engagiert sich Kunlun Wanwei auf der unteren Ebene auch für die Entwicklung der Basis für allgemeine Großmodelle. Dies beruht auf einer einfachen, aber tiefgreifenden Einsicht: Aus technischer Sicht wird menschliche Weisheit in Form von Text niedergeschlagen, und alle exklusiven Modelle für soziale Netzwerke, Spiele, Musik und Videos sind untrennbar mit der Unterstützung großer Textmodelle verbunden.
Kunlun Wanweis selbst entwickeltes Tiangong-Modell wurde auf Version 3.0 iteriert. „Tiangong 3.0“ verwendet eine MoE-Architektur mit 400 Milliarden Parametern und ist derzeit eines der Open-Source-MoE-Modelle mit den größten Modellparametern und der stärksten Leistung weltweit. In vielen maßgeblichen multimodalen Bewertungsergebnissen wie MMBench übertraf „Tiangong 3.0“ GPT-4V und viele Bewertungsindikatoren erreichten das weltweit führende Niveau.
Mit einer soliden Basis an Allzweck-Großmodellen ist Kunlun Wanwei Schritt für Schritt in die Bereiche Inhalte und Unterhaltung vorgedrungen und hat seine Modellfähigkeiten horizontal erweitert – von Musik, literarischen Diagrammen, Videogenerierung bis hin zur Kurzdrama-Generierung, und hat sukzessive SkyMusic AI-Musikgroßformate auf den Markt gebracht Modell, multimodales Skywork-MM-Großmodell, SkyScript-Skript-Großmodell, StoryboardGen-Storyboard-Großmodell, Sky3DGen 3D-Großmodell usw.
Fang Han, Vorsitzender und CEO von Kunlun Wanwei, sagte einmal voraus, dass KI ebenso wie Kameras eine Revolution bei den Aufnahmemethoden herbeigeführt und eine große Anzahl von Kurzvideoplattformen wie Douyin und Kuaishou hervorgebracht haben, auch eine große Anzahl neuer KI-UGCs hervorbringen wird Plattformen. Er ist fest davon überzeugt, dass nur das „Free + to C“-Modell im KI-Zeitalter echte Riesenunternehmen hervorbringen kann.
Für Kunlun Technology, das über tiefe 2C-Gene verfügt, ist der Aufstieg von AIGC zweifellos eine seltene Chance. Dieses Unternehmen, das immer davon geträumt hat, sich zu einem führenden Unternehmen für künstliche Intelligenz zu entwickeln, dachte ursprünglich, es hätte die Gelegenheit verpasst, an den Pokertisch zu kommen, aber es hatte nicht damit gerechnet, dass AIGC ihm eine neue Tür öffnen würde. Sie arbeiten hart, sie geben ihr Bestes.
Interne Beta-Anmeldeadresse: https://skyreels.ai/beta