ニュース

Kunlun Wanwei が世界初の AI 短編ドラマ プラットフォーム SkyReels を立ち上げ、短編ドラマが「無人地帯」に参入

2024-08-19

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

文/テンセントテクノロジー周暁燕

新しいことを言わせてください。今後あなたが観る短編ドラマには、表舞台から舞台裏まで「人」が登場しないかもしれません。

従来のモデルでは、脚本開発、制作、配信までの短編ドラマの制作チェーンには多くの「人」が必要でしたが、AI の出現により、マウスを操作できる人は 1 人だけで済む可能性があります。ディレクターはスクリーンの前ですべてのプロセスを完了できます。

8月19日、Kunlun Wanweiは、ビデオラージモデルと3Dラージモデルを統合した世界初のAI短編ドラマプラットフォームであるSkyReelsをリリースしました。 SkyReels プラットフォームは、脚本の生成、キャラクターのカスタマイズ、絵コンテ、プロット、セリフ/BGM、ビデオ合成を統合しており、クリエイターが「ワンクリックでドラマを作る」ことができ、高品質な AI ビデオを簡単に制作できます。 Kunlun Wanwei AI 短編ドラマ プラットフォーム SkyReels の立ち上げは、世界的な AI 短編ドラマ制作における大きな技術的飛躍を示しています。

つまり、俳優を雇ったり、会場を探したりする必要がなく、SkyReelsを開いてキーボードを操作するだけで、AIの力を使って短編劇を作成することができます。

AIはコントを披露し、「無人地帯」への侵入を開始する。

AI 短編ドラマにおける崑崙万偉の野心: 元の生産モデルを覆す新種の創造

短編演劇をするために海外に行くことは新しいことではありません。

2022 年に Chinese Online の短編ドラマ製品 ReelShort が開始され、1 年後には米国の iOS エンターテイメント リストで無料ランキング 1 位にランクされました。その後すぐに、ShortTV や DramaBox などの新星もヒット短編ドラマを制作し続けました。彼らのテーマは主にボス、愛、狼男です。ReelShort のヒット短編ドラマ「億万長者の夫の二重生活」には、「美人を救うヒーロー」、「財産の戦い」などが含まれています。

このタイプの短編ドラマは通常、現地のオリジナルです。つまり、海外チームは現地の文化とユーザーの興味を組み合わせて、現地のユーザーの美的嗜好を満たす脚本を作成する必要があり、現地の人々を「魅力的」にするストーリーのポイントを正確に捉えることができます。

これらの短編劇の中核的な問題は、地元の文化に対する十分な理解と研究が必要であり、制作サイクルが長く、地元の俳優の発掘にある程度の費用がかかることです。

実際、最初の海外の短編ドラマのモデルは非常にシンプルで粗雑なものが多く、不協和音を軽減するために、一部の海外チームは中国の現地ドラマに直接字幕を付けて、俳優に話しかけます。短編ドラマは、「中国人の顔の俳優が英語でセリフを言っている」ように見えるように最適化されていますが、私たちが中国で欧米の映画やドラマを見るのと同じように、堅苦しいと感じる人もいます。青い目と緑の髪をしたヨーロッパやアメリカの俳優を見ると、人々が奇妙な口調で中国語を話しているようなもので、観客が実際に参加しているという感覚を持ちにくくなります。

その結果、一部の海外チームはAIを使って短編劇の俳優の「顔を変える」ことで、現地の人々に受け入れられるようにするだろう。

かつて、海外チームは人気のショートドラマを作るために、さまざまな「トリック」を考え出し、多くの脳のCPUを消費していたことがわかります。

では、ビッグモデルの時代に、文化の違いを打ち破り、言語の制限に依存せず、AI を使用してあらゆる側面を解決できる短編ドラマ製品はあるのでしょうか?

偶然にも、ReelShort が海に出たのと同じ年に、Kunlun Wanwei がそれに注目しました。エイジーシーシステム的なチャンス モバイル インターネット時代の成功モデルを検討することで、そのパスワードが「無料 + To C」モデルにあることがわかりました。そして、今も健在である「巨大」企業を観察すれば、それがわかるでしょう。彼らの多くは、ある種族が究極を達成したことになるだろう。この判断に基づいて、Kunlun Wanwei の会長兼 CEO である Fang Han 氏は、この一連の論理に従って AIGC 市場を攻撃する可能性があります。

クンルン・ワンウェイが考えた「AI」 ユーザー作成コンテンツ「戦略は、オンライン記事、短編劇、アニメーション、音楽などの細分化されたトラックでユニコーンのポートレートを探索するなど、C サイドの高頻度シナリオから始めます。その中で、短編劇も崑崙万偉にとって重要なオプションになっています」彼らは、オリジナルの短編ドラマ制作モデルを覆す新しい種を生み出すことを望んでいます。

AIショートドラマプラットフォームSkyReelsも、このロジックのもと誕生しました。台本生成、キャラクター生成、ショットフュージョンから最終的なショートドラマ生成までをAI主導でワンストップで行うショートドラマ動画作成プラットフォームです。生成された。

全体として、SkyReels は監督の AI エージェントのように機能し、単純なアイデアを短編劇に変えます。

最初から最後までエージェント

によるソラに代表されるAI動画生成モデルの出現後、国内外の多くのプレーヤーがPixverse、素早く簡単に、Zhiying Qingyuan、そしてこれらの大きなモデルを使用して映画やテレビ作品を制作する多くの新進監督もいます。これらのモデルを使用すると優れたビデオ生成効果が得られますが、成熟した映画を作成したい場合は、ユーザー自身の専門的な能力に一定の要件があり、高い脚本能力と芸術的な美的能力が必要です。

たとえば、ユーザーは事前にショットを構成し、希望のショットを想像し、専門用語を含むプロンプトを使用して、旅の途中製品上で満足のいく画像をデバッグした後、それをビデオ生成製品にインポートしてレンズ調整を行い、最後に作業をエクスポートします。

これらのツールは映画やテレビ作品の制作チェーンも大幅に短縮しましたが、よりPUGCSkyReels は使用の敷居が低く、アイデアを入力すればあとは AI に任せることができます。それに比べて、SkyReels は世界初の AI 短編ドラマ プラットフォームであり、より多くの視聴者を獲得している UGC 製品です。

(SkyReels製品デモンストレーション)

SkyReels は、3D エンジンと生成 AI を組み合わせた世界初のビデオ作成プラットフォームです。使用プロセスも非常に簡単です。ショート フィルムの作成を選択した後、クリエイティブなアイデアを入力し、アニメ スタイル、リアリズムなどのビデオ スタイルを選択します。 、ジブリ風です。ワンクリックでスクリプトを生成できます。システムは、スクリプトとストーリーのニーズに応じてキャラクターを自動的に生成します。ユーザーは、自動生成されたストーリーボード スクリプトを表示し、ワンクリックでそれをビデオに変換し、コンテンツを自動的にビデオに変換できます。1080P 60フレームHD ビデオ。一度に生成できるビデオの長さは最大 180 秒です、一度に 60 秒のビデオを生成できる Sora や、一度に 10 秒のビデオを生成できる Keling と比較すると、大きな進歩です。

全体として、短編ドラマの完全な制作チェーンには、脚本の生成、キャラクターのカスタマイズ、絵コンテの生成、エピソードの撮影、ポストプロダクションが含まれており、SkyReels は 3 つの自社開発の大規模モデルを使用して、この制作チェーンの効率を向上させることができます。

コンテンツ開発の過程においては、伝統的なショートドラマの制作手法と、既成のオンライン小説からいくつかの章を選択し、短編ドラマの特性に応じて脚色することで、脚本家は視聴者の興味を組み合わせ、プロットの転換点を巧みに設定する必要があります。次の章の料金を支払うユーザーの意思。

SkyReels は、このリンクで自社開発のスクリプト大規模モデルを使用していますスカイスクリプト、従来の短編劇の手動コンテンツ開発に取って代わります。 Kunlun Wanwei は、1 億レベルの高品質の短編ドラマ構造化データ セットである SkyScript-100M を最初に構築しました。このデータ セットには、多数の素晴らしい短編ドラマのプロットのリズム、刺激的なポイント、感情の変化に対する高品質の注釈が含まれています。さらに、アルゴリズム チームが設計した、段階的に生成されるスクリプト生成フレームワークにより、このモデルは高度に構造化されたエキサイティングなスクリプトを出力でき、初心者でも経験豊富な脚本家でも、このモデルを通じて魅力的な短編劇のスクリプトを作成できます。

感動的なストーリーを作成した後の次のステップは、これらのストーリーを撮影台本に変換することです。従来の制作モデルでは、このリンクでは俳優を招待し、オフラインでシーンを設定する必要があり、監督は撮影前に俳優と必要な事項についてコミュニケーションをとる必要があります。人手と設定コストがかかります。ただし、これらはすべて大規模な AI モデルで置き換えることができます。SkyReels はこのリンクで Kunlun Wanwei を使用しています。自社開発の大型ストーリーボードモデル StoryboardGen、このモデルは、映画およびテレビのアニメーション データを逆処理して、高品質の工業グレードのストーリーボード データ セットを取得し、ストーリーボード マルチエージェント フレームワークを設計して、高品質のシーン、ショット、キャラクター、およびアクションの生成を実現します。画像生成効果に関しては、Kunlun Wanwei は自社開発した DiT-Moe モデルを使用して画質を向上させています。

正式な撮影プロセスと同様に、完全なストーリー システムを構築するには、ショットを有機的に統合する必要があります。SkyReels は、AI 3D エンジンと大規模なビデオ モデルを深く統合し、3D 生成、ビデオ生成、および 3D とビデオのハイブリッド作成を実現する業界初の革新的なプラットフォームである WorldEngine を使用しています。

WorldEngine イノベーション プラットフォームは複数のサブリンクで構成されており、それぞれが異なるモデルを使用します。

3D生成モジュールでは、自社開発した Sky3DGen 大型モデルを使用しており、自然風景から未来の都市、静的なオブジェクトから動的なキャラクターに至るまで、さまざまな 3D 要素やシーンを生成でき、リアルタイムの 3D シーン インタラクション機能を備えているため、ユーザーは瞬時に表示できます。エフェクトを調整および編集して、クリエイティブなプロセスをスピードアップします。 WorldEngine のサポートにより、ユーザーは 3D 仮想スタジオを構築して仮想撮影体験を実現できます。

(3Dシーンのインテリジェントな生成)

3D とビデオのハイブリッド作成モジュールでは、Kunlun Wanwei がレイヤー フュージョン テクノロジーをコアとして使用して、3D とビデオのハイブリッド作成モデルを作成します。ビデオ内の任意の要素を自由に選択し、3D AI エンジンまたは大規模なビデオ モデルを使用して生成できます。 さらに、Kunlun Wanwei は、ミキシング時に発生する照明とスタイルの違いの詳細についてフュージョン生成モデルを個別にトレーニングしたため、レイヤーフュージョン後のビデオの一貫性が向上しました。

(混合してビデオを生成)

WorldEngineはエンジンの採用により、従来の動画生成に比べてコスト削減を実現すると同時に、生成速度も数桁高速化しました。

ここでは基本的に短い動画が生成されていますが、ドラマをよく見る人にとっても、上手なセリフ回しやBGMによるあらすじの演出は、半分の労力で2倍の成果が得られる効果があると感じられるでしょう。

セリフに関して言えば、SkyReels の AI テキスト理解テクノロジーは、何万もの小説からディープラーニングした後、テキストから登場人物の会話や感情表現を自動的に識別し、文間の適切な休止を予測できます。ナレーションに関しては、SkyReels は感情的な音声合成技術を使用して、ナレーションが起伏のリズムを使用してキャラクターの会話を豊かな感情に満ちたものにします。

Kunlun Wanwei 氏は、SkyReels のインテリジェント エージェントはテキストを理解するだけでなく、スクリプト内のシーンの雰囲気をインテリジェントに分析できることを明らかにしました。「高度なマルチモーダル検索とバックグラウンド ミュージック (BGM) 生成機能に基づいて、ビデオ インテリジェンスを適切な背景に合わせることができます。音楽はすべてのフレームを音楽と完璧に融合させます。」

Kunlun Wanwei の AI 短編ドラマ プラットフォーム SkyReels は、AI 短編ドラマのユーザー生成コンテンツ (UGC) とプロフェッショナル ユーザー生成コンテンツ (PUGC) の爆発的な成長をもたらし、短編ドラマ コンテンツの生態系に前例のない活力を注入すると予想される革新的なツールです。短編ドラマコンテンツの制作と消費者市場のさらなる急速な成長。 AI技術が牽引する短編ドラマの制作・消費の時代が到来する。

Kunlun Wanwei AI UGC のグローバル レイアウト

国海証券の調査報告書は、AIによって短編ドラマの制作能力が向上し、コストが削減されると期待されていると述べた。海外短編ドラマの市場規模は保守的に約360億ドルと予測されている。

SkyReels は Kunlun Wanwei の海外レイアウト戦略の典型であり、その背後には All in AIGC 戦略的思考があります。

2020 年、Kunlun Wanwei の創設者である Zhou Yahui は AIGC の可能性に気づき、AI システムが新しいコンテンツの黄金時代を迎えるだろうと予測しました。

Kunlun Wanwei 会長兼 CEO の Fang Han 氏は、モバイル インターネット時代の機会を検討し、人気のあるコンテンツ製品のルールを要約し、グループ ベースが十分に大きいため、そのほとんどが「無料 + To C」モデルであることを発見しました。需要ポイントを特定することで、ユーザーの飛躍的な成長を実現できる。「AI UGC」プラットフォームの構築が Kunlun Worldwide の中核戦略となっており、コンテンツ作成者の 1% にサービスを提供し、99% のユーザーにサービスを提供できるようになります。コンテンツを消費します。

では、AIGC時代に流行した商品のイメージとはどのようなものなのでしょうか?

Fang Han 氏は、新しい端末側ハードウェアと AI に適応した新しい携帯電話が誕生すれば、AIGC は破壊的な成果を達成する可能性があると考えていますが、このプロセスにはまだ 3 ~ 5 年かかり、現在の中心的なタスクは予測を立てて機会を特定することです。 AIGCを活用してください。

モバイル インターネット時代のルールに従って、各国が独自のスーパー アプリを持ったり、スーパー アプリが同時に複数の国の領土を分割したりすることがあります。 Fang Han氏は考えた結果、まず欧州、米国、日本、韓国、中国など、ユーザーのコストパフォーマンスが高く受け入れられる国を占め、その後徐々に中東、東南アジア、南米に広げていくべきだと考えた。および他の地域。

Kunlun Wanwei の経営陣は、国の輪郭を描いた後、スーパー アプリを生み出す可能性のある垂直カテゴリーについて考え始めました。彼らは、「どうすれば巨大になれるのか?」と自問し続けました。前時代にまだ存在するコンテンツの巨人は、基本的には深い存在です。オンライン記事、短編劇、アニメーションなどの特定の垂直エンターテイメント産業に関係する場合、同じロジックが AIGC で繰り返されます。

現在、崑崙万偉は「AI UGC」戦略に対応して中国で体系的なレイアウトを実施し、大型モデル、AI検索、AI音楽などの分野で製品マトリックスを構築している。

その中でも、Kunlun Wanwei の大きなモデルは何度も反復されました。

2月に新バージョン発売文部科学省大規模言語モデル「Tiangong 2.0」と「Tiangong AI Intelligent Assistant」APPの新バージョン。

4月には、「Tiangong 3.0」ベースモデルと「Tiangong SkyMusic」音楽モデルが公開テストのために正式に開始されました。

6月、Kunlun Wanweiは、「Tiangong 3.0」の一部である2000億のスパース大規模モデルSkywork-MoEをオープンソース化した。オープンAITiangong Open Platform は、サポートされていない国や地域からの API トラフィックをブロックすると主張し、OpenAl API ユーザー向けに「ワンクリック移転プラン」を開始し、Tiangong 2.0 および Tiangong 3.0 モデルを含む 1 億 5,000 万トークンの API 呼び出しリソースを提供しました。

大規模なモデルを反復する一方で、Kunlun Wanwei は Fang Han の主要な焦点にも入ってきました。Kunlun Wanwei は OpenAI の SearchGPT よりも 1 年早く AI 検索を導入し、テキスト、写真、ビデオなどのセクションの検索をサポートするために今年検索製品をアップグレードしました。結果をマインド マップ、表、アウトラインなどの形式で表示でき、アウトラインとマインド マップを保存して PPT を直接生成できます。

製品レベルに加えて、Kunlun Wanweiya は国際大学と協力してオープンソースのデジタル エージェント研究開発ツールキット AgentStudio を開発し、エージェントの開発プロセス全体をカバーする包括的なプラットフォームを研究者と開発者に提供しました。

国内であろうと海外であろうと、各言語システムには独自の製品セットが必要であると、Kunlun Wanwei 氏は AIGC プラットフォームの世界的な配当期が近づいていると考えています。