ニュース

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

正式な会社名：北京雲科技術有限公司

資金調達ラウンド: エンジェル + ラウンド

製品/サービス：aiが生成する4dアニメーションプラットフォーム「aiuni（アイユニ）」

創設者: hu yating (entrepreneurship star camp 第 25 号)

誕生年：2000年

学歴: 北京大学コンピュータサイエンス学部

著者 | 馬文平

編集者丨劉恒濤

画像提供：あいうに

2000年代生まれの胡雅廷氏は、大学卒業後に起業する道を選んだ。胡雅廷は美しい容姿とファッショナブルな服装をしており、私たちの起業家のイメージを一新します。

北京大学のコンピューターサイエンス学部を卒業した胡雅廷氏は、グーグル、アリババ、バイトダンスでアルゴリズムエンジニアとして働いており、情報オリンピックにも参加し、国家金メダルと最優秀女性アスリート賞を受賞した。大手工場でのインターンシップ中に、インターネットのトラフィックがピークに達していることに気づきましたが、3d はコンテンツの次元を高めるものであるため、大学卒業後に起業することを決意しました。

hu yating によって設立された aiuni は、ai によって生成された 4d アニメーションの ip プラットフォームです。今年 6 月に、aiuniai の 3d 生成モデル unique3d が github や huggingface などのプラットフォームでオープンソース化され、すぐに huggingface の人気モデル ランキングにランクインしました。 「最も人気のあるモデル」にノミネートされ、「最高の写真から 3d モデルを生成」が多くの開発者から賞賛されました。

unique3d は、4090 グラフィックス カード上で、シングルビュー画像から高忠実度で多様なテクスチャの 3d メッシュを約 30 秒で生成できます。多くのネチズンがソーシャル メディアで生成結果を共有し、このモデルが忠実度、一貫性、効率の点で非常に高いレベルに達していることを賞賛しました。わずか数か月で、unique3d のコピー数は数百万に達しました。

この夏、hu yating は、star camp の最先端 ai スター加速プログラムである entrepreneurship star camp の第 25 段階に参加しました。

加速後、彼女は今月19日から20日まで開催される2024demo chinaのステージに登壇し、さまざまな分野の著名な投資家、業界専門家、業界パートナーに製品や商用アプリケーションについての考えを先進的な手法で披露する予定です。やり方。

3d市場を狙う

3d テクノロジーは、インターネット世界に現実世界をマッピングする重要な手段として、ゲーム開発、映画制作から製品デザイン、電子商取引のレンダリング、建築計画に至るまで、さまざまな分野に浸透しています。インターネット業界全体。

アプリケーションのシナリオに応じて、3d モデリングのコストも異なります。モデルが詳細になればなるほど、制作プロセスが煩雑になり、制作サイクルが長くなり、各 3d モデルの作成コストが高くなります。千元、あるいは数万元。

現在、アニメーション、映画、テレビ、ゲーム、その他のエンターテインメント産業が 3d モデリングの主な応用分野です。ゲーム業界では、3d エンジンの継続的な開発により、3d ゲームが徐々に市場の主流になってきており、アニメーション映画やテレビ業界では、壮大なシーンのみを作成するために 3d テクノロジーを使用する 3d モデリングの需要が非常に高くなっています。グリーンバック技術と重要な俳優が必要なため、ドラマの人件費を削減できます。

tobaoが発表したデータによると、中国の3dモデリング市場規模は2021年に103億4000万元に達し、2026年までに市場規模は195億7000万元に達すると予想されている。 2021 年の世界の 3d アニメーション市場規模は約 1,640 億米ドルと推定されており、同市場は 11.5% の年平均成長率 (cagr) で成長し、2026 年までに約 3,100 億米ドルに達すると予想されています。

アイユニチームはこの市場をターゲットにしています。

hu yating 氏に加えて、同社の技術パートナーである wu kailu 氏も、情報学オリンピックに参加したときに hu yating 氏と出会いました。彼は清華大学の yao クラスを卒業し、学際情報研究所で 3d 生成と nerf の研究に従事していました。清華大学では、学部時代に多くの論文を発表し、fsd (テキストから 3 次元へのフロー分別蒸留) と memsr (超解像度モデルの効率的なトレーニング) を革新的に提案しました。彼はかつて情報オリンピックのナショナルトレーニングチームに参加しており、競技中に知り合った。同社の運営パートナーである任金山氏は、元リベラルアーツチャンピオンであり、北京大学光華経営学院を卒業し、シカゴ大学で芸術理論の修士号を取得しています。

aiuni は angel+ ラウンドを含む 3 ラウンドの資金調達に成功しました。

垂直モデルを作成して技術的優位性を形成する

製品を作成する過程で、hu yating は、ほぼすべてのアニメーションやゲームがキャラクターを中心に展開するため、あらゆる種類の 3d アセットの中で最も価値のあるものはキャラクターであることに気づきました。さらに、多くのユーザーは古典的なキャラクターを再作成したり、実現したいオリジナルのキャラクターを持っており、オリジナリティへの要求が比較的大きいため、この部分は aigc で生成するのが適していると hu yating 氏は考えています。

「これらのユーザーは、3d キャラクターを便利かつ安価に生成したいと考えていますが、3d モデリングのコストは高く、ほとんどの場合、アニメーション、映画、テレビなどの b サイド スタジオでのみ使用できます。」

aiを活用して3dモデリングの敷居を極限まで下げると、これまで3dコンテンツを制作できなかったユーザーも自主的に新たな3d作品を制作できるようになる。

「現在私たちが見ているビデオ コンテンツのほとんどはリアルタイムで撮影されています。将来的には、3d モデルに基づくアニメーションや特殊効果のコンテンツが短いビデオになり、ビデオの量と創造性が大幅に増加するでしょう。」言った。

他の画像に比べて文字の生成が難しいです。 hu yating 氏は次のように述べています。「3d モデルは比較的プロフェッショナルなシーンであり、aiuni は次にキャラクター生成、アニメーション生成、およびビデオ合成を行って、デジタル コンテンツ クリエーター向けのサービスを提供する予定です。これらはすべて、モデルの精度に対してより高い要件を提示します。人骨や服飾品など、大量のディテールとデータが必要であり、同時に標準的なモデルのポーズ (ポーズ)、マテリアル、アクションをサポートする必要があるため、幾何学的なデータ処理は大きな課題となります。データのより詳細な処理も必要になります。

aiuni のソリューションは、アルゴリズム アーキテクチャの革新によって sota レベルの精度を達成することです。スコア蒸留サンプリング (sds) などの以前の方法と比較して、aiuni は、長期的な最適化、幾何学的品質の低下、および不一致を必要とするモデル生成の問題を解決します。同時に、チームは、マルチビュー拡散モデルに基づく方法が局所的な不一致と生成解像度によって制限され、微細なテクスチャや複雑な幾何学的ディテールの生成が困難になるという問題も初めて最適化しました。は 256 から 2k/8k レベルに増加し、モデルの精度と品質に対するユーザーの要件を満たしました。

unique3d の論文によると、このソリューションは、マルチビュー拡散モデルと対応する法線拡散モデル、マルチレベルのアップグレード プロセス、および瞬時の一貫性のあるメッシュ再構築アルゴリズム isomer を通じて、より優れた 3d 結果を生み出すことができます。実験では、aiuni のモデルを instantmesh、crm、openlrm と比較し、他のモデルよりも大幅に優れた、より正確なジオメトリと詳細なテクスチャを生成することができました。

「unique3d には生成性と汎用性があり、実際にレンダリング エンジンで使用して、ユーザーにとって非常に価値のあるコンテンツを作成できます。競合製品と比較した unique3d の利点は、cg グラフィックスと ai による差別化可能なレンダリング 3d が可能であることだと hu yating 氏は考えています。」よく組み合わされています。

大手メーカーの一般化された大規模モデルと比較して、aiuni はより多くのモダリティを作成し、より垂直的であると hu yating 氏は考えています。「実際、キャラクター設定モデル、3d モデル、自動バインディングやアクションの生成など、複数の異なるモダリティを備えた垂直モデルがあります。データやレンダリング合成モデルなどを垂直方向につなぎ合わせますが、これは純粋なコンピューティング能力やデータの問題ではなく、アルゴリズム アーキテクチャに何らかの革新が必要です。」

大規模なビデオモデルの一般化は比較的強力ですが、キャラクターの一貫性、アクションの制御性、生成トレーニングコスト、推論効率を制御するのは困難です。

グローバルipクリエイターのための3dから4dへ

aiuni.ai web サイトには現在、3d ワールドと 3d モデルをそれぞれ生成できる 2 つのオンライン機能があります。 hu yating 氏は、aiuni が次にリリースする機能は、3d キャラクターの生成、キャラクター アニメーションの生成、現実のビデオを 3d キャラクターに置き換える、キャラクター アニメーションを実際に撮影したビデオに合成するなど、アニメーション ビデオ モードを中心に展開されることを明らかにしました。これは、アイユニ チームが取り組んでいる方向、つまりダイナミック 3d コンテンツ (つまり 4d) でもあります。

アイユニ チームは、aigc マルチモダリティの開発トレンドは 2d の生成から 3d モデルの生成、そして最終的には 4d コンテンツの生成に至ると考えています。テキストから 2d 画像を生成することは始まりにすぎません。2d 画像に空間次元を与えることで 3d モデルが作成されます。これは、将来の空間コンピューティングの基本的なキャリアでもあります。彼らは、将来的には、この機能が 3d モデルに時間次元を与え、高頻度のインタラクティブな 4d コンテンツになることを期待しています。

「3d キャラクター モデルを生成した後、モデルの動きを変更したり、モデルをユーザーと対話させたりするなど、モデルを 4d に拡張し続けることができます。また、ビデオ レンダリングや音声対話の機能も搭載できます。モデルはダイナミックなコンテンツを作成し続けることができます。」 hu yating 氏は、自然な音声から写真、3d モデルやダイナミックなビデオに至るまでのプロセスを完了するには、ワークフロー全体で最も重要なことは ai テクノロジーとグラフィックス cg アートの組み合わせであると述べました。

この期待に基づいて、アイユニは 4 月に 3d モデル生成の社内ベータ版を初めて開始し、一部のチャネルを通じて招待コードを発行しました。同社は今年10月に、キャラクターアニメーションのipクリエイターユーザーを対象とした新たなパブリックベータ版を開始する予定だ。

「ユーザーはこれまで 3d プロフェッショナル ツールを使用したことがなく、単にゲームやアニメーションの acgn 愛好家である可能性があります。私たちのプラットフォームを通じて、お気に入りの ip キャラクターのオリジナルまたはコンテンツ作品を作成することもでき、プラットフォーム上でアニメーションをエクスポートすることもできます」フー・イェティン氏は、新しいパブリックベータ版はキャラクター生成とアニメーション生成をサポートしており、オーラルビデオやダンスビデオなどのシーンに適していると述べた。

ビジネスモデルに関して、アイユニの計画は、プロのクリエイターとip愛好家向けにさまざまな課金モデルを立ち上げることです。 3d プロのユーザーは 3d オリジナル データを必要とし、プラットフォームは生産性を向上させることができるため、新しいメディア ip クリエイターの支払い意欲が高くなります。トークン料金は主に生成時間とレンダリングの精度に基づいて請求されます。他のタイプのユーザーにとって、クリエイター エコノミーはより多様です。たとえば、キャラクターにパーソナライズされた音声モデルを追加したい、または 3d プリント モデルを使用して他の ip 派生物を作成したいと考えているユーザーもいます。

hu yating氏は、aiuniは将来的にipによって作成される新しいメディアシナリオを志向し、aiテクノロジーとcgアートを組み合わせたより多くのマルチモーダルアルゴリズムを徐々に立ち上げるだろうと述べた。 aiuniaiは海外ユーザーが7割を占め、グローバルクリエイター向けのプラットフォームとして運営していきます。 hu yating 氏は、3d/4d モダリティはまだ新しいものであり、中国人はより多くのことを行っており、同社には海外に直接の競合製品はない、と述べた。

「私たちの使命は、新しいメディアのデジタル コンテンツ クリエーターを対象とした、ai 生成の 4d アニメーション用の ip プラットフォームを作成することです。3d 生成は私たちの最初のステップです。この新しいモードでは無限のクリエイティブ スペースがあり、コンテンツを組み合わせる aigc も信じています」次元性を備えたこの作品は、新世代の知財創造に無限の活力を与えるでしょう」と胡雅廷氏は語った。

ai テクノロジーによってもたらされた産業パラダイム革命により、hu yating のような多くの若い起業家が夢を実現することができました。