ニュース

ホログラフィックarグラスが登場!ザッカーバーグ氏は現場で箱を開け、ジェンスン・ファン氏も最初に体験したうちの一人で、llama 3.2の大型モデルがリリースされました。

2024-09-26

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

著者 | チェン・チェンゼr0

編集 | シン・ユアン

zhidongxi は 9 月 26 日、北京時間の今日午前 1 時 15 分に、毎年恒例の「mr circle spring festival gala」メタコネクト 2024 カンファレンスが正式に開幕したと報じました。

meta ceoのマーク・ザッカーバーグ氏が黒いtシャツを着て壇上に上がり、本格的にニュースを発表したクエスト3sヘッドディスプレイ、ラマ 3.2大型モデル、レイバンのスマートグラスホログラフィック ar メガネ新製品を待っています。

ザッカーバーグ氏が最初に発表した新しいハードウェア製品は、クエスト3s、衝撃価格$299.99(約 2,110 人民元に相当)。

meta初の民生用オールインワンmrマシンquest 3と比べると若干性能は劣りますが、開始価格は200ドル割引、apple vision proとほぼ同等1/11、まさにコストパフォーマンスの高いマシンです。 ! !

大型モデルも新登場!メタマルチモーダルモデルラマ 3.290b および 11b パラメータを含むリリース視覚的な大規模言語モデル、1b および 3b パラメーターと同様に軽量のプレーンテキストモデル

ラマ 3.2 では、メタai音声インタラクションをサポートし、さまざまなサウンドオプション(一部の有名人の声を含む)を備えた新しいマルチモーダル機能を開始しました。ザッカーバーグ氏は、メタ ai を使ったライブ音声チャットを実演しましたが、これは非常にスムーズでした。

メタがこれまでで最も先進的だと呼ぶ ar メガネもあります -ホログラフィック ar メガネ"オリオン"

nvidiaの創設者兼最高経営責任者(ceo)のジェンスン・フアン氏はすでにそれを試している。

01.

quest 3s: 手頃な価格のバージョンで、価格は 300 ドルです。

性能はクエスト3とほぼ同じ

まずはquestデバイスの廉価版が登場!

直接メタクエスト3s価格は200米ドル(約1,406人民元相当)安くなり、性能はquest 3とほぼ同等です。

meta quest 3s 128gb 版の価格は$299.99(約 2,110 人民元に相当)、256gb バージョンの価格は$399.99(約 rmb 2,813 に相当)。 512gb quest 3 は$499.99(約 3,516 rmb に相当)。

どちらのヘッドセットも同じプロセッサを使用しています。クアルコム snapdragon xr2 gen 2 チップ。大幅な価格低下の鍵は、quest 3s がパンケーキ レンズを次のレンズに置き換えたことです。無限レンズ

ライブデモから判断すると、4k ディスプレイを搭載した quest 3s は非常に鮮明なディスプレイを備えており、dolby atmos サラウンドもサポートしています。

メタ再構築された horizo​​n os空間コンピューティングを実現するために、ユーザーが youtube、facebook、instagram などの基本的な 2d アプリケーションを使用できるようにサポートします。

メタが追加されました空間オーディオ、改善されましたパススルーコントラストと色により、画像のプレゼンテーションがより現実的で没入感のあるものになります。

ザッカーバーグはメタが協力していると発表マイクロソフト協力する、利用するwindows 11 パソコンシームレスな仮想デスクトップ体験を実現します。

meta はすでにマルチスクリーンのサポートと、ディスプレイ上で起こっていることを直接操作する機能を提供しています。たとえば、ユーザーはノートブックのインターフェイスを quest デバイスに直接ドラッグできます。

より現実的なメタバース環境を作成するために、meta がリリースされました。ハイパースケープ、ユーザーは自分のいる部屋を携帯電話でスキャンし、ヘッドセットを装着するだけで、いつでもその部屋を「再現」できます。

このヘッドマウント ディスプレイ デバイスを使用すると、最前列に座ってコンサートを鑑賞したり、ホーム シアターに座って高解像度の大ヒット作を鑑賞したり、エクササイズなどを楽しむことができます。

さらに、quest 3s は、meta の何千ものアプリや完全なゲーム ライブラリに加え、batman: arkham shadow などの今後の quest 3 および 3s 専用ゲームとも互換性があります。

xr を初めて使用する人、または quest および quest 2 デバイスの値下げを待っていた人にとっては、quest 3s の方が良い選択かもしれません。

02.

llama 3.2: ビジュアルモデルが gpt-4o mini に追いつき、1bエンドサイドモデルはgemmaと同等

オープンソース ai に関して、meta は新しいマルチモーダル大規模モデルをリリースしましたラマ 3.2

llama 3.2 には、90b および 11b パラメーター仕様を持つ 2 つのビジュアルな大規模言語モデルと、デバイス上でローカルに実行できる 1b および 3b の軽量プレーン テキスト モデル (事前トレーニングおよび命令調整バージョンを含む) があります。

ダウンロードアドレス:https://www.llama.com/

1b および 3b モデルのサポート128kトークンコンテキストに応じて、qualcomm および mediatek ハードウェアとターゲットに適応しますアームプロセッサ最適化されました。

3bモデル指示に従う、要約、高速書き換え、ツールの使用などのタスクにおいて、gemma 2 2.6b および phi 3.5-mini モデルよりも優れたパフォーマンスを発揮します。1bモデル性能はジェマに匹敵する。

90b および 11b ビジュアル モデルこれは、対応するテキスト モデルを直接置き換えるものであり、画像理解タスクにおけるパフォーマンスは、claude 3 haiku や gpt-4o mini などのクローズド モデルよりも優れています。

たとえば、昨年の売上高が最も高かったのはどの月であるかを企業に尋ねた場合、llama 3.2 は利用可能なグラフに基づいて推論し、すぐに答えを提供します。

また、地図を使用して推論し、地図上にマークされた特定の経路の距離などの質問に答えることもできます。

ビジュアル モデルは、画像から詳細を抽出し、シーンを理解し、画像のキャプションとして 1 ~ 2 文を生成することで、ストーリーを伝えるのにも役立ちます。

他のオープン マルチモーダル モデルとは異なり、事前トレーニングされたモデルと調整されたモデルはどちらも、torchtune を使用してカスタム アプリケーション向けに微調整でき、torchchat を使用してローカルにデプロイできます。

11b および 90b パラメーターを備えたマルチモーダル モデルが必要です画像推論をサポートする新しいモデル アーキテクチャ

meta のトレーニング プロセスは複数の段階で構成されており、事前トレーニングされた llama 3.1 テキスト モデルから始まり、最初に画像アダプターとエンコーダーを追加し、次に大規模なノイズでデータを事前トレーニングし、次に中規模の高品質のデータで事前トレーニングします。ドメインと知識拡張データのトレーニング。

ポストトレーニングでは、meta はテキスト モデルと同様の方法を使用し、教師あり微調整、拒否サンプリング、直接優先最適化の観点から複数ラウンドの調整を実行します。その結果、画像とテキストの両方の手がかりを受け取り、その 2 つの組み合わせを深く理解して推論できる一連のモデルが生まれました。

1b および 3b パラメータを持つ軽量モデルの場合、meta は強力な教師モデルを使用して、より優れたパフォーマンスの小型モデルを作成し、デバイスに効率的に適応できる最初の高性能軽量 llama モデルの 1 つとなります。

meta は、llama 3.1 8b の構造化プルーニングの 1 回限りの使用を利用して、llama の既存のモデルのサイズを削減しながら、可能な限り多くの知識とパフォーマンスを復元します。

トレーニング後の研究では、研究者らは llama 3.1 と同様のアプローチを使用し、事前トレーニングされたモデルに基づいて調整を数回実行することで最終的なチャット モデルを生成しました。

meta は、最初の公式 llama スタック リリースを共有します。これにより、開発者が単一ノード、ローカル、クラウド、デバイス側などのさまざまな環境で llama モデルを使用する方法が大幅に簡素化され、検索拡張生成 (rag) と統合セキュリティ ツールのサポートによるターンキー展開が可能になります。アプリケーションの。

03.

メタ ai: さまざまな有名人の声から選択し、

pピクチャとリアルタイム翻訳がさらに便利に

ラマ 3.2 では、メタaiは発言権を持つ

あなたの声を使って meta ai に話しかけ、質問に答えたり、笑わせたりするジョークを聞かせましょう。 meta では、おなじみの ai 音声も多数追加されています。イギリスの女優ジュディ・デンチの声など。