ニュース

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

人工知能は想像を超えるスピードで発展しています。 GPT-4 がマルチモーダル技術を一般に公開して以来、マルチモーダル大型モデルは急速な開発段階に入り、純粋なモデルの研究開発から垂直分野での探査と応用へと徐々に移行し、あらゆる分野に深く統合されています。インターフェイス インタラクションの分野では、Google や Apple などの国際的なテクノロジー大手が、携帯電話 AI 革命を前進させる唯一の方法とみなされている大規模なマルチモーダル UI モデルの研究開発に投資してきました。

このような状況の中で、中国初の大規模UIモデルが誕生しました。 8月17日、国際エクスペリエンスデザインカンファレンス「IXDC2024」において、AI時代のデザインツールであるMotiffは、独自開発したUIマルチモーダルモデル「Motiff Model」を発表した。これは、UIデザインツール会社が開発した世界初の大規模モデルであり、中国のUIデザイン力が世界的に台頭していることを示している。

IXDC カンファレンスで、Motiff の副社長は中国初の大型 UI モデル - Motiff Model を紹介しました。

Motiff モデルは、UI を理解し、オープンな命令を実行する能力に優れています。業界で認められた 5 つの UI 機能ベンチマークでは、Motiff モデルのすべての指標が GPT-4o を上回り、Apple の Ferret UI も指標の点で Google の ScreenAI を上回り、Widget Captioning 指標は 161.77 に達し、SoTA を更新しました。 Ferret UIやScreenAIなどの既存のソリューションと比較して、Motiffの大規模モデルはコンテキストに基づいてインターフェース要素を柔軟に理解することができ、「デザインエキスパート」のレベルに達し、人間のUIインターフェースの理解と表現に最も近くなります。

権威ある UI インデックスのレビューでは、Motiff モデルのすべての指標が GPT-4o および Ferret UI を上回りました。

最も分かりやすいUIの大きなモデルであり、その表現は人間に非常に近く、将来のインターフェースインタラクション革命の基礎となります。

IXDC カンファレンスで、Motiff 副社長の Zhang Haoran 氏は、Motiff モデルについて詳しく紹介しました。このモデルには、ユーザー インターフェイスを理解する機能とインタラクティブなナビゲーションという 2 つの機能があり、インターフェイス インタラクション革命をリードすると期待されています。 「人間の創造は認知と理解から始まり、AI時代のUI創造もまた、大きなモデルからユーザーインターフェースを完全に理解することから始まります。」とZhang Haoran氏は述べました。

Motiff モデルはユーザー インターフェイスの理解に優れており、「デザインの専門家」に匹敵します。インターフェイス内のすべての画像、アイコン、テキスト、および 40 を超えるきめ細かい UI コンポーネントを識別できるだけでなく、インターフェイス上のさまざまな要素の地域座標を正確にマークすることもできます。さらに、ユーザー インターフェイスに関するさまざまな質問に答え、インターフェイス情報に基づいて機能を推論し、インターフェイスのコンテンツを詳細に説明することができます。

GPT-4o、Ferret UI、ScreenAI などの大規模モデルと比較して、Motiff 大型モデルはインターフェイス分析機能においても大きな利点があります。たとえば、APP Store アプリケーション インターフェイスでは、Motiff モデルは UI デザインの観点からページをトップ ナビゲーション バーやアプリケーション情報モジュールなどの複数のモジュールに分割し、各モジュールの機能とレイアウトを詳細に分析することができます。デザインの提案を提供したり、UI デザインのプロトタイプを自動生成したりするため。 Motiff はインターフェイス分析機能で業界をリードしており、UI デザインを最もよく理解するマルチモーダル モデルです。

Motiff モデルは、UI インターフェイスに関するさまざまな質問に答えることができます

Motiff モデルは、理解力と表現力の点でも人間に最も近いモデルです。従来のソリューション（Ferret UIやScreenAIなど）では、コンテキストに基づいてアイコンの意味を理解することが困難でしたが、Motiffの大規模モデルは手動アノテーションなどの方法で大量の高品質なUIフィールドデータを収集し、複数のアイコンを理解して指摘することができました。同じアイコンを異なるインターフェイスで使用することで、説明の正確性と文脈の関連性が大幅に向上します。

図 1 のデータは、ハート型のアイコンを「コレクション」ではなく「ハート」と誤解した Google ScreenAI によって生成されました。図 2、3、および 4 のデータは、正確に説明できる Motiff モデルによって生成されました。インターフェース情報に基づいてアイコンの意味を決定します。

Motiff モデルには対話型ナビゲーション機能もあり、ユーザーのニーズに応じて操作手順を促し、許可を得た後にユーザーに代わって関連する操作を完了できます。これは、将来のインターフェイス インタラクション革命の基礎を築きます。将来的には、ユーザーは画面を手動でクリックする必要がなく、音声または画像入力だけでデバイスを操作できるようになる可能性があります。Siri などのモバイル アシスタントは、あらゆるアプリへの新しい入り口となるでしょう。これにより、ソフトウェア アプリケーションの新しいパラダイムが到来し、それに応じてインターフェイス インタラクションの新しい時代も開かれることになります。

さらに、Motiff 大型モデルでもエラー率を 1 桁以内に制御することに成功しました。業界の意見では、エラー率の急激な低下は、AIが補助ツールから独立して作業を完了できる「技術的特異点」に進歩したことを示すものであると考えられています。現在、大規模モデルが直面している主要な問題の 1 つは高いエラー率です。たとえば、GPT-4 では複数のインジケーターでエラー率が 30% ～ 40% であり、UI 分野ではエラー率が 70% を超えることもあります。対照的に、Motiff ラージ モデルではエラー率が 15% 未満に減少し、個々のインジケーターのエラー率はわずか 7% です。

なぜAI応用企業は世界をリードする大型モデルを独自に開発できるのでしょうか？ Zhang Haoran氏はカンファレンスで、これは「より良い製品」の継続的な追求から来ていると述べた。 「AI製品のリーダーとして、Motiffはアプリケーションシナリオに基づいて技術的なボトルネックを打破し、AI機能の要件を継続的に改善することに尽力している」と同氏は述べた。

UI 分野で GPT-4o や Apple の Ferret UI などの主要な国際モデルを「倒す」ことができる Motiff の能力は、長期にわたる技術蓄積からも恩恵を受けています。 Motiff は、2021 年の設立以来、インターフェイスのインタラクションとデザインに注力してきました。その親会社である源福道グループは、2014 年に AI テクノロジーの最先端の探求に焦点を当てた AI ラボを設立しました。2018 年、源福道グループは有名な機械読み取り技術で優勝しました。 MSMAARCO は世界第 1 位にランクされ、当時の機械読解能力は Baidu や Microsoft を上回っていました。

AI の効率向上 + 生成により、デザイナーに最適なアシスタントを作成し、ソフトウェア開発ワークフローを最適化します

Motiff の大型モデルのリリースがインターフェイス設計の分野における GPT の瞬間を示すものであることは疑いの余地がありません。 UI デザインには、ビジュアル要素の正確な処理と、ユーザー インタラクション ロジックの深い理解が必要です。Motiff モデルは、デザイン ツールの効率と生成機能を大幅に向上させます。

Motiff の AI 生成 UI 機能では、ユーザーはコマンドを入力するだけで、Motiff は 30 秒以内に 2 つのバージョンのデザイン ドラフトを生成できます。 30 人以上の業界専門家による最近のブラインドレビューによると、Motiff によって生成された設計ドラフトの両方のバージョンは、以前の主要な AI 生成 UI ツール Galileo AI よりも優れています。この機能のリリース後、この利点は Motiff の大型モデルの UI プロフェッショナル機能に直接由来しています。 AI生成UI機能は8月17日に全世界のユーザーに公開されたとのこと。Motiffアカウントを登録するだけで無料で体験できる。

また、AI設計システム機能における部品識別の精度も大幅に向上しました。大規模なモデルのサポートにより、デザイナーは以前は少なくとも数週間かかっていた作業をわずか数分で行うことができます。 AIコピー機能は、デザイン原稿の画像やコピーライティングを97％以上の精度で認識できます。

「Motiffは大規模モデルの機能を中堅・大企業に開放し、顧客と協力してAI時代における新しいインターフェース生産関係を構築する計画だ」とZhang Haoran氏は会議でMotiffの大規模モデルがソフトウェア開発の最適化に役立つと指摘した。ワークフローを改善し、既存のインターフェースの制作プロセスを効果的に短縮します。

Motiff は、これまでインターフェース設計業界で多くの「初」を生み出してきただけでなく、中国で独自に開発したグラフィック レンダリング エンジンを開発した最初のインターフェース設計ソフトウェアでもあります。 100万レイヤーを1枚のキャンバスに表現した世界を、スムーズに編集できる高機能な製品です。 Motiffは海外のソーシャルメディアで「AI版Figma」として知られており、生産性を100倍以上向上させながら、価格はFigmaよりも80％以上安い、有名な製品出版プラットフォームであるProduct Huntに掲載されています。 7月の人気商品デイリーリストとウィークリーリストの第1位。

（海外のソーシャルプラットフォームではMotiffとFigmaを比較する投稿が多数あります。Motiffはデザイナーが知っておくべきAIツールと言えます。）