中国初の大型UIモデル登場！ Motiff の大規模モデルはデザイナーにとって最適なアシスタントを作成し、UI デザインのワークフローを最適化します

人工知能の発展のスピードはあなたの想像を超えているかもしれません。 GPT-4 がマルチモーダル技術を一般に公開して以来、マルチモーダル大型モデルは急速な開発段階に入り、純粋なモデルの研究開発から垂直分野での探査と応用へと徐々に移行し、あらゆる分野に深く統合されています。インターフェイス インタラクションの分野では、Google や Apple などの国際的なテクノロジー大手が、携帯電話 AI 革命を前進させる唯一の方法とみなされている大規模なマルチモーダル UI モデルの研究開発に投資してきました。

この文脈で、中国初の大型 UI モデルが誕生しました。 8月17日、国際エクスペリエンスデザインカンファレンス「IXDC2024」において、AI時代のデザインツールであるMotiffは、独自開発したUIマルチモーダルモデル「Motiff Model」を発表した。これは、UIデザインツール会社が開発した世界初の大規模モデルであり、中国のUIデザイン力が世界的に台頭していることを示している。

(IXDC カンファレンスで、Motiff の副社長は中国初の大規模 UI モデルである Motiff モデルを紹介しました)

Motiff モデルは、優れた UI 理解機能とオープン命令を実行する機能を備えています。業界で認められた 5 つの UI 機能ベンチマークでは、Motiff モデルのすべての指標が GPT-4o を上回り、Apple の Ferret UI も指標の点で Google の ScreenAI を上回り、Widget Captioning 指標は 161.77 に達し、SoTA を更新しました。 Ferret UIやScreenAIなどの既存のソリューションと比較して、Motiffの大規模モデルはコンテキストに基づいてインターフェース要素を柔軟に理解することができ、「デザインエキスパート」のレベルに達し、人間のUIインターフェースの理解と表現に最も近くなります。

(権威あるUIインデックスレビューでは、Motiffの大規模モデルのすべての指標がGPT-4oとFerret UIを上回っています)

UIを最もよく理解する大規模モデル、その表現は人間に非常に近く、将来のインターフェイス インタラクション革命のコーナーストーンとなる

IXDC カンファレンスで、Motiff 副社長の Zhang Haoran 氏は、ユーザー インターフェイスとインタラクティブ ナビゲーションを理解する 2 つの機能を備え、インターフェイス インタラクション革命をリードすると期待されている Motiff モデルを詳しく紹介しました。 。 「人間の創造は認知と理解から始まり、AI時代のUI創造もまた、大きなモデルからユーザーインターフェースを完全に理解することから始まります。」とZhang Haoran氏は述べました。

Motiff の素晴らしいモックアップは、ユーザー インターフェイスを理解する上で「デザインの専門家」と同じくらい優れています。インターフェイス内のすべての画像、アイコン、テキスト、および 40 を超えるきめ細かい UI コンポーネントを識別できるだけでなく、インターフェイス上のさまざまな要素の地域座標を正確にマークすることもできます。さらに、ユーザー インターフェイスに関するさまざまな質問に答え、インターフェイス情報に基づいて機能を推論し、インターフェイスのコンテンツを詳細に説明することができます。

GPT-4o、Ferret UI、ScreenAI などの大規模モデルと比較して、Motiff 大型モデルはインターフェイス分析機能においても大きな利点があります。たとえば、APP Store アプリケーション インターフェイスでは、Motiff モデルは UI デザインの観点からページをトップ ナビゲーション バーやアプリケーション情報モジュールなどの複数のモジュールに分割し、各モジュールの機能とレイアウトを詳細に分析することができます。デザインの提案を提供したり、UI デザインのプロトタイプを自動生成したりするため。 Motiff はインターフェイス分析機能で業界をリードしており、UI デザインを最もよく理解するマルチモーダル モデルです。

(Motiff モデルは、UI インターフェースに関するさまざまな質問に答えることができます)

Motiff モデルは、理解力と表現能力の点でも人間に最も近いモデルです。従来のソリューション（Ferret UIやScreenAIなど）では、コンテキストに基づいてアイコンの意味を理解することが困難でしたが、Motiffの大規模モデルは手動アノテーションなどの方法で大量の高品質なUIフィールドデータを収集し、複数のアイコンを理解して指摘することができました。同じアイコンを異なるインターフェイスで使用することで、説明の正確性と文脈の関連性が大幅に向上します。

(図 1 のデータは、ハート型のアイコンを「コレクション」ではなく「ハート」と誤解した Google ScreenAI によって生成されました。図 2、3、および 4 のデータは、Motiff によって生成されました。インターフェイス情報と組み合わせることができるモデル )

アイコンの意味を正確に説明します。

Motiff juga mempunyai keupayaan navigasi interaktif, yang boleh menggesa langkah pengendalian mengikut keperluan pengguna, dan menyelesaikan operasi yang berkaitan bagi pihak pengguna selepas mendapat kebenaran. Ini meletakkan asas untuk revolusi interaksi antara muka masa hadapan. Pada masa hadapan, pengguna tidak perlu mengklik pada skrin secara manual, tetapi hanya memerlukan input suara atau imej untuk mengendalikan peranti mudah alih seperti Siri boleh menjadi pintu masuk baharu kepada semua telefon pintar dan komputer sebenar ini, membawa kepada paradigma baharu aplikasi perisian dan era baharu interaksi antara muka juga akan dibuka dengan sewajarnya.

Selain itu, model besar Motiff Miao juga berjaya mengawal kadar ralat dalam satu digit. Pendapat industri percaya bahawa penurunan mendadak dalam kadar ralat menandakan kemajuan AI daripada alat bantu kepada "ketunggalan teknikal" di mana ia boleh menyelesaikan kerja secara bebas. Pada masa ini, salah satu masalah teras yang dihadapi oleh model besar ialah kadar ralat yang tinggi Contohnya, GPT-4 mempunyai kadar ralat 30% hingga 40% pada berbilang penunjuk, dan kadar ralat malah melebihi 70% dalam medan UI. Sebaliknya, model besar Motiff mengurangkan kadar ralat kepada kurang daripada 15%, dan kadar ralat penunjuk individu hanya 7%.

Mengapa syarikat aplikasi AI boleh membangunkan model besar yang terkemuka di dunia secara bebas? Zhang Haoran berkata pada persidangan itu bahawa ini berpunca daripada usaha berterusan untuk "produk yang lebih baik". "Sebagai peneraju dalam produk AI, Motiff komited untuk menerobos kesesakan teknikal berdasarkan senario aplikasi dan terus menambah baik keperluan untuk keupayaan AI," katanya.

Keupayaan Motiff untuk "mengalahkan" model besar terkemuka di peringkat antarabangsa seperti GPT-4o dan Apple's Ferret UI dalam bidang UI juga mendapat manfaat daripada pengumpulan teknologi jangka panjangnya. Motiff telah menumpukan pada interaksi antara muka dan reka bentuk sejak penubuhannya pada 2021. Syarikat induknya, Yuanfudao Group, menubuhkan Makmal AI yang memfokuskan pada penerokaan teknologi AI yang canggih pada 2014. Pada 2018, Kumpulan Yuanfudao memenangi bacaan mesin yang terkenal persaingan MSMAARCO menduduki tempat pertama di dunia, keupayaan kefahaman membaca mesinnya pada masa itu telah mengatasi Baidu dan Microsoft.

AITingkatkan kecekapan + jana untuk mencipta pembantu terbaik untuk pereka dan mengoptimumkan aliran kerja pembangunan perisian

Tidak dinafikan bahawa keluaran model Motiff menandakan detik GPT dalam bidang reka bentuk antara muka. Reka bentuk UI memerlukan pemprosesan elemen visual yang tepat dan pemahaman yang mendalam tentang logik interaksi pengguna Model Motiff meningkatkan kecekapan dan keupayaan penjanaan alatan reka bentuk.

Dalam fungsi UI yang dijana AI Motiff, pengguna hanya perlu memasukkan arahan, dan dalam masa kurang daripada 30 saat, Motiff boleh menjana dua versi draf reka bentuk. Menurut ulasan buta baru-baru ini oleh lebih daripada 30 profesional industri, kedua-dua versi draf reka bentuk yang dijana oleh Motiff adalah lebih baik daripada alat UI generasi AI terkemuka sebelumnya, Galileo AI. Selepas keluaran ciri ini, ia dengan cepat menjadi peneraju dalam pasaran Kelebihan ini secara langsung diperoleh daripada keupayaan profesional UI model besar Motiff. Dilaporkan bahawa fungsi UI yang dijana AI telah dibuka kepada pengguna global pada 17 Ogos. Anda hanya perlu mendaftar akaun Motiff untuk mengalaminya secara percuma.

(Masukkan perkataan gesaan yang sama "Jana laman utama penstriman video yang serupa dengan hulu". Ketepatan dan kekayaan kesan yang dijana Motiff lebih kuat daripada Galileo AI.)

Selain itu, pengecaman komponen dalam fungsi sistem reka bentuk AI Ketepatan juga telah dipertingkatkan dengan ketara. Dengan sokongan model besar, pereka boleh melakukan kerja dalam beberapa minit sahaja yang biasanya mengambil masa sekurang-kurangnya minggu. Fungsi penyalinan AI boleh mengecam imej dan penulisan salinan dalam draf reka bentuk dengan ketepatan lebih 97%.

"Motiff merancang untuk membuka keupayaan modelnya yang besar kepada perusahaan sederhana dan besar, dan bekerjasama dengan pelanggan untuk mewujudkan hubungan pengeluaran antara muka baharu dalam era AI, Zhang Haoran menunjukkan pada mesyuarat itu bahawa model besar Motiff akan membantu mengoptimumkan." aliran kerja pembangunan perisian, memendekkan proses pengeluaran antara muka sedia ada dengan berkesan.

Motiff telah mencipta banyak "pertama" dalam industri reka bentuk antara muka sebelum ini. Ia bukan sahaja merintis pelbagai fungsi AI, tetapi juga merupakan perisian reka bentuk antara muka pertama di China untuk membangunkan enjin pemaparan grafik yang dibangunkan sendiri perisian reka bentuk di dunia dengan kanvas tunggal 1 juta Produk berprestasi tinggi yang membolehkan penyuntingan lancar di bawah lapisan. Motiff dikenali sebagai "Figma versi AI" di media sosial luar negara Walaupun meningkatkan produktiviti sebanyak lebih daripada 100 kali, harganya lebih 80% lebih rendah daripada Figma Ia telah disenaraikan di platform penerbitan produk terkenal Product Hunt Senarai harian produk paling popular bulan Julai dan senarai mingguan Nombor satu dalam senarai.

(Terdapat sejumlah besar siaran yang membandingkan Motiff dan Figma di platform sosial luar negara. Motiff dianggap sebagai alat AI yang perlu diketahui oleh pereka bentuk.)

以上が中国初の大型UIモデル登場！ Motiff の大規模モデルはデザイナーにとって最適なアシスタントを作成し、UI デザインのワークフローを最適化しますの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。