2024-08-17
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
Tekoäly kehittyy nopeammin kuin uskotkaan. Siitä lähtien, kun GPT-4 esitteli multimodaalisen teknologian julkisuuteen, multimodaaliset suuret mallit ovat siirtyneet nopean kehityksen vaiheeseen, siirtyen vähitellen puhtaasta mallitutkimuksesta ja -kehityksestä tutkimiseen ja soveltamiseen vertikaalisilla aloilla, ja ne ovat integroituneet syvästi kaikkiin elämänaloihin. Rajapintojen vuorovaikutuksen saralla kansainväliset teknologiajätit, kuten Google ja Apple, ovat panostaneet suurten multimodaalisten käyttöliittymämallien tutkimukseen ja kehittämiseen, jota pidetään ainoana tienä matkapuhelinten tekoälyvallankumoukselle.
Tässä yhteydessä syntyi ensimmäinen laajamittainen käyttöliittymämalli Kiinassa. IXDC2024 International Experience Design Conferencessa 17. elokuuta AI-aikakauden suunnittelutyökalu Motiff lanseerasi itsenäisesti kehitetyn käyttöliittymän multimodaalisen mallin - Motiff Model. Tämä on maailman ensimmäinen suuren mittakaavan malli, jonka on kehittänyt käyttöliittymäsuunnittelutyökaluja valmistava yritys, ja se on merkki Kiinan käyttöliittymäsuunnittelun voiman noususta maailmanlaajuisesti.
IXDC-konferenssissa Motiffin varapuheenjohtaja esitteli Kiinan ensimmäisen suuren käyttöliittymämallin - Motiff Model
Motiff-mallilla on erinomainen käyttöliittymän ymmärtäminen ja kyky suorittaa avoimia ohjeita. Viidessä alan tunnustetussa käyttöliittymän vertailuarvossa kaikki Motiff-mallin indikaattorit ylittivät GPT-4o:n ja Applen Ferret UI:n. Se ohitti myös Googlen ScreenAI:n indikaattoreiden suhteen, ja Widget Captioning -indikaattori oli 161,77, mikä oli virkistävä SoTA. Verrattuna olemassa oleviin ratkaisuihin, kuten Ferret UI ja ScreenAI, Motiffin suuri malli pystyy ymmärtämään joustavasti käyttöliittymäelementtejä kontekstin perusteella, saavuttaen "suunnitteluasiantuntijoiden" tason ja on lähimpänä ihmisen ymmärrystä ja käyttöliittymärajapintojen ilmaisua.
Arvovaltaisessa käyttöliittymäindeksikatsauksessa kaikki Motiff-mallin indikaattorit ylittivät GPT-4o:n ja Ferret UI:n.
IXDC:n konferenssissa Motiff Vice President Zhang Haoran esitteli Motiff-mallin yksityiskohtaisesti. Siinä on kaksi kykyä ymmärtää käyttöliittymiä ja interaktiivista navigointia, ja sen odotetaan johtavan käyttöliittymän vuorovaikutuksen vallankumousta. "Ihmisen luominen alkaa kognitiosta ja ymmärtämisestä, ja AI-aikakauden käyttöliittymän luominen alkaa myös suurten mallien käyttöliittymän täydellisestä ymmärtämisestä."
Motiff-malli on erinomainen käyttöliittymien ymmärtämisessä ja on verrattavissa "suunnitteluasiantuntijaan". Se ei vain tunnista kaikkia kuvia, kuvakkeita, tekstiä ja yli 40 hienorakeista käyttöliittymäkomponenttia käyttöliittymässä, vaan myös merkitsee tarkasti eri elementtien alueelliset koordinaatit käyttöliittymässä. Lisäksi se osaa vastata erilaisiin käyttöliittymään liittyviin kysymyksiin, tehdä käyttöliittymätietojen perusteella toiminnallisia johtopäätöksiä ja kuvata käyttöliittymän sisältöä yksityiskohtaisesti.
Verrattuna suuriin malleihin, kuten GPT-4o, Ferret UI ja ScreenAI, Motiff large -mallilla on myös merkittäviä etuja käyttöliittymän analysointiominaisuuksissa. Esimerkiksi APP Store -sovellusliittymässä Motiff-malli voi jakaa sivun useisiin moduuleihin, kuten ylänavigointipalkkiin ja sovelluksen tietomoduuliin käyttöliittymäsuunnittelun näkökulmasta, ja analysoida kunkin moduulin toimintoa ja asettelua yksityiskohtaisesti, mikä auttaa. tarjota suunnitteluehdotuksia, luoda automaattisesti käyttöliittymäsuunnittelun prototyyppejä jne. Motiff on alan johtava käyttöliittymäanalyysiominaisuuksissa ja on multimodaalinen malli, joka ymmärtää käyttöliittymäsuunnittelun parhaiten.
Motiff-malli voi vastata moniin käyttöliittymäliittymiin liittyviin kysymyksiin
Motiff-malli on myös lähimpänä ihmistä ymmärrys- ja ilmaisukyvyltään. Aikaisemmilla ratkaisuilla (kuten Ferret UI ja ScreenAI) oli vaikeuksia ymmärtää kuvakkeiden merkitystä kontekstin perusteella. Motiffin suuri malli keräsi suuren määrän korkealaatuista käyttöliittymäkenttädataa manuaalisen merkinnän ja muiden menetelmien avulla ja pystyi ymmärtämään ja osoittamaan useat. käyttää samaa kuvaketta eri käyttöliittymissä, mikä parantaa merkittävästi kuvauksen tarkkuutta ja kontekstuaalista merkitystä.
Kuvan 1 tiedot on luonut Google ScreenAI, joka ymmärsi sydämen muotoisen kuvakkeen väärin "sydämenä" "kokoelman" sijaan kuvien 2, 3 ja 4 tiedot luotiin Motiff-mallilla, joka voi kuvata tarkasti kuvakkeen merkitys käyttöliittymätietojen perusteella.
Motiff-mallissa on myös interaktiiviset navigointiominaisuudet, jotka voivat ohjata käyttövaiheita käyttäjän tarpeiden mukaan ja suorittaa tarvittavat toiminnot käyttäjän puolesta luvan saatuaan. Tämä luo pohjan tulevalle käyttöliittymän vuorovaikutuksen vallankumoukselle. Jatkossa käyttäjien ei tarvitse napsauttaa näyttöä manuaalisesti, vaan tarvitsevat vain puhe- tai kuvasyötteen käyttääkseen laitetta Mobiiliavustajat, kuten Siri, voivat olla uusi sisäänkäynti kaikkiin sovelluksiin , joka avaa uuden ohjelmistosovellusten paradigman ja uuden käyttöliittymän vuorovaikutuksen aikakauden.
Lisäksi Motiff large -malli hallitsi onnistuneesti virheprosenttia yksinumeroisina. Alan mielipiteet uskovat, että virheiden jyrkkä lasku merkitsee tekoälyn etenemistä aputyökalusta "tekniseksi singulaariseksi", jossa se voi suorittaa työnsä itsenäisesti. Tällä hetkellä yksi suurten mallien keskeisistä ongelmista on korkea virheprosentti. Esimerkiksi GPT-4:n virheprosentti on 30–40 % useilla indikaattoreilla, ja virheprosentti jopa ylittää 70 % käyttöliittymäkentässä. Sitä vastoin Motiff large -malli laskee virhesuhteen alle 15 %:iin ja yksittäisten indikaattoreiden virheprosentti on vain 7 %.
Miksi tekoälysovellusyritykset voivat itsenäisesti kehittää maailman johtavia suuria malleja? Zhang Haoran sanoi konferenssissa, että tämä johtuu jatkuvasta "parempien tuotteiden" tavoittelusta. "Tekoälytuotteiden johtavana valmistajana Motiff on sitoutunut murtamaan teknisiä pullonkauloja sovellusskenaarioiden perusteella ja parantamaan jatkuvasti tekoälyominaisuuksien vaatimuksia", hän sanoi.
Motiffin kyky "päihittää" johtavat kansainväliset mallit, kuten GPT-4o ja Applen Ferret UI, hyötyy myös sen pitkän aikavälin teknologian kertymisestä. Motiff on keskittynyt käyttöliittymän vuorovaikutukseen ja suunnitteluun perustamisestaan lähtien vuonna 2021. Sen emoyhtiö Yuanfudao Group perusti AI Labin, joka keskittyi tekoälyteknologian huippututkimukseen vuonna 2014. Vuonna 2018 Yuanfudao Group voitti tunnetun konelukemisen. kilpailu MSMAARCO sijoittui ensimmäiseksi maailmassa, ja sen koneellisen luetun ymmärtämisen ominaisuudet olivat tuolloin ohittaneet Baidun ja Microsoftin.
Ei ole epäilystäkään siitä, että Motiff-mallin julkaisu merkitsee GPT-hetkeä käyttöliittymäsuunnittelun alalla. Käyttöliittymäsuunnittelu edellyttää visuaalisten elementtien tarkkaa käsittelyä ja syvällistä ymmärrystä käyttäjän vuorovaikutuslogiikasta. Motiff-malli parantaa merkittävästi suunnittelutyökalujen tehokkuutta ja tuotantokykyä.
Motiffin tekoälyn luomassa käyttöliittymätoiminnossa käyttäjien tarvitsee vain kirjoittaa komento, ja Motiff voi luoda kaksi versiota suunnitteluluonnoksesta alle 30 sekunnissa. Yli 30 alan ammattilaisen viimeaikaisten sokeiden arvioiden mukaan molemmat versiot Motiffin luomista suunnitteluluonnoksista ovat parempia kuin edellisen johtavan AI-sukupolven käyttöliittymätyökalu Galileo AI. Tämän ominaisuuden julkaisun jälkeen siitä tuli nopeasti markkinoiden johtaja. Tämä etu johtuu suoraan Motiffin suuren mallin käyttöliittymän ammattimaisista ominaisuuksista. On raportoitu, että tekoälyn luoma käyttöliittymätoiminto on avattu maailmanlaajuisille käyttäjille 17. elokuuta. Sinun tarvitsee vain rekisteröidä Motiff-tili, jotta voit kokea sen ilmaiseksi.
Lisäksi komponenttien tunnistuksen tarkkuus AI-suunnittelujärjestelmätoiminnossa on myös parantunut merkittävästi. Suurten mallien tuella suunnittelijat voivat tehdä työt muutamassa minuutissa, mikä kesti aiemmin vähintään viikkoja. AI-kopiointitoiminto tunnistaa kuvat ja tekstinkirjoituksen suunnitteluluonnoksissa yli 97 %:n tarkkuudella.
"Motiff aikoo avata suuret mallinsa keskisuurille ja suurille yrityksille ja työskennellä asiakkaiden kanssa luodakseen uuden käyttöliittymän tuotantosuhteen tekoälyn aikakaudella, Zhang Haoran huomautti kokouksessa, että Motiffin suuri malli auttaa optimoimaan ohjelmistokehityksen työnkulku ja lyhentää tehokkaasti nykyistä käyttöliittymän tuotantoprosessia.
Motiff on luonut monia "ensimmäisiä" käyttöliittymäsuunnittelun alalla. Se ei ainoastaan ollut edelläkävijä monien tekoälytoimintojen joukossa, vaan se oli myös ensimmäinen käyttöliittymäsuunnitteluohjelmisto Kiinassa, joka on kehittänyt itse kehitetyn grafiikan renderöintimoottorin maailmassa on miljoona tasoa yhdellä kankaalla. Tehokas tuote, jota voidaan edelleen muokata sujuvasti. Motiff tunnetaan "Tekoälyversiona Figmasta" ulkomailla sosiaalisessa mediassa, vaikka se parantaa tuottavuutta yli 100 kertaa, mutta sen hinta on yli 80 % alhaisempi kuin tunnetulla tuotejulkaisualustalla Product Hunt Heinäkuun suosituimpien tuotteiden päivälista ja viikkoluettelo listan ykkönen.
(Mutta ulkomailla sosiaalisilla alustoilla on paljon viestejä, joissa Motiffia ja Figmaa verrataan. Motiffia pidetään tekoälytyökaluna, joka suunnittelijoiden tulee tietää.)