новости

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Искусственный интеллект развивается быстрее, чем вы можете себе представить. С тех пор, как GPT-4 представил общественности мультимодальную технологию, мультимодальные большие модели вступили в стадию быстрого развития, постепенно переходя от чистых исследований и разработок моделей к исследованию и применению в вертикальных областях и глубоко интегрированы во все сферы жизни. В области взаимодействия интерфейсов международные технологические гиганты, такие как Google и Apple, вложили средства в исследования и разработку крупных мультимодальных моделей пользовательского интерфейса, что считается единственным путем вперед к революции искусственного интеллекта в мобильных телефонах.

В этом контексте родилась первая крупномасштабная модель пользовательского интерфейса в Китае. 17 августа на Международной конференции по дизайну IXDC2024 компания Motiff, инструмент проектирования в эпоху искусственного интеллекта, представила независимо разработанную мультимодальную модель пользовательского интерфейса — Motiff Model. Это первая в мире крупномасштабная модель, разработанная компанией, занимающейся разработкой инструментов для проектирования пользовательского интерфейса, что знаменует рост мощи Китая в области дизайна пользовательского интерфейса на мировой арене.

На конференции IXDC вице-президент Motiff представил первую большую модель пользовательского интерфейса в Китае — Motiff Model.

Модель Motiff отлично понимает пользовательский интерфейс и способна выполнять открытые инструкции. В пяти признанных в отрасли тестах возможностей пользовательского интерфейса все показатели модели Motiff превысили GPT-4o и пользовательский интерфейс Apple Ferret. Он также превзошел Google ScreenAI по показателям: показатель Widget Captioning достиг 161,77, обновив SoTA. По сравнению с существующими решениями, такими как Ferret UI и ScreenAI, большая модель Motiff может гибко понимать элементы интерфейса на основе контекста, достигая уровня «экспертов по дизайну» и ближе всего к человеческому пониманию и выражению интерфейсов пользовательского интерфейса.

В авторитетном обзоре индексов UI все показатели модели Motiff превысили GPT-4o и Ferret UI.

Самая понятная большая модель пользовательского интерфейса, выражение очень близкое к человеку и являющееся краеугольным камнем будущей революции взаимодействия интерфейсов.

На конференции IXDC вице-президент Motiff Чжан Хаожань подробно представил модель Motiff. Она обладает двумя возможностями понимания пользовательских интерфейсов и интерактивной навигации и, как ожидается, возглавит революцию в области взаимодействия интерфейсов. «Творение человека начинается с познания и понимания, а создание пользовательского интерфейса в эпоху искусственного интеллекта также начнется с полного понимания пользовательского интерфейса на основе больших моделей».

Модель Motiff превосходно понимает пользовательские интерфейсы и сравнима с «экспертом по дизайну». Он может не только идентифицировать все изображения, значки, текст и более 40 детализированных компонентов пользовательского интерфейса в интерфейсе, но также точно отмечать региональные координаты различных элементов интерфейса. Кроме того, он может отвечать на различные вопросы, связанные с пользовательским интерфейсом, делать функциональные выводы на основе информации об интерфейсе и подробно описывать содержимое интерфейса.

По сравнению с большими моделями, такими как GPT-4o, Ferret UI и ScreenAI, большая модель Motiff также имеет значительные преимущества в возможностях анализа интерфейса. Например, в интерфейсе приложения APP Store модель Motiff может разделить страницу на несколько модулей, таких как верхняя панель навигации и модуль информации о приложении, с точки зрения дизайна пользовательского интерфейса, а также подробно проанализировать функцию и макет каждого модуля, что помогает предоставлять предложения по дизайну, автоматически генерировать прототипы дизайна пользовательского интерфейса и т. д. Motiff является лидером в отрасли по возможностям анализа интерфейсов и представляет собой мультимодальную модель, которая лучше всего понимает дизайн пользовательского интерфейса.

Модель Motiff может ответить на множество вопросов об интерфейсах пользовательского интерфейса.

Модель Motiff также наиболее близка к человеку с точки зрения возможностей понимания и выражения. Предыдущие решения (такие как Ferret UI и ScreenAI) с трудом понимали значение значков на основе контекста. Большая модель Motiff собирала большое количество высококачественных данных полей пользовательского интерфейса с помощью ручных аннотаций и других методов и могла понять и указать на множество. использование одного и того же значка в разных интерфейсах, что значительно повышает точность и контекстную релевантность описания.

Данные на рисунке 1 были сгенерированы Google ScreenAI, который ошибочно воспринял значок в форме сердца как «сердце», а не как «коллекцию». Данные на рисунках 2, 3 и 4 были сгенерированы моделью Motiff, которая может точно описать; значение значка на основе информации об интерфейсе.

Модель Motiff также имеет возможности интерактивной навигации, которые могут подсказывать действия в соответствии с потребностями пользователя и выполнять соответствующие операции от имени пользователя после получения разрешения. Это закладывает основу для будущей революции взаимодействия интерфейсов. В будущем пользователям не нужно будет вручную нажимать на экран, а достаточно будет вводить голос или изображение для управления устройством. Мобильные помощники, такие как Siri, могут стать новым входом во все приложения. Настоящие смартфоны и компьютеры появятся на свет. , открывая новую парадигму программных приложений и новую эру взаимодействия с интерфейсом.

Кроме того, большая модель Motiff также успешно контролировала уровень ошибок в пределах однозначных цифр. По мнению представителей отрасли, резкое снижение количества ошибок знаменует собой переход ИИ из вспомогательного инструмента в «техническую сингулярность», где он может выполнять работу самостоятельно. В настоящее время одной из основных проблем, с которыми сталкиваются большие модели, является высокий уровень ошибок. Например, GPT-4 имеет уровень ошибок от 30% до 40% по нескольким индикаторам, а уровень ошибок даже превышает 70% в области пользовательского интерфейса. Напротив, большая модель Motiff снижает уровень ошибок до менее чем 15%, а уровень ошибок отдельных показателей составляет всего 7%.

Почему компании, занимающиеся приложениями искусственного интеллекта, могут самостоятельно разрабатывать ведущие в мире большие модели? Чжан Хаожань заявил на конференции, что это связано с постоянным стремлением к созданию «лучших продуктов». «Являясь лидером в области продуктов искусственного интеллекта, Motiff стремится преодолевать технические узкие места на основе сценариев применения и постоянно улучшать требования к возможностям искусственного интеллекта», — сказал он.

Способность Motiff «победить» ведущие международные модели, такие как GPT-4o и Apple Ferret UI, в области пользовательского интерфейса также выигрывает от долгосрочного накопления технологий. Motiff с момента своего основания в 2021 году занимается взаимодействием и дизайном интерфейсов. В 2014 году ее материнская компания Yuanfudao Group создала лабораторию искусственного интеллекта, занимающуюся передовыми исследованиями в области технологий искусственного интеллекта. В 2018 году Yuanfudao Group выиграла известный конкурс машинного чтения. конкуренция MSMAARCO занимала первое место в мире, ее возможности машинного понимания текста на тот момент превзошли Baidu и Microsoft.

Повышение эффективности + генерация искусственного интеллекта создает лучшего помощника для дизайнеров и оптимизирует рабочий процесс разработки программного обеспечения.

Нет сомнений в том, что выпуск модели Motiff знаменует собой момент GPT в области дизайна интерфейсов. Дизайн пользовательского интерфейса требует точной обработки визуальных элементов и глубокого понимания логики взаимодействия с пользователем. Модель Motiff значительно повышает эффективность и возможности создания инструментов дизайна.

В функции пользовательского интерфейса Motiff, созданной искусственным интеллектом, пользователям нужно всего лишь ввести команду, и Motiff может создать две версии проекта проекта менее чем за 30 секунд. Согласно недавним слепым обзорам, проведенным более чем 30 профессионалами отрасли, обе версии проектов, созданных Motiff, лучше, чем предыдущий ведущий инструмент пользовательского интерфейса поколения искусственного интеллекта Galileo AI. После выпуска этой функции она быстро стала лидером на рынке. Это преимущество напрямую связано с профессиональными возможностями пользовательского интерфейса большой модели Motiff. Сообщается, что функция пользовательского интерфейса, созданная искусственным интеллектом, была открыта для пользователей по всему миру 17 августа. Вам нужно всего лишь зарегистрировать учетную запись Motiff, чтобы воспользоваться ею бесплатно.

Кроме того, значительно улучшена точность идентификации компонентов в функции системы проектирования AI. Благодаря поддержке больших моделей дизайнеры могут за считанные минуты выполнить работу, которая раньше занимала как минимум недели. Функция копирования AI способна распознавать изображения и копирайтинг в черновиках дизайна с точностью более 97%.

«Motiff планирует открыть возможности своих больших моделей для средних и крупных предприятий и работать с клиентами над созданием новых отношений по производству интерфейсов в эпоху искусственного интеллекта». Чжан Хаожань отметил на встрече, что большая модель Motiff поможет оптимизировать разработку программного обеспечения. рабочий процесс и эффективно сократить существующий процесс производства интерфейса.

Компания Motiff уже создала множество «новинок» в индустрии дизайна интерфейсов. Она не только стала пионером в использовании нескольких функций искусственного интеллекта, но и стала первым программным обеспечением для дизайна интерфейсов в Китае, разработавшим собственный механизм рендеринга графики. мир будет иметь 1 миллион слоев на одном холсте. Высокопроизводительный продукт, который по-прежнему можно беспрепятственно редактировать. Motiff известен как «версия Figma с искусственным интеллектом» в зарубежных социальных сетях. Производительность повышается более чем в 100 раз, цена более чем на 80% ниже, чем у Figma. Он был указан на известной платформе публикации продуктов Product Hunt. Ежедневный и еженедельный список самых популярных продуктов июля. Номер один в списке.

(На зарубежных социальных платформах есть большое количество постов, сравнивающих Motiff и Figma. Motiff считается инструментом искусственного интеллекта, который необходимо знать дизайнерам.)