Новости

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Новый отчет мудрости

Редактор: Редакционный отдел

[Введение в новую мудрость] Только что Лао Хуан заявил на конференции SIGGRAPH: на этой неделе инженерные образцы Blackwell были официально отправлены миру! После этого Лао Хуан и Сяо Чжа поговорили у костра и интимно обменялись одеждой. Когда они дошли до захватывающего момента, Сяо Чжа так разозлился, что впал в ярость.

Срочные новости здесь!

Только что Лао Хуан заявил на конференции по компьютерной графике SIGGRAPH: Буквально на этой неделе NVIDIA начала рассылать по всему миру инженерные образцы Blackwell!

Сразу после этого ведущая Лорен Гуд пошутила: Да все опускают головы, вон оно под табуреткой.

Стоит отметить, что за этим самым мощным на сегодняшний день ИИ-чипом ИИ также неотделим ——

Без ИИ Хоппер был бы невозможен, без ИИ не был бы возможен и Блэквелл.

В разговоре у камина между ним и Сяо Чжа Сяо Чжа даже не мог не выругаться в какой-то момент, когда он был взволнован.

Потому что эффект от предыдущей смены одежды двух боссов действительно сложно описать.

На этот раз Сяо Чжа специально подарил Лао Хуану индивидуальное хлопковое пальто «черного кожаного стиля».

После приема верхней части тела эффект действительно выдающийся!

Конечно, Сяо Чжа также надел «подержанную» кожаную куртку Лао Хуана, которую он носил всего 2 часа. (Это гораздо ценнее, чем новое)

Мир цифровых «копий» NVIDIA

На конференции Лао Хуан объявил, что NVIDIA создала первую в мире генеративную модель искусственного интеллекта, которая может понимать OpenUSD (язык, геометрия, материалы, физика и пространство).

Что такое OpenUSD? Это относится к универсальному описанию сцены, которое можно понимать как универсальное описание сцены.

Хуан сказал, что более интересно, чем то, что ИИ может делать с текстом, это то, что мы можем делать то же самое с изображениями.

Например, модель Edify AI, созданная NVIDIA, представляет собой базовую модель от текста до 2D.

Для брендов это может быть Coca-Cola, автомобили, предметы роскоши и т. д. Однако контролировать сигналы — дело непростое.

Это потому, что широта слова очень низка, оно чрезвычайно сжато по содержанию, но в то же время очень неточно.

NVIDIA создала способ сделать это — создать другую модель, управлять ею и подстраивать ее под большее количество условий.

С помощью Omniverse все эти мультимодальные данные и контент можно комбинировать, будь то 3D, искусственный интеллект, анимация или материалы.

Мы можем изменить его позу, положение, словом, все, что захотим.

Использование условных подсказок в Omniverse можно понимать как своего рода расширенную 3D-генерацию, аналогичную расширенной генерации поиска.

Таким образом, мы можем генерировать изображение так, как нам нравится.

Далее WPP использовала Shutterstock для выполнения работ со всемирно известными брендами, чем прямо шокировала публику.

Постройте мне стол в пустой комнате со стульями вокруг него в оживленном ресторане.

Построй мне стол с тако и миской сальсы в утреннем свете.

Постройте мне машину на пустой дороге, в окружении деревьев, возле современного дома.

Построй мне дерево на пустом поле.

Постройте мне сотни этих деревьев во всех направлениях.

Пусть лес будет увешан кустами и виноградной лозой.

Построй мне гигантский тропический лес, наполненный экзотическими цветами и лучами солнечного света.

Omniverse теперь поддерживает преобразование текста в доллары США. Он понимает текст и имеет семантическую базу данных, позволяющую осуществлять поиск по всем 3D-объектам.

Таким образом, маленькая девочка может представить, как она хочет заполнить 3D-дерево, и как только она это сделает, 3D-сцена передается в генеративную модель искусственного интеллекта, которая превращает ее в фотореалистичную модель.

С тех пор в Omniverse будет появляться все больше и больше генеративного ИИ, который поможет людям создавать симуляции или цифровых двойников.

Например, следующий цифровой ИИ позволит каждой компании предоставлять обслуживание клиентов.

На данный момент обслуживанием клиентов занимаются люди, но в будущем к этому будет привлечен искусственный интеллект.

Служба поддержки клиентов будет подключена к цифровому человеческому интерфейсу, который представляет собой IO. Этот IO может разговаривать и смотреть нам в глаза.

К этому цифровому человеку можно подключить все виды ИИ, и даже цифрового человека можно подключить к ИИ службы поддержки клиентов NVIDIA с расширенными возможностями поиска.

НИМ-сервис

На этой конференции NVIDIA представила новый набор микросервисов NIM.

NIM адаптирован для различных рабочих процессов, включая OpenUSD, 3D-моделирование, физику, материалы, робототехнику, промышленные цифровые двойники и физический искусственный интеллект.

В области искусственного интеллекта и графики компания NVIDIA запустила новый микросервис OpenUSD NIM, предназначенный для создания физических приложений искусственного интеллекта.

Этот рабочий процесс включает в себя новые микросервисы NIM для моделирования роботов и многое другое для ускорения разработки роботов-гуманоидов.

«Три тела» создают роботов

Хуан предсказал, что следующей волной ИИ будет физический ИИ.

Если технология робототехники хочет развиваться, ей потребуются продвинутый искусственный интеллект и реалистичные виртуальные миры, и прежде чем появится следующее поколение роботов-гуманоидов, нам необходимо обучить ИИ;

Робототехнике требуется три компьютера: один для обучения ИИ, один для тестирования ИИ в физически точном моделировании и один внутри самого робота, который может научиться оптимизировать робота.

Другими словами, третий ИИ — это компьютер, который фактически управляет ИИ.

Для этого компания Nvidia создала три компьютера.

Без ИИ не было бы H100/H200 и B100.

В истории NVIDIA, начинающейся с 1990-х годов, настоящая ДНК связана с компьютерной графикой.

Компьютерная графика также привела Nvidia туда, где она находится сегодня.

На этом изображении показаны некоторые важные вехи в компьютерной индустрии, в том числе система IMB 360, Utah Teapot, трассировка лучей, программируемое затенение и т. д.

В 1993 году была основана компания NVIDIA. Восемь лет спустя они изобрели первый графический процессор с программируемым шейдингом, который во многом определил историю развития Nvidia.

Можно сказать, что в основе всего, что делает NVIDIA, лежат ускоренные вычисления. Они твердо верили, что если создадут вычислительную модель, расширяющую возможности вычислений общего назначения, то смогут решить проблемы, которые не под силу обычным компьютерам.

Предпочтительное направление – компьютерная графика. Они сделали правильную ставку.

Применение компьютерной графики в несуществующей в то время области — видеоиграх с 3D-графикой — напрямую способствовало развитию маховика Nvidia.

После этого им потребовалось много времени, чтобы сделать CUDA повсеместным, а затем в 2012 году, как и в «Звездном пути», NVIDIA впервые обратилась к AlexNet.

В 2012 году это был взрывной момент: AlexNet совершил потрясающий прорыв в компьютерном зрении. Его суть — глубокое обучение настолько глубоко, что инженерам больше не нужно представлять, как будет выглядеть результат после ввода входных данных.

В 2016 году Nvidia выпустила первый компьютер для глубокого обучения — DGX-1, который понравился Маску. Впоследствии продукт был передан тогда еще малоизвестной компании OpenAI.

Впоследствии были изобретены RTX и DLSS.

Затем произошло рождение ChatGPT.

В будущем у каждого будет AI-помощник

Сегодня мы научились использовать ИИ для изучения всего: не только слов, но и изображений, видео, 3D, химических веществ, белков, физики, термодинамики, гидродинамики, физики элементарных частиц и многого другого.

Мы понимаем значение всех этих различных модальностей.

По мнению Лао Хуана, революция генеративного искусственного интеллекта, основанная на визуальных вычислениях, повышает творческий потенциал человека.

Мы действительно переживаем революционный момент, приближаясь к эре Программного обеспечения 3.0 – ни одна отрасль не сможет избежать воздействия ИИ!

Хуан предсказал: у каждого будет помощник ИИ, и каждая компания и каждая работа внутри компании будут поддерживаться ИИ.

Ускорьте вычисления для решения энергетических проблем

Хотя ожидается, что генеративный ИИ повысит производительность труда человека, энергопотребление инфраструктуры ИИ является серьезной проблемой, от которой страдает вся планета.

Один поиск ChatGPT эквивалентен мощности 10 поисков Google.

Центры обработки данных потребляют от 1% до 2% всей мировой энергии и могут даже достичь 6% в течение десятилетия.

что делать? У Лао Хуана есть решение.

Он сказал, что ожидается, что технология ускоренных вычислений сделает вычисления более энергоэффективными.

«Ускоренные вычисления могут помочь нам сэкономить много энергии. Они могут сэкономить в 20 или 50 раз и выполнить ту же обработку», — сказал Хуанг.

«Первое, что нам как обществу нужно сделать, — это ускорить каждое возможное применение: это уменьшит количество энергии, используемой во всем мире».

Вот почему Blackwell так ожидаем, поскольку он использует ту же энергию, но значительно ускоряет работу приложений.

И это становится дешевле.

Лао Хуан подчеркнул: Помните, цель генеративного ИИ — не обучение, а рассуждение. В идеале логический вывод мог бы позволить нам создавать новые модели для прогнозирования погоды, прогнозирования новых материалов, оптимизации цепочек поставок и многого другого.

Помните, что центры обработки данных — не единственные места, потребляющие энергию. На глобальные центры обработки данных приходится лишь 40% общего объема вычислений, а 60% энергопотребления приходится на онлайн, перемещение электронов, битов и байтов.

Таким образом, генеративный ИИ снизит потребление энергии в Интернете, поскольку нет необходимости извлекать информацию, мы можем генерировать ее напрямую на месте.

И только сейчас Nvidia развернула графические процессоры в GCP для запуска Pandas.

Ведущая в мире платформа для обработки данных напрямую увеличила скорость с 50 до 100 раз, превзойдя общие вычисления.

За последние 10–12 лет мы увеличили скорость глубокого обучения в миллион раз и сократили стоимость и энергопотребление в миллион раз. Именно поэтому родилась LLM.

Однако NVIDIA также внесет новые инновации в искусственный интеллект, разработав новые процессоры, новые системы, графические процессоры с тензорным ядром и структуры переключателей NVLink.

Беседа у камина между Лао Хуаном и Сяо Чжа

Беседа у камина между двумя генеральными директорами SIGGRAPH в этом году долгождана многими людьми. По словам Сяо Чжа, «двух самых старших основателей отрасли», какие искры столкнутся?

следующая волна

Неудивительно, что два героя «Зеленого сливового кулинарного вина» поделились своими предсказаниями и рассказали о будущих тенденциях технологического развития, от ГенИИ до Агента и «Метавселенной», о которой всегда думал Сяо Чжа.

Хуан сказал, что он также был шокирован технической мощью GenAI: «Я не могу припомнить ни одной технологии, которая бы влияла на потребителей, бизнес, промышленность и научные круги с такой скоростью и охватывала все: от климатических технологий до биотехнологий и всего остального. области физической науки».

Сяо Чжа также сказал, что GenAI, вероятно, изменит различное программное обеспечение Meta для социальных сетей.

В прошлом суть этих продуктов — система рекомендаций — была просто для того, чтобы донести до пользователей интересующий их контент.

Но GenAI больше не будет ограничиваться существующим контентом. Он будет не только помогать создателям, но и создавать контент в реальном времени для пользователей или синтезировать существующий контент для его создания.

Что касается разработки Агента, у них, похоже, схожие взгляды.

В своем предыдущем выступлении Хуан дал понять, что «в будущем у каждого будет свой собственный ИИ-помощник».

Во время этого разговора Сяо Чжа также выразил подобное видение. Он планирует использовать продукты AI Assistant и AI Studio для Meta, которые позволят каждому создать своего собственного агента для разных целей.

В будущем у каждой компании будет свой собственный ИИ, точно так же, как сегодня у всех компаний есть свои учетные записи в социальных сетях и электронной почте.

Насколько «умным» должен быть «ИИ-помощник», как они его называют?

Llama 3, которую мы видели до сих пор, — это просто языковая модель, похожая на «чат-бота», которая может отвечать только на человеческие вопросы. Но Сяо Чжа надеется, что ИИ можно дать «намерение».

Лао Хуан описал это как «способность планирования», которая может формировать «дерево решений» в уме, как у людей, а затем направлять поведение.

Он ещё смелее предсказал, что такого рода ИИ-помощник будет стоить всего $10 в час, но сможет значительно улучшить производительность работы инженеров. «Если вы еще не наняли ИИ, сделайте это сейчас!»

Что касается основной и самой уникальной технологии AR/VR Meta, план Сяо Чжа также довольно точен и полностью отражает его обсессивно-компульсивную личность.

(Согласно новостям Лао Хуана, помидоры можно резать с точностью до миллиметра, и каждый ломтик помидора не может касаться друг друга.)

В сентябре прошлого года Meta и Ray-Ban выпустили новые умные очки, оснащенные аудиооборудованием и камерами, позволяющие пользователям делать фотографии прямо с точки зрения обоих глаз или транслировать в прямом эфире поле зрения, видимое в очках, прямо на Facebook или Instagram и интегрировали помощника по общению Meta AI.

Сяо Чжа сказал, что, учитывая текущую ситуацию с очками Ray-Ban, очки AI без дисплея по цене 300 долларов США станут очень популярным продуктом.

По его прогнозу, в будущем умные очки станут устройством, похожим на мобильный телефон, и умные очки будут носить все, кто носит очки (более 1 миллиарда человек в мире).

В ближайшие несколько лет Meta также выпустит очки с голографическими функциями AR. Хотя стоимость по-прежнему высока, это будет реальный продукт.

В отличие от умных очков, гарнитуры смешанной реальности больше похожи на рабочие станции или игровые консоли. Их неудобно носить с собой, но они обладают большей вычислительной мощностью и могут обеспечить пользователям более захватывающий опыт.

Более того, с развитием голографической AR-технологии «виртуальные встречи» вскоре станут реальностью.

В отличие от аватаров или видео на платформе Zoom, у каждого будет свое голографическое изображение. Даже если они находятся в разных физических пространствах, «виртуальные люди», созданные с помощью голограмм, могут сотрудничать и взаимодействовать в одном пространстве.

Открытый исходный код – это путь вперед

Когда дело доходит до Meta, их последовательная стратегия «открытого исходного кода» также является ключевым моментом, который необходимо обсудить.

Лао Хуан очень ценит эту стратегию. Он сказал, что Llama 2 может стать самым важным событием в области искусственного интеллекта в прошлом году; вместе с PyTorch и недавно выпущенной Llama 3.1 Meta создала целую экосистему.

Но Сяо Чжа сказал, что их путь к открытому исходному коду также был своего рода «адаптацией».

По многим направлениям, особенно в распределенных вычислительных системах и центрах обработки данных, стартовая линия Meta фактически отстает от других компаний, поэтому команда задумалась об открытом исходном коде, особенно об открытых вычислениях.

Неожиданно этот прием стал ключевой стратегией «обгона на поворотах».

Именно открытый исходный код позволяет продуктам, выпускаемым Meta, становиться отраслевыми стандартами, и вся цепочка поставок строится вокруг них. Meta даже сэкономила миллиарды долларов, сделав проект открытым исходным кодом.

Например, Meta вышла на рынок графических процессоров позже, чем большинство компаний, но масштабы суперкомпьютерных кластеров на графических процессорах, которые они сейчас эксплуатируют, превосходят почти все конкуренты.

Конечно, для этого необходима сильная поддержка Лао Хуана. В конце концов, 600 000 графических процессоров Meta также производятся Nvidia.

Хотя открытый исходный код может способствовать прогрессу этого сообщества и отрасли, Сяо Чжа также честно сказал, что открытый исходный код — это не благотворительность, и мы выбрали эту стратегию не из-за бескорыстного сердца.

Более важная цель — сделать так, чтобы создаваемый продукт достиг своего пика и стал лучшим из возможных.

PyTorch — наиболее типичный пример. Разработчики по всему миру, в том числе от двух до трехсот инженеров NVIDIA, помогают этой платформе с открытым исходным кодом находить ошибки и оптимизировать ее, образуя то, что Хуанг называет «инженерной горой PyTorch».

Хотя сам Сяо Чжа признает, что открытый исходный код — это эгоистично, он все равно не может не волноваться, когда говорит о «закрытых» платформах. Единственное ругательство в комнате было связано с этой темой.

Хотя у Meta есть ряд социальных программ высшего уровня, эти приложения необходимо распространять через платформы конкурентов, особенно через Apple App Store и систему Android от Google.

Что очень раздражает Сяочжу, так это то, что когда-то у него было много идей по продуктам, но из-за различных ограничений этих мобильных платформ они в конечном итоге не смогли реализоваться.

Чрезвычайно платформозависимая природа эпохи мобильного Интернета полностью отличается от открытости эпохи ПК, из-за чего Сяо Чжа скучает по Facebook в сети.

Поэтому он с уверенностью заявил, что мы формируем следующее поколение вычислительных платформ, а именно технологию смешанной реальности, в которой программное обеспечение с открытым исходным кодом вновь обретет большую ценность.

Платформа и экосистема следующего поколения будут более открытыми и инклюзивными, похожими на предыдущую экосистему Windows или Android, а не на полностью закрытую Apple.

Это стремление «снова сделать открытый исходный код великим» напоминает людям его метафору, когда была выпущена Llama 3.1: Llama 3.1 — это Linux этой эпохи.

Быть генеральным директором непросто

На протяжении всего разговора они чувствовали симпатию друг к другу и часто говорили о трудностях карьеры генерального директора.

Дженсен, 61 год, одетый в кожаную куртку, даже сравнил себя с нежным цветком с серьезным лицом: «Мы генеральные директора, как нежные цветы, нам нужна большая поддержка».

Сяо Чжа даже добавил: «Мы сейчас очень измождены».

Эта эмоция может возникнуть из-за взлетов и падений, которые два старших основателя пережили в компании.

По мнению Сяо Чжа, Лао Хуан, находясь под давлением отсутствия фаворита, настоял на том, чтобы сделать компьютер «суперзверем», сделав Nvidia легендой индустрии;

По мнению Лао Хуана, Сяо Чжа неоднократно руководил Meta трансформацией: от ПК к мобильным устройствам, от социальных сетей к исследованиям в области VR/AR и искусственного интеллекта.

В конце разговора Хуан прямо заявил о сходстве между ними: «Я знаю, как трудно это сделать (трансформацию). Мы оба сильно пострадали, но это то, что необходимо, чтобы стать пионером и вводить новшества. .»

Использованная литература:

https://www.youtube.com/watch?v=H0WxJ7caZQU

https://www.youtube.com/watch?v=w-cmMcMZoZ4