Новости

NVIDIA Isaac ускоряет визуальное восприятие роботами 3D и планирование траектории роботизированной руки

2024-07-16

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina



Введение

2 июля «Chimp» был запущен совместно с NVIDIA.Открытый курс NVIDIA по робототехнике"Успешно завершено.Шу Цзямин, директор по архитектуре решений, NVIDIAк"NVIDIA Isaac ускоряет визуальное восприятие роботами 3D и планирование траектории роботизированной руки》 провела прямой эфир по этой теме.

Наступила эра роботов с искусственным интеллектом.Основываясь на робототехнической платформе NVIDIA Isaac, NVIDIA постоянно использует новейшие генеративные технологии искусственного интеллекта и передовые технологии моделирования для ускорения разработки технологий робототехники с искусственным интеллектом.

С этого года роботизированная платформа NVIDIA Isaac получила важные обновления. На выставке GTC 2024 в марте NVIDIA представила серию базовых моделей, инструментов для роботов и библиотек ускорения графического процессора, таких как Isaac Perceptor и Isaac Manipulator. В июне этого года последняя версия NVIDIA Isaac Sim 4.0 также была официально доступна для загрузки.

Isaac Perceptor для AMR Vision AI предоставляет разработчикам возможности многокамерного обзора на 360 градусов. Эта функция может улучшить возможности AMR по объемному 3D-видению и пространственному многоуровневому изображению, помочь AMR повысить эффективность работы и в то же время повысить точность обхода препятствий и обеспечить безопасность работников.

Isaac Manipulator обеспечивает гибкость и модульные возможности искусственного интеллекта для роботизированных рук. Isaac Manipulator использует базовую модель на основе Transformer и библиотеку ускорения графического процессора для ускорения планирования пути, гарантируя, что робот сможет выполнять задачи более плавно и эффективно. Кроме того, манипулятор Айзека также можно использовать для создания хватательных поз для руки робота.

Робототехника, основанная на физическом искусственном интеллекте, изменит нашу промышленность и жизнь. Физические модели ИИ способны понимать окружающую среду и автономно выполнять сложные задачи в физическом мире. Многие сложные задачи сложно программировать, и они полагаются на генеративные физические модели искусственного интеллекта, обученные с использованием обучения с подкреплением в среде моделирования. С помощью NVIDIA Isaac Sim, эталонного приложения на базе NVIDIA Omniverse, разработчики могут проектировать, моделировать, тестировать и обучать роботов с искусственным интеллектом и автономные машины в виртуальной среде, подчиняющейся законам физики. NVIDIA Isaac Sim помогает командам генерировать синтетические данные, обучать стратегии роботов и создавать различные сценарии приложений по требованию для проверки всего стека роботов перед развертыванием.

На этом открытом занятии г-н Шу Цзямин сначала кратко представил важные обновления платформы разработки роботов NVIDIA Isaac, затем объяснил, как использовать Isaac Perceptor для улучшения возможностей трехмерного визуального восприятия AMR, а затем обсудил использование Isaac Manipulator для создания захватывающего изображения. позы и ускорить планирование траектории. Углубленный анализ. Наконец, учитель Шу Цзямин рассказал, как проводить тесты и оценивания в «Исааке Симе».

Учебное пособие преподавателя Шу Цзямина PPT было загружено в этот общедоступный аккаунт [Состояние алгоритма】, вы можете ответить на ключевое слово "Исаак" чтобы получить.

Рекомендуемая презентация PPT























Частичный контроль качества

В1: Какие конкретные расширения и улучшения есть в «Лаборатории Исаака» на орбите?

A1:https://isaac-sim.github.io/IsaacLab/index.html

Вопрос 2: Легко ли перенести программу IsaacGymEnvs в Isaac Sim?

A2:https://isaac-sim.github.io/IsaacLab/source/migration/migrating_from_isaacgymenvs.html

Вопрос 3. Какие основные средства визуализации интегрированы с Isaac Sim и в чем различия?

A3:https://docs.omniverse.nvidia.com/materials-and-rendering/latest/rtx-renderer.html#rtx-renderer

Полное воспроизведение