berita

NVIDIA Isaac mempercepat persepsi visual 3D robot dan perencanaan lintasan lengan robot

2024-07-16

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina



Perkenalan

Pada tanggal 2 Juli, "Chimp" diluncurkan bersama dengan NVIDIA.Kursus Terbuka Robotika NVIDIA"Berhasil diselesaikan.Shu Jiaming, Direktur Arsitektur Solusi, NVIDIAoleh"NVIDIA Isaac mempercepat persepsi visual 3D robot dan perencanaan lintasan lengan robot》 melakukan siaran langsung tentang tema tersebut.

Era robot AI telah tiba.Berdasarkan platform robotika NVIDIA Isaac, NVIDIA terus memanfaatkan AI generatif terbaru dan teknologi simulasi canggih untuk mempercepat pengembangan teknologi robotika AI

Sejak tahun ini, platform robot NVIDIA Isaac telah menerima pembaruan penting. Di GTC 2024 pada bulan Maret, NVIDIA merilis serangkaian model dasar, alat robot, dan perpustakaan akselerasi GPU seperti Isaac Perceptor dan Isaac Manipulator. Pada bulan Juni tahun ini, versi terbaru NVIDIA Isaac Sim 4.0 juga resmi tersedia untuk diunduh.

Isaac Perceptor untuk AMR Vision AI memberi pengembang kemampuan penglihatan 360 derajat multi-kamera. Fungsi ini dapat meningkatkan kemampuan penglihatan sekeliling 3D dan pelapisan spasial AMR, membantu AMR meningkatkan efisiensi kerja, dan pada saat yang sama meningkatkan akurasi penghindaran rintangan dan menjamin keselamatan pekerja.

Isaac Manipulator memberikan fleksibilitas dan kemampuan AI modular untuk lengan robot. Isaac Manipulator menggunakan model dasar berbasis Transformer dan perpustakaan akselerasi GPU untuk mempercepat perencanaan jalur, memastikan robot dapat melakukan tugas dengan lebih lancar dan efisien. Selain itu, Isaac Manipulator juga dapat digunakan untuk menghasilkan pose menggenggam lengan robot.

Robotika yang didukung oleh AI fisik akan mengubah industri dan kehidupan kita. Model AI fisik mampu memahami lingkungan sekitar dan menyelesaikan tugas kompleks secara mandiri di dunia fisik. Banyak tugas kompleks yang sulit diprogram dan bergantung pada model AI fisik generatif yang dilatih menggunakan pembelajaran penguatan dalam lingkungan simulasi. Dengan NVIDIA Isaac Sim, aplikasi referensi berbasis NVIDIA Omniverse, pengembang dapat merancang, mensimulasikan, menguji, dan melatih robot AI dan mesin otonom dalam lingkungan virtual yang mematuhi hukum fisika. NVIDIA Isaac Sim membantu tim menghasilkan data sintetis, melatih strategi robot, dan membangun berbagai skenario aplikasi sesuai permintaan untuk memvalidasi seluruh tumpukan robot sebelum diterapkan.

Di kelas terbuka ini, Bapak Shu Jiaming pertama-tama memperkenalkan secara singkat pembaruan penting dari platform pengembangan robot NVIDIA Isaac, kemudian menjelaskan cara menggunakan Isaac Perceptor untuk meningkatkan kemampuan persepsi visual surround 3D AMR, dan kemudian membahas penggunaan Isaac Manipulator untuk menghasilkan pemahaman. berpose dan mempercepat perencanaan lintasan. Terakhir, guru Shu Jiaming membagikan cara melakukan tes dan penilaian di Isaac Sim.

PPT kursus Guru Shu Jiaming telah diunggah ke akun publik ini [Status Algoritma】, Anda dapat membalas kata kunci "Ishak" untuk memperoleh.

PPT unggulan























QA parsial

Q1: Perluasan dan peningkatan spesifik apa yang dilakukan Isaac Lab berdasarkan orbit?

A1:https://isaac-sim.github.io/IsaacLab/index.html

Q2: Apakah program IsaacGymEnvs mudah untuk ditransplantasikan ke Isaac Sim?

A2:https://isaac-sim.github.io/IsaacLab/sumber/migrasi/migrasi_dari_isaacgymenvs.html

Q3: Apa saja renderer utama yang terintegrasi dengan Isaac Sim dan apa perbedaannya?

A3:https://docs.omniverse.nvidia.com/materials-and-rendering/latest/rtx-renderer.html#rtx-renderer

Pemutaran penuh