nouvelles

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Introduction：

Le 2 juillet, "Chimp" a été lancé conjointement avec NVIDIA.Cours ouvert de robotique NVIDIA"Complété avec succès.Shu Jiaming, directeur de l'architecture des solutions, NVIDIApar"NVIDIA Isaac accélère la perception visuelle 3D des robots et la planification de la trajectoire du bras robotique》 a réalisé une émission en direct sur le thème.

L’ère des robots IA est arrivée.Basé sur la plate-forme robotique NVIDIA Isaac, NVIDIA utilise en permanence les dernières technologies d'IA générative et de simulation avancée pour accélérer le développement de la technologie robotique IA.

Depuis cette année, la plateforme robotique NVIDIA Isaac a reçu d'importantes mises à jour. Lors du GTC 2024 en mars, NVIDIA a publié une série de modèles de base, d'outils robotiques et de bibliothèques d'accélération GPU telles que Isaac Perceptor et Isaac Manipulator. En juin de cette année, la dernière version de NVIDIA Isaac Sim 4.0 était également officiellement disponible en téléchargement.

Isaac Perceptor pour AMR Vision AI offre aux développeurs des capacités de vision multi-caméras à 360 degrés. Cette fonction peut améliorer les capacités de vision surround 3D et la superposition spatiale de l'AMR, aider l'AMR à améliorer l'efficacité du travail et en même temps améliorer la précision de l'évitement des obstacles pour garantir la sécurité des travailleurs.

Isaac Manipulator offre une flexibilité et des capacités d'IA modulaires pour les bras robotiques. Isaac Manipulator utilise un modèle de base basé sur Transformer et une bibliothèque d'accélération GPU pour accélérer la planification du chemin, garantissant ainsi que le robot peut effectuer des tâches de manière plus fluide et plus efficace. De plus, Isaac Manipulator peut également être utilisé pour générer des poses de préhension pour le bras du robot.

La robotique alimentée par l’IA physique transformera nos industries et nos vies. Les modèles physiques d’IA sont capables de comprendre leur environnement et d’effectuer de manière autonome des tâches complexes dans le monde physique. De nombreuses tâches complexes sont difficiles à programmer et reposent sur des modèles d’IA physique génératifs entraînés à l’aide de l’apprentissage par renforcement dans un environnement de simulation. Avec NVIDIA Isaac Sim, application de référence basée sur NVIDIA Omniverse, les développeurs peuvent concevoir, simuler, tester et entraîner des robots IA et des machines autonomes dans un environnement virtuel obéissant aux lois de la physique. NVIDIA Isaac Sim aide les équipes à générer des données synthétiques, à former des stratégies de robot et à créer différents scénarios d'application en fonction de leurs besoins pour valider l'ensemble de la pile robot avant le déploiement.

Dans ce cours ouvert, M. Shu Jiaming a d'abord brièvement présenté les mises à jour importantes de la plate-forme de développement de robot NVIDIA Isaac, puis a expliqué comment utiliser Isaac Perceptor pour améliorer les capacités de perception visuelle surround 3D d'AMR, puis a discuté de l'utilisation d'Isaac Manipulator pour générer saisir les poses et accélérer la planification de la trajectoire. Enfin, l'enseignant Shu Jiaming a expliqué comment effectuer des tests et des évaluations dans Isaac Sim.

Le didacticiel PPT de l'enseignant Shu Jiaming a été téléchargé sur ce compte public [État de l'algorithme】, vous pouvez répondre au mot-clé "Isaac" obtenir.

PPT en vedette

Contrôle qualité partiel

Q1 : Quelles extensions et améliorations spécifiques Isaac Lab propose-t-il en fonction de l'orbite ?

A1 : https://isaac-sim.github.io/IsaacLab/index.html

Q2 : Le programme d'IsaacGymEnvs est-il facile à transplanter dans Isaac Sim ?

A2 : https://isaac-sim.github.io/IsaacLab/source/migration/migration_de_isaacgymenvs.html

Q3 : Quels sont les principaux moteurs de rendu intégrés à Isaac Sim et quelles sont les différences ?

A3 : https://docs.omniverse.nvidia.com/materials-and-rendering/latest/rtx-renderer.html#rtx-renderer

Lecture complète