Νέα

Χρησιμοποιώντας το Apple Vision Pro για τον έλεγχο ρομπότ από απόσταση, NVIDIA: Δεν είναι δύσκολο να "ενσωματώσεις άνθρωπο και μηχανή"

2024-07-31

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Αναφορά Machine Heart

Επιμέλεια: Du Wei, Chen Chen

Ο Huang Renxun είπε: «Το επόμενο κύμα της τεχνητής νοημοσύνης είναι τα ρομπότ και μία από τις πιο συναρπαστικές εξελίξεις είναι τα ανθρωποειδή ρομπότ Σήμερα, το Project GR00T έκανε ένα άλλο σημαντικό βήμα».

Χθες, ο ιδρυτής της NVIDIA Huang Jensen μίλησε για το παγκόσμιο βασικό μοντέλο ανθρωποειδούς ρομπότ "Project GR00T" στην κεντρική ομιλία του SIGGRAPH 2024. Το μοντέλο λαμβάνει μια σειρά ενημερώσεων όσον αφορά τη λειτουργικότητα.

Ο Zhu Yuke, επίκουρος καθηγητής στο Πανεπιστήμιο του Τέξας στο Ώστιν και ανώτερος ερευνητής στην NVIDIA, έγραψε στο Twitter, δείχνοντας σε ένα βίντεο πώς η NVIDIAΤο γενικό πλαίσιο εκπαίδευσης προσομοίωσης οικιακού ρομπότ μεγάλης κλίμακας, τα συστήματα RoboCasa και MimicGen είναι ενσωματωμένα στην πλατφόρμα NVIDIA Omniverse και στην πλατφόρμα ανάπτυξης ρομπότ Isaac



Πηγή εικόνας: https://x.com/yukez/status/1818092679936299373

Το βίντεο καλύπτει τρεις από τις πλατφόρμες υπολογιστών της Nvidia, συμπεριλαμβανομένων των AI, Omniverse και Jetson Thor, που τις χρησιμοποιούν για να απλοποιήσουν και να επιταχύνουν τις ροές εργασίας προγραμματιστών. Μέσω της κοινής ενδυνάμωσης αυτών των υπολογιστικών πλατφορμών, αναμένεται να εισέλθουμε στην εποχή των ανθρωποειδών ρομπότ που οδηγούνται από φυσική τεχνητή νοημοσύνη.



Το μεγαλύτερο χαρακτηριστικό είναι ότι οι προγραμματιστές μπορούν να χρησιμοποιήσουν το Apple Vision Pro για τον απομακρυσμένο έλεγχο ανθρωποειδών ρομπότ για την εκτέλεση εργασιών.







Την ίδια στιγμή, ο Jim Fan, άλλος ανώτερος ερευνητής της Nvidia, είπε ότι οι ενημερώσεις στο Project GR00T είναι συναρπαστικές. Η NVIDIA χρησιμοποιεί μια συστηματική προσέγγιση για την κλιμάκωση των δεδομένων ρομποτικής για την επίλυση των πιο δύσκολων προκλήσεων στη ρομποτική.

Η ιδέα είναι επίσης απλή: οι άνθρωποι συλλέγουν δεδομένα επίδειξης σε πραγματικά ρομπότ και η NVIDIA επεκτείνει αυτά τα δεδομένα κατά χίλιες ή περισσότερες φορές σε προσομοιώσεις. Μέσω της προσομοίωσης επιταχυνόμενης με GPU, οι άνθρωποι μπορούν πλέον να ανταλλάσσουν υπολογιστική ισχύ για τη χρονοβόρα, εντατική και οικονομική εργασία της συλλογής ανθρώπινων δεδομένων.

Μιλάει για το πόσο πριν από λίγο καιρό πίστευε ότι ο τηλεχειρισμός ήταν ουσιαστικά μη κλιμακωτός, επειδή στον ατομικό κόσμο ήμασταν πάντα περιορισμένοι σε 24 ώρες/ρομπότ/ημέρες. Ο νέος αγωγός συνθετικών δεδομένων που υιοθετήθηκε από την NVIDIA στο GR00T σπάει αυτόν τον περιορισμό στον κόσμο των bit.



Πηγή εικόνας: https://x.com/DrJimFan/status/1818302152982343983

Όσον αφορά την τελευταία πρόοδο της NVIDIA στον τομέα των ανθρωποειδών ρομπότ, ορισμένοι χρήστες του Διαδικτύου είπαν ότι το Apple Vision Pro βρήκε την πιο cool περίπτωση χρήσης.



Η NVIDIA αρχίζει να ηγείται του επόμενου κύματος: φυσική AI

Η NVIDIA εξήγησε επίσης την τεχνική διαδικασία της επιτάχυνσης των ανθρωποειδών ρομπότ σε ένα ιστολόγιο Το πλήρες περιεχόμενο έχει ως εξής:

Για να επιταχύνει την ανάπτυξη ανθρωποειδών ρομπότ παγκοσμίως, η NVIDIA ανακοίνωσε ένα σύνολο υπηρεσιών, μοντέλων και πλατφορμών υπολογιστών για τους κορυφαίους κατασκευαστές ρομπότ στον κόσμο, τους προγραμματιστές μοντέλων τεχνητής νοημοσύνης και τους κατασκευαστές λογισμικού για την ανάπτυξη, την εκπαίδευση και την κατασκευή της επόμενης γενιάς ανθρωποειδών ρομπότ.



Η σουίτα προϊόντων περιλαμβάνει νέες μικροϋπηρεσίες και πλαίσια NVIDIA NIM για προσομοίωση και εκμάθηση ρομποτικής, υπηρεσίες ενορχήστρωσης NVIDIA OSMO για εκτέλεση φόρτου εργασίας ρομποτικής πολλαπλών σταδίων και ροές εργασιών απομακρυσμένων λειτουργιών με δυνατότητα AI και προσομοίωσης που επιτρέπουν στους προγραμματιστές να χρησιμοποιούν μια μικρή ποσότητα ανθρώπινων δεδομένων επίδειξης εκπαιδεύστε το bot.

Ο Jensen Huang είπε: "Το επόμενο κύμα τεχνητής νοημοσύνης είναι η ρομποτική και μία από τις πιο συναρπαστικές εξελίξεις είναι τα ανθρωποειδή ρομπότ. Προχωράμε στην ανάπτυξη ολόκληρης της στοίβας ρομποτικών NVIDIA, καθιστώντας την ανοιχτή σε προγραμματιστές και εταιρείες ανθρωποειδών ρομπότ σε όλο τον κόσμο, έτσι ότι μπορούν να χρησιμοποιήσουν την πλατφόρμα, τη βιβλιοθήκη επιτάχυνσης και το μοντέλο AI που ανταποκρίνεται καλύτερα στις ανάγκες τους."



Επιταχύνετε την ανάπτυξη με NVIDIA NIM και OSMO

Οι μικροϋπηρεσίες NIM παρέχουν προκατασκευασμένα κοντέινερ που τροφοδοτούνται από λογισμικό συμπερασμάτων NVIDIA, επιτρέποντας στους προγραμματιστές να μειώσουν τον χρόνο ανάπτυξης από εβδομάδες σε λεπτά.

Δύο νέες μικροϋπηρεσίες τεχνητής νοημοσύνης θα επιτρέψουν στους ειδικούς της ρομποτικής να βελτιώσουν τις ροές εργασιών προσομοίωσης τεχνητής νοημοσύνης γενετικής φυσικής στο NVIDIA Isaac Sim.

Η μικρουπηρεσία MimicGen NIM δημιουργεί δεδομένα συνθετικής κίνησης από απομακρυσμένα δεδομένα που καταγράφονται από χωρικές υπολογιστικές συσκευές όπως το Apple Vision Pro. Η μικρουπηρεσία Robocasa NIM δημιουργεί εργασίες ρομπότ και περιβάλλοντα προσομοίωσης στο OpenUSD.

Η NVIDIA OSMO, μια εγγενής διαχειριζόμενη υπηρεσία στο cloud, είναι πλέον διαθέσιμη, επιτρέποντας στους χρήστες να ενορχηστρώνουν και να κλιμακώνουν πολύπλοκες ροές εργασιών ανάπτυξης ρομποτικής σε κατανεμημένους υπολογιστικούς πόρους, είτε εντός εγκατάστασης είτε στο cloud. Η εμφάνιση του OSMO απλοποιεί σημαντικά τις ροές εργασίας εκπαίδευσης και προσομοίωσης ρομπότ, συντομεύοντας τους κύκλους ανάπτυξης και ανάπτυξης από μήνες σε λιγότερο από μία εβδομάδα.

Προηγμένη ροή εργασιών καταγραφής δεδομένων για προγραμματιστές ανθρωποειδών ρομπότ

Η εκπαίδευση των υποκείμενων μοντέλων πίσω από τα ανθρωποειδή ρομπότ απαιτεί τεράστιες ποσότητες δεδομένων. Ένας τρόπος απόκτησης δεδομένων ανθρώπινης επίδειξης είναι η χρήση απομακρυσμένων λειτουργιών, αλλά αυτό γίνεται όλο και πιο ακριβό και χρονοβόρο.

Μέσω της ροής εργασιών αναφοράς απομακρυσμένης λειτουργίας NVIDIA AI και Omniverse που παρουσιάστηκε στο συνέδριο γραφικών υπολογιστών SIGGRAPH, οι ερευνητές και οι προγραμματιστές τεχνητής νοημοσύνης μπορούν να δημιουργήσουν μεγάλες ποσότητες δεδομένων συνθετικής κίνησης και αντίληψης από έναν πολύ μικρό αριθμό ανθρώπινων επιδείξεων που έχουν καταγραφεί εξ αποστάσεως.



Πρώτον, οι προγραμματιστές χρησιμοποίησαν το Apple Vision Pro για να καταγράψουν έναν μικρό αριθμό απομακρυσμένων επιδείξεων. Στη συνέχεια προσομοίωσαν τις εγγραφές στο NVIDIA Isaac Sim και χρησιμοποίησαν τη μικρουπηρεσία MimicGen NIM για να δημιουργήσουν συνθετικά σύνολα δεδομένων από τις εγγραφές.

Οι προγραμματιστές χρησιμοποίησαν πραγματικά και συνθετικά δεδομένα για να εκπαιδεύσουν το μοντέλο βάσης ανθρωποειδών ρομπότ Project GR00T, εξοικονομώντας πολύ χρόνο και μειώνοντας το κόστος. Στη συνέχεια χρησιμοποίησαν τις μικροϋπηρεσίες Robocasa NIM στο Isaac Lab, ένα πλαίσιο εκμάθησης ρομπότ, για να δημιουργήσουν εμπειρία για την επανεκπαίδευση του μοντέλου ρομπότ. Καθ' όλη τη διάρκεια της ροής εργασίας, το NVIDIA OSMO κατανέμει απρόσκοπτα τις υπολογιστικές εργασίες σε διαφορετικούς πόρους, εξοικονομώντας εβδομάδες φόρτου εργασίας στους προγραμματιστές.

Διευρυμένη πρόσβαση στην τεχνολογία προγραμματιστών ανθρωποειδών ρομποτικών NVIDIA

Η NVIDIA παρέχει τρεις υπολογιστικές πλατφόρμες για την απλούστευση της ανάπτυξης των ανθρωποειδών ρομπότ: NVIDIA AI για μοντέλα εκπαίδευσης, ώστε τα ρομπότ να μπορούν να μάθουν και να τελειοποιήσουν τις δεξιότητές τους σε έναν προσομοιωμένο κόσμο και NVIDIA για μοντέλα ρομπότ Jetson Thor. Οι προγραμματιστές μπορούν να έχουν πρόσβαση και να χρησιμοποιούν το σύνολο ή μέρη της πλατφόρμας με βάση τις συγκεκριμένες ανάγκες τους.

Μέσω του νέου προγράμματος NVIDIA Humanoid Developer, οι προγραμματιστές έχουν έγκαιρη πρόσβαση σε νέα προϊόντα και τις πιο πρόσφατες εκδόσεις των NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor και Project GR00T καθολικών βασικών μοντέλων ανθρωποειδών.

1x, Boston Dynamics, ByteDance, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra και Skild AI είναι οι πρώτες εταιρείες που εντάσσονται στο πρόγραμμα έγκαιρης πρόσβασης.

Οι προγραμματιστές μπορούν πλέον να εγγραφούν στο Πρόγραμμα προγραμματιστών NVIDIA Humanoid για να αποκτήσουν πρόσβαση στο NVIDIA OSMO και στο Isaac Lab και σύντομα θα αποκτήσουν πρόσβαση στις μικροϋπηρεσίες NVIDIA NIM.

Σύνδεσμος ιστολογίου:

https://nvidianews.nvidia.com/news/nvidia-accelerates-worldwide-humanoid-robotics-development