uutiset

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Koneen sydänraportti

Toimittaja: Du Wei, Chen Chen

Huang Renxun sanoi: "Tekoälyn seuraava aalto ovat robotit, ja yksi jännittävimmistä kehityksestä on humanoidirobotit." Tänään Project GR00T on ottanut toisen tärkeän askeleen.

NVIDIAn perustaja Huang Jensen puhui eilen SIGGRAPH 2024 Keynote -puheessaan humanoidirobotin "Project GR00T" universaalista perusmallista. Malli saa sarjan toiminnallisia päivityksiä.

Zhu Yuke, apulaisprofessori Texasin yliopistosta Austinista ja vanhempi tutkija NVIDIA:sta, twiittasi ja esitti videolla, kuinka NVIDIAYleinen kotitalousrobotin laajamittainen simulaatiokoulutuskehys RoboCasa- ja MimicGen-järjestelmät on integroitu NVIDIA Omniverse -alustaan ​​ja Isaac-robotin kehitysalustaan。

Kuvan lähde: https://x.com/yukez/status/1818092679936299373

Video kattaa kolme Nvidian omaa laskenta-alustaa, mukaan lukien tekoäly, Omniverse ja Jetson Thor, jotka käyttävät niitä kehittäjien työnkulkujen yksinkertaistamiseen ja nopeuttamiseen. Näiden laskenta-alustojen yhteisen voimaantumisen myötä meidän odotetaan siirtyvän fyysisen tekoälyn ohjaamien humanoidirobottien aikakauteen.

Suurin kohokohta on, että kehittäjät voivat käyttää Apple Vision Prota humanoidirobottien etäohjaukseen tehtävien suorittamiseen.

Samaan aikaan Jim Fan, toinen Nvidian vanhempi tutkija, sanoi, että Project GR00T:n päivitykset ovat jännittäviä. NVIDIA käyttää systemaattista lähestymistapaa robotiikkatietojen skaalaukseen ratkaistakseen robotiikan vaikeimmat haasteet.

Idea on myös yksinkertainen: ihmiset keräävät demonstraatiodataa oikeista roboteista, ja NVIDIA laajentaa tätä dataa tuhatkertaisesti tai enemmän simulaatioissa. GPU-kiihdytetyn simulaation avulla ihmiset voivat nyt vaihtaa laskentatehoa aikaa vievään, työvoimavaltaiseen ja rahaa vievään ihmisten tiedonkeruun työhön.

Hän kertoo, kuinka vähän aikaa sitten hän ajatteli, että kauko-ohjaus oli pohjimmiltaan skaalautumaton, koska atomimaailmassa olimme aina rajoitettu 24 tuntiin/roboteihin/vuorokausiin. NVIDIA:n GR00T:ssä käyttämä uusi synteettinen dataputki rikkoo tämän bittimaailman rajoituksen.

Kuvan lähde: https://x.com/DrJimFan/status/1818302152982343983

Mitä tulee NVIDIAn viimeisimpään edistykseen humanoidirobottien alalla, jotkut verkkokauppiaat sanoivat, että Apple Vision Pro on löytänyt tyylikkäimmän käyttötavan.

NVIDIA alkaa johtaa seuraavaa aaltoa: fysiikan tekoälyä

NVIDIA kuvasi myös yksityiskohtaisesti humanoidirobottien kiihdyttämisen teknisen prosessin. Koko sisältö on seuraava:

Nopeuttaakseen humanoidirobottien kehitystä maailmanlaajuisesti NVIDIA julkisti joukon palveluita, malleja ja laskenta-alustoja maailman johtaville robottivalmistajille, tekoälymallien kehittäjille ja ohjelmistovalmistajille, jotka voivat kehittää, kouluttaa ja rakentaa seuraavan sukupolven humanoidirobotteja.

Tuotepaketti sisältää uudet NVIDIA NIM -mikropalvelut ja -kehykset robotiikan simulointiin ja oppimiseen, NVIDIA OSMO -orkesteripalvelut monivaiheisten robotiikkatyökuormien suorittamiseen sekä tekoäly- ja simulaatiopohjaisia ​​etätoimintojen työnkulkuja, joiden avulla kehittäjät voivat käyttää pientä määrää ihmisen esittelydataa kouluttaa bottia.

Jensen Huang sanoi: "Tekoälyn seuraava aalto on robotiikka, ja yksi jännittävimmistä kehityksestä on humanoidirobotit. Edistämme koko NVIDIA-robotiikkapinon kehitystä, jolloin se on avoin humanoidirobottien kehittäjille ja yrityksille ympäri maailmaa, joten että he voivat käyttää alustaa, kiihdytyskirjastoa ja tekoälymallia, joka parhaiten vastaa heidän tarpeisiinsa."

Nopeuta kehitystä NVIDIA NIM:llä ja OSMO:lla

NIM-mikropalvelut tarjoavat valmiiksi rakennettuja NVIDIA-päätelmäohjelmistolla toimivia säiliöitä, joiden avulla kehittäjät voivat lyhentää käyttöönottoaikaa viikoista minuutteihin.

Kahden uuden tekoälymikropalvelun avulla robotiikan asiantuntijat voivat parantaa generatiivisen fysiikan tekoälysimulaatioiden työnkulkuja NVIDIA Isaac Simissa.

MimicGen NIM -mikropalvelu luo synteettistä liiketietoa etätiedoista, jotka on tallennettu paikkatietolaitteista, kuten Apple Vision Prosta. Robocasa NIM -mikropalvelu luo robottitehtäviä ja simulaatioympäristöjä OpenUSD:ssä.

NVIDIA OSMO, pilvipohjainen hallittu palvelu, on nyt saatavilla, ja sen avulla käyttäjät voivat organisoida ja skaalata monimutkaisia ​​robotiikan kehitystyönkulkuja hajautettujen laskentaresurssien välillä joko paikan päällä tai pilvessä. OSMO:n ilmestyminen yksinkertaistaa huomattavasti robottien koulutusta ja simulointityönkulkua, mikä lyhentää käyttöönotto- ja kehitysjaksoja kuukausista alle viikkoon.

Kehittynyt tiedonkeruun työnkulku humanoidirobottien kehittäjille

Humanoidirobottien taustalla olevien mallien kouluttaminen vaatii valtavia tietomääriä. Yksi tapa saada ihmisen esittelydataa on käyttää etätoimintoja, mutta siitä on tulossa yhä kalliimpaa ja pitkäkestoisempaa.

SIGGRAPH-tietokonegrafiikkakonferenssissa esitellyn NVIDIA AI- ja Omniverse-etäkäytön viitetyönkulun avulla tutkijat ja tekoälykehittäjät voivat tuottaa suuria määriä synteettistä liike- ja havaintodataa hyvin pienestä määrästä etäkaappauksia.

Ensinnäkin kehittäjät käyttivät Apple Vision Prota pienten etäesittelyjen tallentamiseen. Sitten he simuloivat tallenteita NVIDIA Isaac Sim -sovelluksella ja käyttivät MimicGen NIM -mikropalvelua synteettisten tietojoukkojen luomiseen tallenteista.

Kehittäjät käyttivät todellista ja synteettistä dataa kouluttaakseen Project GR00T humanoidirobotin perusmallia, mikä säästää paljon aikaa ja pienensi kustannuksia. Sitten he käyttivät Robocasa NIM -mikropalveluita Isaac Labissa, robottioppimiskehyksessä, luodakseen kokemusta robottimallin uudelleenkouluttamisesta. Koko työnkulun ajan NVIDIA OSMO jakaa laskentatehtävät saumattomasti eri resursseihin, mikä säästää kehittäjien viikkojen hallinnollista työtaakkaa.

Laajennettu pääsy NVIDIA:n humanoidirobotiikan kehittäjäteknologiaan

NVIDIA tarjoaa kolme laskenta-alustaa humanoidirobottien kehittämisen yksinkertaistamiseksi: NVIDIA AI -supertietokone harjoitusmalleille; NVIDIA Isaac Sim on rakennettu Omniverseen, jotta robotit voivat oppia ja parantaa taitojaan simuloidussa maailmassa, ja NVIDIA Jetson Thor -humanoidirobottitietokoneiden juoksemiseen. Kehittäjät voivat käyttää koko alustaa tai sen osia erityistarpeidensa perusteella.

Uuden NVIDIA Humanoid Developer Program -ohjelman kautta kehittäjät pääsevät nopeasti käsiksi uusiin tuotteisiin ja NVIDIA Isaac Simin, NVIDIA Isaac Labin, Jetson Thorin ja Project GR00T:n universaalien humanoidiperusmallien uusimpiin versioihin.

1x, Boston Dynamics, ByteDance, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra ja Skild AI ovat ensimmäisiä yrityksiä, jotka liittyvät varhaisen pääsyn ohjelmaan.

Kehittäjät voivat nyt liittyä NVIDIA Humanoid Developer Program -ohjelmaan saadakseen pääsyn NVIDIA OSMO:hon ja Isaac Labiin, ja pian he saavat pääsyn myös NVIDIA NIM -mikropalveluihin.

Linkki blogiin:

https://nvidianews.nvidia.com/news/nvidia-accelerates-worldwide-humanoid-robotics-development