På konferansen for robotlæring i München kunngjorde Hugging Face og NVIDIA et partnerskap for å fremme robotikkforskning ved å integrere deres åpen kildekode-miljøer. Dette samarbeidet sammensmelter Hugging Face sin LeRobot AI-plattform med NVIDIA sine AI-, Omniverse- og Isaac-robotikkteknologier for å drive innovasjoner på tvers av bransjer som produksjon, helsevesen og logistikk. Fysisk AI, hvor roboter forstår det fysiske miljøet, er i ferd med å omforme ulike sektorer. Åpen kildekode-rammeverk er essensielle for kontinuerlig innovasjon innen robotikk, og legger til rette for trenings-, simulerings- og resultatprosessene. Hugging Face sin plattform, med over 5 millioner utviklere, tilbyr verktøy for tilgang til og justering av forhåndstrente modeller. LeRobot, som tilpasser vellykkede paradigmer fra Hugging Face sine AI-biblioteker, gir ressurser for datadeling, modelltrening og rimelige manipulatorkits. NVIDIA støtter dette gjennom sin AI-teknologi og Isaac Lab, som forbedrer LeRobot sine arbeidsprosesser. Deling av datasett og modeller via LeRobot og Isaac Lab skaper et samarbeidsdrevet data-miljø for robotikkfellesskapet.

Utfordringer med utvikling av fysisk AI, som datainnsamling for robotikk, blir mindre ved hjelp av Isaac Lab. Denne plattformen bruker høyoppløselige simuleringer for å generere omfattende treningsdata, lik mange reelle opplevelser. Vellykket simuleringsopplæring informerer distribusjon av roboter i den virkelige verden og forbedrer robotsystemer med robust ytelse. Ved å dele ressurser på Hugging Face, bygger utviklere på hverandres arbeid, som fremmer rask fremgang. Animesh Garg fra Georgia Tech understreker viktigheten av samfunnssamarbeid for å akselerere AI-drevet robotinnovasjon. Arbeidsflyten inkluderer datainnsamling i Isaac Lab, trening av politikk med imitasjonslæring og implementering på virkelige roboter med NVIDIA Jetson. De første samarbeidene har vist et fysisk oppsett med LeRobot på NVIDIA Jetson Orin Nano, som viser potensialet ved å kombinere Hugging Face sitt samfunn med NVIDIA sin maskinvare og Isaac Lab-simulering. Dette partnerskapet sikter mot å fremme innovasjon innen AI for robotikk, og påvirke områder fra transport til logistikk ved å utnytte NVIDIA sin generative AI-ekspertise på grensen og optimalisere flere AI-modeller med solid samfunnsstøtte.