Nvidia avduket nye AI- og simuleringsverktøy som forbedrer robotlæring og utvikling av humanoider. Som det største teknologiselskapet, verdsatt til $3. 432 billioner, presenterte Nvidia disse verktøyene på Conference for Robot Learning i München. Verktøyene inkluderer Nvidia Isaac Lab-rammeverket for robotlæring, seks humanoid robotlæringsprosesser under Project GR00T, og nye verktøy for videodatakurer som Nvidia Cosmos tokenizer og NeMo Curator for raskere videobehandling. Den åpen-kildekode baserte Cosmos tokenizer tilbyr forbedret visuell tokenisering, og opererer opptil 12 ganger raskere enn nåværende alternativer, mens NeMo Curator akselererer videobehandling opptil syv ganger raskere. Nvidia lanserte også 23 artikler og ni workshops relatert til robotlæring, og har inngått samarbeid med Hugging Face for å fremme forskning på åpen-kildekode robotikk. Nvidia Isaac Lab er bygget på Nvidia Omniverse-plattformen, og støtter skalerbar robotpolitikktrening for ulike robotformer. Det blir tatt i bruk av ledende organisasjoner som Boston Dynamics og Agility Robotics. Project GR00T, fokusert på utvikling av humanoider, tilbyr seks prosesser med blåkopier for komplekse robotkapasiteter.

Disse verktøyene har som mål å bygge verdendsmodeller for AI-representasjoner, noe som krever betydelige datakraftressurser og høykvalitets datakurasjon. Cosmos tokenizer forbedrer videodataeffektiviteten, og sikrer høykvalitets videorekonstruksjoner og komprimering opptil 12 ganger raskere. Den har blitt vellykket integrert i datasett som 1X World Model Challenge. I mellomtiden optimaliserer NeMo Curator, nå med en videobehandlingspipeline, datakurasjon ved å håndtere storskala tekst-, bilde- og videodata for skalerbar, effektiv utvikling. Nvidia Isaac Lab 1. 2 og Cosmos tokenizer er nå globalt tilgjengelige på GitHub. NeMo Curator for videobehandling kommer i slutten av måneden. Nye prosesser for Project GR00T vil snart bli utgitt for å fremme humanoid robotikk. Utviklerguider og opplæringsveiledninger for Isaac Lab, inkludert en migreringsguide fra Isaac Gym, er også nå tilgjengelige.