Nvidia lanserar GR00T 2 för att lära robotar finmotorik

NVIDIA ↘ 4.30% använde öppningsdagen av Conference on Robot Learning (CoRL) i Austin, Texas, måndagen den 9 november, för att introducera GR00T 2, en öppen "världshandlingsmodell" för robotmanipulering, tillsammans med nya simuleringsverktyg och riktmärken, meddelade företaget. Forskare vid UC Berkeley, som samarbetar med NVIDIA, presenterade även "agentbaserad robotik". Det är en metod där AI-agenter skriver kontrollprogram för robotar, testar dem i simulering och reviderar dem när de misslyckas, enligt universitetet.blogs.nvidia.com+1

Tillkännagivandena speglar en bredare trend inom området, från att lära robotar att gå till att lära dem känsliga uppgifter som att ansluta kablar och montera smådelar. Konferensen pågår till den 12 november.nvidia.com

Agenter som skriver robotkod

Berkeleys ramverk Graph-as-Policy delar upp en robotuppgift i separata färdigheter, som att hitta ett objekt, planera ett grepp och röra sig utan kollisioner. AI-agenter kopplar sedan ihop dessa färdigheter till ett program och övar på det genom olika uppgiftsvariationer med hjälp av NVIDIAs simuleringsbibliotek Isaac, uppger Berkeley. I ett test byggde OpenAIs Astra-modell en fysiksimulering baserad på en kort video av en robot som torkade bort bläck från en metallstång med en svamp, och skapade sedan kontrollkod som fungerade på en verklig robot.techxplore.com

"Agentbaserad robotik utgör en saknad länk mellan modellbaserade och modellfria metoder. Det är en väg framåt som inte kräver några ytterligare data," säger Ken Goldberg, robotikforskaren vid Berkeley som leder arbetet. Berkeley-baserade Ambi Robotics använde metoderna för att uppdatera sina paketsorteringsrobotar, vilket ökade kapaciteten med mer än 15 000 paket per robot årligen, och har implementerat ändringen på 30 % av sin amerikanska flotta, rapporterade universitetet. Berkeley och NVIDIA släppte även VABAR, ett riktmärke som täcker sex industriella uppgifter med standardiserade variationer och svårighetsgrader, enligt NVIDIA.blogs.nvidia.com+1

GR00T 2 och simuleringsverktyg

GR00T 2 är byggd på NVIDIA Cosmos och tränades delvis på 100 000 timmar av video med öppen källkod ur ett mänskligt perspektiv. Enligt NVIDIA uppnådde modellen i genomsnitt 71 % framgång över 50 uppgifter med en demonstration per uppgift, och 95 % med fem. Foxconn tillämpar tekniken i servertillverkning, och Siemens utvärderar den för industriella användningsområden.blogs.nvidia.com

Isaac Lab 3.0, som blev allmänt tillgängligt vid GTC Berlin i oktober, låter agenter sätta upp träningsmiljöer. Med fysikmotorn Newton levererade den upp till 2,5 gånger högre träningsgenomströmning än Isaac Lab 2.3 i ett synbaserat färdighetstest, uppger NVIDIA. Företaget lyfte även fram DexBench, ett färdighetsriktmärke byggt med RLWRLD, och noterade att två NVIDIA-artiklar finns bland de sex finalisterna till CoRLs Best Paper Awards.investor.nvidia.com

Begränsningar kvarstår

Goldberg menar att vinsterna är tydligast i repetitivt industriellt arbete och varnar för att hushållsrobotar som viker tvätt fortfarande ligger en bit in i framtiden. Trots det är han entusiastisk. "För mig är agentbaserad robotik den mest spännande tekniska utvecklingen sedan internet 1995," sade han i NVIDIAs tillkännagivande.blogs.nvidia.com