NVIDIA heeft vandaag Project GR00T aangekondigd, een algemeen foundationeel model voor humanoïde robots, ontworpen om hun vooruitgang in robotica en belichaamde kunstmatige intelligentie aan te drijven. Als onderdeel van dit initiatief heeft het bedrijf ook een nieuwe computer onthuld, Jetson Thor, voor humanoïde robots gebaseerd op de system-on-chip (SoCEen SOC, afkorting voor Security Operations Center (centrum van…) NVIDIA Thor, evenals significante verbeteringen aan het NVIDIA Isaac™ robotica platform, inclusief generatieve AI foundationele modellen en hulpmiddelen voor simulatie en AI workflow infrastructuur.
«Het bouwen van foundationele modellen voor algemene humanoïde robots is een van de meest opwindende problemen om vandaag in AI op te lossen», verklaarde Jensen Huang, oprichter en CEO van NVIDIA. «De enabling technologies komen samen zodat de wereldwijde topexperts op het gebied van robotica enorme stappen kunnen zetten richting algemene artificiële robotica».
De robots aangedreven door GR00T, wat staat voor Generalist Robot Technology 00, zullen ontworpen worden om natuurlijke taal te begrijpen en menselijke bewegingen te emuleren door het observeren van menselijke acties, snel coördinatie, behendigheid en andere vaardigheden leren om te navigeren, aan te passen en te interageren met de echte wereld. Tijdens zijn GTC keynotespeech toonde Huang verschillende van deze robots die een verscheidenheid aan taken uitvoerden.
Jetson Thor is gecreëerd als een nieuw computerplatform dat in staat is tot uitvoeren van complexe taken en veilig en natuurlijk interactie met mensen en machines. Het bezit een modulaire architectuur geoptimaliseerd voor prestaties, macht en grootte. De SoC bevat een volgende-generatie GPU gebaseerd op de NVIDIA Blackwell architectuur met een transformator motor die 800 teraflops van 8-bit floating-point AI prestaties levert om multimodale generatieve AI modellen zoals GR00T uit te voeren. Met een ingebouwde functionele veiligheidsprocessor, een high-performance CPU cluster en een 100 GB ethernet bandbreedte, vereenvoudigt het aanzienlijk de ontwerp- en integratie-inspanningen.
NVIDIA is bezig met het bouwen van een complete AI-platform voor toonaangevende humanoïde robotbedrijven zoals 1X Technologies, Agility Robotics, Apptronik, Boston Dynamics, Figure AI, Fourier Intelligence, Sanctuary AI, Unitree Robotics en XPENG Robotics, onder anderen.
«We staan op een keerpunt in de geschiedenis, met op mensen gerichte robots zoals Digit die op het punt staan het werk voor altijd te veranderen. Moderne AI zal de ontwikkeling versnellen, de weg effenen voor robots zoals Digit om mensen te helpen bij alle aspecten van het dagelijks leven», zegt Jonathan Hurst, medeoprichter en CTO van Agility Robotics. «We zijn enthousiast om samen te werken met NVIDIA om te investeren in computer, simulatietools, machine learning-omgevingen en andere infrastructuren die nodig zijn om de droom van robots als onderdeel van het dagelijks leven te realiseren».
«Belichaamde AI zal niet alleen helpen enkele van de grootste uitdagingen van de mensheid aan te pakken, maar zal ook innovaties creëren die momenteel buiten ons bereik of onze verbeelding liggen», zegt Geordie Rose, medeoprichter en CEO van Sanctuary AI. «Zo’n belangrijke technologie zou niet in silo’s gebouwd moeten worden, daarom geven we de voorkeur aan langetermijnpartners zoals NVIDIA».
De Isaac-tools die door GR00T worden gebruikt zijn in staat om nieuwe foundationele modellen te creëren voor elke incarnatie van een robot in elke omgeving. Onder deze hulpmiddelen bevinden zich Isaac Lab voor reinforcement learning en OSMO, een service voor computer orchestratie.
Belichaamde AI modellen vereisen enorme hoeveelheden echte en synthetische gegevens. De nieuwe Isaac Lab is een lichte, prestatie geoptimaliseerde en GPU-versnelde toepassing, gebouwd op Isaac Sim specifiek voor het uitvoeren van duizenden parallelle simulaties voor robotleren.
Om robotontwikkelingswerkzaamheden te schalen in heterogene computingomgevingen, coördineert OSMO de workflows van gegevensgeneratie, modeltraining en software/hardware in-lus in gedistribueerde omgevingen.
NVIDIA heeft ook Isaac Manipulator en Isaac Perceptor aangekondigd, een verzameling van vooraf getrainde modellen, bibliotheken en referentiehardware voor robotica.
Isaac Manipulator biedt state-of-the-art behendige en modulaire AI-capaciteiten voor robotarmen, met een robuuste collectie foundationele modellen en GPU-versnelde bibliotheken. Het biedt tot 80 keer meer snelheid in trajectplanning en zero-shot waarneming verhoogt de efficiëntie en prestatie, waardoor ontwikkelaars een groter aantal nieuwe robotische taken kunnen automatiseren. Onder de eerste ecosysteempartners bevinden zich Yaskawa, Universal Robots, een bedrijf van Teradyne, PickNik Robotics, Solomon, READY Robotics en Franka Robotics.
Isaac Perceptor biedt 3D-omni-visie mogelijkheden met meerdere camera’s, die steeds vaker worden gebruikt in autonome mobiele robots geadopteerd in productie- en nalevingsoperaties om de efficiëntie en veiligheid van de werkers te verbeteren, evenals het verminderen van foutenpercentages en kosten. Onder de eerste gebruikers bevinden zich ArcBest, BYD en KION Group, die streven naar nieuwe niveaus van autonomie in materiaalbehandelingsoperaties en meer.
