NVIDIA heeft een reeks open-sourcemodellen, fysica-engines en simulatie-instrumenten ontwikkeld voor robots. Het gaat onder meer om de Newton Physics Engine, updates van het Isaac GR00T-basismodel en nieuwe Cosmos-wereldmodellen. Ze zijn bedoeld om te verbeteren hoe robots leren, redeneren en vaardigheden overdragen van simulatie naar de echte wereld.
De Newton Physics Engine – ontwikkeld in samenwerking met Google DeepMind en Disney Research – is nu beschikbaar in NVIDIA Isaac Lab. Onder beheer van de Linux Foundation biedt Newton GPU-versnelde simulaties voor complexe menselijke bewegingen, zoals lopen op oneffen terrein of het hanteren van kwetsbare objecten. Tot de eerste gebruikers behoren onder andere ETH Zürich, de Technische Universiteit van München, de Universiteit van Peking, Lightwheel en Style3D.
Ook introduceerde NVIDIA de Isaac GR00T N1.6, waarin Cosmos Reason is geïntegreerd – een open redeneermodel voor fysieke AI. Cosmos Reason stelt robots in staat om vage instructies te interpreteren, stapsgewijze plannen te maken en vaardigheden toe te passen op onbekende taken. Het model is beschikbaar via Hugging Face. Onder meer Franka Robotics, LG Electronics en Techman Robot onderzoeken het gebruik ervan voor multifunctionele robots.
De nieuwste updates aan NVIDIA’s Cosmos-wereldmodellen zijn bedoeld om divers trainingsmateriaal te genereren voor fysieke AI. De aankomende Cosmos Predict 2.5 breidt de mogelijkheden voor videosimulatie uit, terwijl Cosmos Transfer 2.5 synthetische data van hogere kwaliteit levert in een compacter model.
In Isaac Lab 2.3 is een nieuwe ‘grasping workflow’ geïntroduceerd om robots te trainen in het manipuleren van objecten onder wisselende omstandigheden. Boston Dynamics gebruikt dit systeem om de grijpmogelijkheden van zijn Atlas-humanoïde uit te breiden. NVIDIA en Lightwheel werken daarnaast aan Isaac Lab – Arena, een open-source framework voor grootschalige evaluatie van robotvaardigheden in simulatie.
Ter ondersteuning van deze toepassingen heeft NVIDIA ook nieuwe infrastructuur gepresenteerd, waaronder het GB200 NVL72 rack-scale systeem, RTX PRO Servers en Jetson Thor – een GPU-module voor realtime robotinferentie. Onder de eerste gebruikers van deze systemen bevinden zich Figure AI, Google DeepMind, Mentee Robotics en Unitree.
