NVIDIA heeft nieuwe diensten en platforms aangekondigd die gericht zijn op het versnellen van de ontwikkeling van humanoïde robots. Tijdens de SIGGRAPH-conferentie onthulde het bedrijf onder andere NVIDIA NIM-microservices, de OSMO-orkestratieservice en een workflow voor teleoperatieve gegevensverzameling. Deze tools zijn bedoeld om robotfabrikanten, ontwikkelaars van AI-modellen en softwaremakers te ondersteunen bij het bouwen van de volgende generatie humanoïde robots.
De NIM-microservices, aangedreven door NVIDIA’s inferentiesoftware, bieden voorgebouwde containers die de implementatie stroomlijnen, waardoor de benodigde tijd van weken tot minuten wordt teruggebracht. Twee opmerkelijke microservices, MimicGen en Robocasa, verbeteren de simulatieworkflows in NVIDIA Isaac Sim™, een roboticasimulatie-applicatie die is gebouwd op het NVIDIA Omniverse™-platform. MimicGen genereert synthetische bewegingsgegevens op basis van teleoperatieve opnames, terwijl Robocasa robots taken laat uitvoeren en simulatieklare omgevingen creëert in OpenUSD.
De OSMO-service, een cloud-native oplossing, maakt orkestratie en schaalvergroting van complexe robotica-workflows mogelijk, waaronder synthetische gegevensgeneratie, modeltraining en reinforcement learning. Deze service is bedoeld om de implementatie- en ontwikkelingscycli van maanden tot minder dan een week te verkorten.
NVIDIA’s nieuwe teleoperatie-workflow, gedemonstreerd op SIGGRAPH, stelt gebruikers in staat om uitgebreide synthetische bewegings- en perceptiegegevens te genereren met behulp van minimale menselijke demonstraties. Dit proces omvat het vastleggen van een klein aantal teleoperatieve demonstraties met Apple Vision Pro, het simuleren van de opnames in Isaac Sim en het genereren van synthetische datasets via de MimicGen-microservice. Deze datasets worden vervolgens gebruikt om het Project GR00T-humanoïde basismodel te trainen, wat het modelontwikkelingsproces vereenvoudigt.
Daarnaast introduceerde het bedrijf het NVIDIA Humanoid Robot Developer Program, dat vroege toegang biedt tot NVIDIA’s technologieën, waaronder Isaac Sim, Isaac Lab, Jetson Thor-humanoïde robotcomputers en Project GR00T-modellen. Bedrijven zoals 1x, Boston Dynamics, ByteDance Research en anderen hebben zich al bij het programma aangesloten, dat tot doel heeft de beste technologie te bieden voor de vooruitgang van humanoïde robotica.