Een huishoudrobot die zelfstandig de was doet, opruimt of ouderen assisteert in de zorg klinkt als een scène uit een futuristische sciencefictionfilm. Toch is deze toekomst sneller nabij dan men denkt. Tijdens een meeslepende demonstratie lieten NVIDIA Omniverse Ambassador Kimate Richards (oprichter van 10Things) en Oliver Choy (COO van 10Things) zien hoe de nieuwste NVIDIA-robotica-stack wordt ingezet om een echte, fysieke robot autonoom te laten werken.
📸 De samensmelting van simulatie en fysieke realiteit
Het ontwikkelen van een robot die veilig en efficiënt door een menselijke huiskamer navigeert is een enorm complexe taak. Een verplaatste stoel, een slapend huisdier of veranderende lichtinval: de fysieke wereld is extreem onvoorspelbaar. Om deze obstakels te overwinnen maakt het team van 10Things slim gebruik van het NVIDIA-ecosysteem.
Centraal in dit proces staat NVIDIA Isaac Sim, een geavanceerd platform waarmee ontwikkelaars fysiek nauwkeurige virtuele werelden creëren. In plaats van een prototype honderden keren te laten crashen in een echte ruimte, leert de robot eerst in een digitale tweeling (digital twin) hoe hij moet bewegen, navigeren en objecten moet grijpen.
🥽 Menselijke teleoperatie met de Apple Vision Pro
Een van de meest fascinerende onderdelen van de workflow is hoe menselijke bewegingen worden omgezet in waardevolle trainingsdata. Kimate Richards en Oliver Choy lieten zien hoe de Apple Vision Pro wordt ingezet voor teleoperatie.
Door de ruimtelijke computerbril op te zetten, kan een menselijke operator op afstand exact zien wat de robot ziet en de robotarmen in reële tijd aansturen. Deze interactie dient niet alleen voor directe bediening, maar is primair een methode om hoogwaardige trainingsgegevens te verzamelen. De robot leert door simpelweg 'af te kijken' hoe een mens alledaagse huishoudelijke taken uitvoert.
💡 Wat leert de ontwikkelaar tijdens deze sessie?
- Isaac Sim & Isaac Lab: Het virtueel bouwen, testen en trainen van een fysieke huishoudrobot.
- Apple Vision Pro: Teleoperatie voor intuïtieve gegevensverzameling en demonstratietraining.
- AI-Modellen (GR00T & Cosmos): Integratie voor fysieke redenering, omgevingsperceptie en evaluatie.
- Jetson Thor & Isaac ROS: Onboard rekenkracht voor actuele navigatie via Visual SLAM en bewegingsplanning.
- Isaac Assist: Een door 10Things ontwikkelde Omniverse-extensie om de simulatie-workflow te stroomlijnen.
🧠 De intelligente architectuur van robot 'Ada'
In het bijzonder richten Richards en Choy de schijnwerpers op Ada, een geavanceerde robot gericht op ouderenzorg en huishoudelijke ondersteuning. De rekenkracht die nodig is om Ada zelfstandig te laten handelen, bevindt zich direct aan boord van de machine. Het NVIDIA Jetson Thor-platform draait op Isaac ROS (Robot Operating System) en verzorgt in real-time de navigatie, omgevingsperceptie en bewegingsplanning.
Bovendien maken geavanceerde AI-modellen zoals NVIDIA Cosmos en GR00T deel uit van de software-architectuur. Deze modellen helpen de robot om fysieke logica te begrijpen — zoals het verschil in gewicht, vorm en breekbaarheid van voorwerpen — en stellen de robot in staat om autonoom beslissingen te nemen.
⚙️ Van CAD-model naar de praktijk: Wat werkt en wat niet?
De overstap van simulatie naar de fysieke werkelijkheid (de zogenaamde sim-to-real gap) blijft een van de grootste uitdagingen in de robotica. De ontwerpers lieten stapsgewijs zien hoe een robot transformeert van een primair CAD-ontwerp tot een functioneel product.
Een belangrijke innovatie uit de koker van 10Things is Isaac Assist, een Omniverse-extensie die repetitieve taken binnen de simulatie automatiseert. Tijdens de demonstratie werd ook eerlijk gesproken over de geleerde lessen: wat in de simulatie vlekkeloos werkt, vereist in de echte wereld vaak correctie. Sensorruis, fysieke wrijving en slijtage vragen om innovatieve oplossingen zoals Newton Physics voor realistischere fysica-simulaties.
