De echte wereld is chaotisch, oneindig en volstrekt onvoorspelbaar. Voor ontwikkelaars van zogenaamde 'fysieke AI' — de intelligente systemen die zelfstandig moeten navigeren door onze fysieke werkelijkheid, zoals zelfrijdende auto's en geavanceerde robotica — vormt dat een gigantische uitdaging. Want hoe train je een machine voor een wereld waarin elke situatie uniek is? Data uit het dagelijks leven verzamelen op de schaal die nodig is voor superintelligente modellen, grenst aan het onmogelijke.
Met de onthulling van NVIDIA Cosmos wil de techgigant daar definitief verandering in brengen. Door brute rekenkracht om te zetten in bruikbare trainingsdata, presenteert NVIDIA een nieuw vlaggenschip aan het front van de fysieke kunstmatige intelligentie.
Het dilemma van de echte wereld: Onvoorspelbaar en schaars in data
Tot voor kort liepen ontwikkelaars van fysieke AI tegen een fysieke muur op: het verzamelen van beelden, sensordata en interacties uit de werkelijkheid kost enorm veel tijd, geld en energie. Bovendien zijn kritieke situaties — zoals een plotseling overstekend kind of extreem weer — te gevaarlijk om bewust op te zoeken voor dataverzameling. Zonder voldoende gevarieerde trainingsdata blijven robots en autonome voertuigen echter schroomvallig of onberekenbaar.
Een nieuwe architectuur voor een complex universum
NVIDIA pakt dit fundamentele probleem aan met Cosmos. Dit open 'omnimodel' is gebouwd op een innovatieve architectuur waarin verschillende typen transformers naadloos samenkomen. Het model combineert uiteenlopende datastromen: van visuele pixels en fysieke acties tot audiogolven en natuurlijke taal.
Door al deze dimensies samen te voegen, leert Cosmos niet alleen wat er op een bepaald moment gebeurt, maar kan het ook actief redeneren over de toekomst, scenario's plannen en voorspellen wat er in de volgende seconde zal plaatsvinden.
Van waarneming tot actie: Een virtueel lab voor fysieke AI
Het krachtigste aspect van NVIDIA Cosmos ligt in de capaciteit om natuurkundig verantwoorde synthetische video's te genereren en realistisch onderbouwde toekomstscenario's te simuleren. Het model 'begrijpt' de wetten van de fysica. Hierdoor kunnen ontwikkelaars hun AI-modellen laten oefenen in een gesimuleerde omgeving die vrijwel niet te onderscheiden is van de werkelijkheid.
Zodra Cosmos door ontwikkelaars is getraind en afgesteld op specifieke belichamingen — of het nu gaat om een humanoïde robot, een autonome drone of een fabrieksarm — transformeert het in een volwaardig actiemodel. Het neemt de wereld waar, verwerkt de informatie, plant de beste route of beweging en voert vervolgens de benodigde actie uit.
Toegankelijkheid voor ontwikkelaars
NVIDIA stelt Cosmos beschikbaar in meerdere formaten en varianten, waardoor zowel grote onderzoeksteams als individuele ontwikkelaars met het platform aan de slag kunnen. Het model is onder meer toegankelijk gemaakt via platforms zoals Hugging Face. Met deze stap onderstreept NVIDIA haar visie dat de toekomst van AI niet alleen op een scherm plaatsvindt, maar tastbaar wordt in de fysieke wereld om ons heen.
