De volgende stap in AI: Realtime video-agents die software bedienen

De volgende stap in AI: Realtime video-agents die software bedienen

De grens tussen chatbot en digitale assistent begint snel te vervagen. AI-bedrijf Runway heeft een nieuwe stap gezet met zijn real-time video-agents: De personages kunnen voortaan niet alleen praten, maar ook effectief acties uitvoeren via zogenaamde “tool calling”. 

Waar AI-avatarplatformen tot nu toe vooral draaiden rond gesprekken en gezichtsanimaties, wil Runway de technologie omvormen tot interactieve digitale medewerkers die in real time taken kunnen uitvoeren binnen apps, websites en diensten.

Tool calling overview

Let your Character invoke tools during a session — triggering client-side UI, fetching server-side data, or interacting with your page.

https://docs.dev.runwayml.com

 

Van pratende avatar naar uitvoerende AI-agent

Met de nieuwe update van Runway Characters krijgen ontwikkelaars de mogelijkheid om tools te koppelen aan hun AI-personages. Daardoor kan een video-agent bijvoorbeeld:

  • live data opzoeken,
  • interface-elementen bedienen,
  • workflows starten,
  • pagina’s aanpassen,
  • applicaties aansturen,
  • of zelfs acties uitvoeren binnen softwareplatformen. 

Het concept lijkt sterk op de tool-calling mogelijkheden die steeds populairder worden binnen AI-agenten, maar Runway verpakt dit in een volledig visuele ervaring. De gebruiker praat niet meer met een tekstvenster, maar met een digitale persoonlijkheid die reageert alsof er een echte persoon aanwezig is.

Een internet dat meer aanvoelt als een gesprek

Volgens Runway is het klassieke internetmodel (klikken, scrollen en tekst invoeren) stilaan aan vervanging toe. Het bedrijf ziet een toekomst waarin gebruikers rechtstreeks communiceren met realtime videokarakters. 

Die personages kunnen worden opgebouwd uit één enkele afbeelding. Dat mag een fotorealistisch gezicht zijn, maar even goed een mascotte, cartoonfiguur of fantasiewezen. De AI genereert vervolgens automatisch natuurlijke gezichtsuitdrukkingen, oogbewegingen, lipsynchronisatie en lichaamstaal tijdens gesprekken. 

Runway noemt dit een nieuwe vorm van digitale interactie: niet langer een chatbot in een kader, maar een “levende interface”.

Tool calling maakt AI-personages bruikbaar voor bedrijven

De echte innovatie zit echter niet alleen in de visuele laag. Dankzij tool calling kunnen bedrijven hun video-agent koppelen aan echte bedrijfsprocessen.

Een klantenservice-avatar kan bijvoorbeeld:

  • orderinformatie ophalen,
  • afspraken boeken,
  • gegevens controleren,
  • dashboards openen,
  • of realtime antwoorden genereren op basis van interne databronnen. 
Daardoor verschuift de rol van AI-avatar van marketinggadget naar functionele digitale werknemer.

GWM-1: het “wereldmodel” achter de technologie

De technologie draait op Runway’s nieuwe wereldmodel GWM-1, een AI-systeem dat ontworpen werd om realtime videointeracties mogelijk te maken. 

Volgens het engineeringteam behaalt het systeem:

  • 24 beelden per seconde,
  • realtime HD-video,
  • natuurlijke gezichtsanimatie,
  • en reacties met zeer lage latency. 
Dat klinkt technisch, maar de impact is vooral praktisch: gesprekken voelen minder artificieel aan en benaderen steeds meer een videogesprek met een echte persoon.

BBC experimenteert al met live AI-videoagents

Runway testte zijn technologie ondertussen al in live televisieomgevingen. Volgens berichten op LinkedIn gebruikt de BBC de technologie al om bepaalde uitzendingen te ondersteunen met realtime AI-karakters. 

Dat toont aan hoe snel deze technologie evolueert van experimentele demo naar professionele productieomgeving.

De opkomst van het “agentische internet”

De introductie van tool calling past binnen een bredere trend: AI-systemen die niet enkel antwoorden genereren, maar autonoom acties uitvoeren.

Steeds meer bedrijven bouwen zogenaamde “agentic AI”-systemen:

  • AI die software gebruikt,
  • processen automatiseert,
  • informatie verzamelt,
  • en beslissingen voorbereidt.
Runway voegt daar nu een visuele laag aan toe: een AI-agent met een gezicht, stem en persoonlijkheid.

Dat zou de manier waarop mensen software gebruiken fundamenteel kunnen veranderen.


Een voorproefje van de volgende generatie interfaces

Waar chatbots de afgelopen jaren het internet veranderden, lijken realtime video-agenten de volgende evolutie te worden. Runway probeert zich duidelijk te positioneren als een van de pioniers van die nieuwe interfacewereld.

De vraag is niet langer alleen wat AI kan zeggen maar wat AI zelfstandig kan doen, terwijl het je recht aankijkt.

Aanbevolen voor jou

In de kijker

AI kan vanaf nu de muis overnemen op je scherm

AI kan vanaf nu de muis overnemen op je scherm

Meta zet de volgende stap in AI met AI-gegenereerde posts

Meta zet de volgende stap in AI met AI-gegenereerde posts

Salesforce presenteert Agentforce – Zoals AI voor Sales bedoeld is

Salesforce presenteert Agentforce – Zoals AI voor Sales bedoeld is

Google Earth laat gebruikers binnenkort ‘tijdreizen’ tot wel 80 jaar terug

Google Earth laat gebruikers binnenkort ‘tijdreizen’ tot wel 80 jaar terug

Updates

Inschrijven Nieuwsbrief

Zo word je altijd als eerste op de hoogte gebracht van ons laatste nieuws, updates, jobs, tips & promoties. Stay UP-TO-DATE!

WEBSITE LATEN MAKEN?​​​​​​​​​​​​​​

Kies voor een UP-TO-DATE AI Website 100% in Google

Een UP-TO-DATE AI Website maakt het gemakkelijk om automatisch up-to-date te blijven met je klanten en overal aanwezig te zijn.

Maak een afspraak