Runway lanceert world models: stuurbare AI-video’s

Runway kondigde een reeks updates aan die het proces van AI-video maken een stuk flexibeler en interactiever maken. Dankzij realtime aanpassingen tijdens het genereren, toevoeging van audio en de introductie van wereldsimulaties, krijg je meer controle en nieuwe creatieve opties bij het ontwikkelen van videocontent.

Runway Gen 4.5: video genereren mét geluid

De nieuwste versie van Runway’s videomodel Gen 4.5 maakt het nu mogelijk om geluid toe te voegen aan AI-video’s. Dat betekent dat gegenereerde scènes voortaan voorzien kunnen worden van spraak, geluidseffecten en achtergrondmuziek die synchroon lopen met het beeld.

Een voordeel is dat je het geluid kunt aanpassen zonder de beelden opnieuw te hoeven genereren. Voor marketeers betekent dit minder tijd kwijt aan correcties, en meer flexibiliteit bij het optimaliseren van andere videocontent.

Consistente bewerking met multi-shot editing

Een andere toevoeging is multi-shot editing. Hiermee kun je een wijziging in de eerste scène automatisch laten doorwerken in de rest van de video. Denk aan aanpassingen in kleur, licht of positionering die je normaal per shot zou moeten doorvoeren, maar die nu automatisch overal worden toegepast. Deze functie maakt het mogelijk om langere video’s te maken waarin de visuele stijl consistent blijft.

General World Models: van lineaire video naar dynamische simulatie

Naast verbeteringen aan video, werkt Runway aan een totaal ander model voor contentcreatie: General World Models. In plaats van vooraf een complete video te renderen, genereert dit model een wereld waarin gebruikers realtime kunnen bewegen en handelen.

Het eerste model dat deze aanpak ondersteunt heet GWM1. Het bouwt video’s op in 720p en tot twee minuten lang, waarbij je als gebruiker tijdens het proces kunt ingrijpen. Je kunt bijvoorbeeld door een ruimte navigeren, reageren op personages of objecten manipuleren. De video past zich aan jouw acties aan.

GWM voor marketing: avatars en virtuele omgevingen

Voor marketingdoeleinden zijn vooral GWM Avatars en GWM Worlds interessant. GWM Avatars maakt digitale personen die realistisch reageren met gezichtsuitdrukkingen en gebaren. Dit geeft mogelijkheden voor interactieve klantenservice, online trainingen of digitale onboarding. Je kunt scenario’s creëren waarin de avatar inspeelt op wat de gebruiker zegt of doet.

GWM Worlds laat je omgevingen genereren waarin bezoekers vrij kunnen rondlopen. Denk aan een virtuele showroom waar klanten producten kunnen bekijken of een digitale beursstand waarin ze zelf bepalen wat ze onderzoeken.

Simulaties als voorbereiding op de echte wereld

Met GWM Robotics richt Runway zich op het simuleren van robotgedrag zonder fysieke hardware. Dit stelt ontwikkelaars in staat om scenario’s te testen voordat een robot echt in actie komt. Het model leert van fouten en past zijn gedrag daarop aan. Wat er bijvoorbeeld gebeurt als een robot iets laat vallen, kan in de simulatie al inzichtelijk worden gemaakt.

Wat betekenen deze updates voor contentteams?

De nieuwe functies van Runway maken het eenvoudiger om sneller, consistenter en interactiever videocontent te produceren. De mogelijkheid om geluid toe te voegen en te bewerken zonder opnieuw te renderen zorgt voor minder vertraging in het productieproces. Multi-shot editing zorgt voor een strakke visuele lijn in langere video’s. En GWM maakt het mogelijk om content niet alleen te maken, maar te laten reageren.

Maak iedere week een sprong vooruit in je marketing AI transformatie

Elke vrijdag brengen wij je de meest actuele inzichten, nieuws en praktijkvoorbeelden over de impact van AI in de marketingwereld. Of je nu je marketing efficiency wilt verbeteren, klantbetrokkenheid wilt verhogen, je marketingstrategie wilt aanscherpen of je bedrijf digitaal wilt transformeren. ‘Marketing AI Friday’ is jouw wekelijkse gids.

Meld je gratis aan voor Marketing AI Friday.