Runway Gen 4.5: Het beste tekst-naar-video-model tot nu toe?

Ondanks hun indrukwekkende trailer ben ik altijd sceptisch: de voorbeelden waarmee bedrijven hun video-AI-modellen tonen, zijn vaak zorgvuldig uitgekozen, en de werkelijkheid haalt het niet altijd bij de hype.

In dit artikel leer ik je hoe je Runway 4.5 gebruikt en laat ik ongefilterde voorbeelden zien om te kijken of Runway 4.5 de belofte echt waarmaakt.

Wat is Runway 4.5?

Runway 4.5 is een tekst-naar-video AI-generatiemodel van Runway ML. Waar Runway 4 zich richtte op het genereren van video’s uit afbeeldingen, focust Runway 4.5 op tekstprompts. Het nieuwe model ondersteunt momenteel nog geen geluid, maar volgens Runway wordt dat binnenkort uitgerold.

Het ontbreken van audiosupport betekent ook dat de geluiden in hun lanceringstrailer extern zijn gemaakt en niet door Runway 4.5 zijn gegenereerd.

Hoewel het nieuwe model andere bestaande modellen verslaat in tekst-naar-video-benchmarks, voelt dit als een stap terug omdat hun vorige modellen goede ondersteuning voor geluid en afbeeldingen hadden. 

Uit mijn ervaring is beeldondersteuning cruciaal om een consistent verhaal te maken, want zelfs als een model een tekstprompt perfect volgt, is het onmogelijk om met alleen tekst karakterconsistentie te behouden.

Als je nieuw bent met Runway, raden we je aan onze andere artikelen over Runway ML te bekijken:

• Runway Gen 4: een gids met praktische voorbeelden
• Wat is Runway Gen-3 Alpha? Werking, use cases, alternatieven & meer
• Runway Act-One-gids: ik filmde mezelf om het te testen

Hoe krijg je toegang tot Runway 4.5?

Runway 4.5 is toegankelijk via hun webapp.

Het gebruik is niet gratis en vereist een abonnement. Zie voor meer details hun prijspagina.

Elke seconde videogeneratie met Gen 4.5 kost 25 credits. Hun goedkoopste abonnement bevat 625 credits, wat slechts genoeg is voor 25 seconden video.

Wat is er nieuw in Runway Gen-4.5?

Laten we de nieuwe functies van Runway Gen 4.5 bekijken:

Nauwkeurige naleving van prompts

In hun release-artikel claimen ze dat Runway 4.5 complexe prompts met hoge nauwkeurigheid kan volgen. Concreet kan het:

• Complexe scènes met meerdere elementen nauwkeurig renderen.
• Gedetailleerde composities verwerken, met precieze plaatsing van objecten en vloeiende beweging van personages en objecten in de scène.
• Fysieke interacties accuraat afhandelen met geloofwaardige botsingen en natuurlijke beweging.
• Expressieve personages genereren met genuanceerde emoties, natuurlijke gebaren en levensechte details.

De onderstaande video is een compilatie van één voorbeeld per functie, afkomstig van hun officiële website:

Stilistische controle en visuele consistentie

Net als moderne tekst-naar-video-modellen zoals Veo3.1 ondersteunt Gen-4.5 een breed spectrum aan visuele stijlen, van levensechte, filmische beelden tot sterk gestileerde animatie, terwijl een consistente en samenhangende visuele identiteit behouden blijft. Concreet kunnen we:

• Video’s genereren die niet te onderscheiden zijn van echte beelden, met levensechte details en nauwkeurigheid.
• Gestileerde, expressieve beweging creëren met artistieke vrijheid die niet gebonden is aan realisme.
• Video’s maken die eruitzien en aanvoelen als het alledaagse leven.
• Video’s renderen met opvallende diepte en filmische afwerking.

Hieronder staan voorbeelden uit hun officiële aankondiging die elk van de bovenstaande functies illustreren:

Runway 4.5 testen

De voorbeelden hierboven komen van de officiële website. Ze zien er indrukwekkend uit, maar bij AI-videomodellen is het vaak zo dat je meerdere video’s met dezelfde prompt moet genereren voordat er iets goeds uitkomt. 

Belangrijk om te onthouden: de resultaten in de aankondiging van een nieuw model zijn meestal zorgvuldig geselecteerd als de beste video’s uit vele gegenereerde voorbeelden.

In dit gedeelte laat ik de resultaten zien van mijn eigen experimenten met Runway 4.5. Tijdens deze experimenten heb ik niet geselecteerd op uitkomsten. Voor elk idee genereerde ik één video en ik maakte geen meerdere versies totdat ik iets acceptabels kreeg.

Om een goede prompt te maken raad ik aan hun promptinggids te volgen, die de volgende structuur voorstelt:

[Camera] shot of [a subject/object] [action] in [environment]. [Supporting component descriptions]Mogelijk gemaakt door

Fysieke nauwkeurigheid

Mijn eerste test voor Runway 4.5 was om te zien of het model natuurkunde begrijpt. 

Daarvoor bedacht ik om een olifant en een muis op een wip te zetten en te kijken welke kant hij op kantelt. Ik wilde niet in de prompt zetten wat er zou gebeuren, om te zien of het model realistische natuurkunde kan genereren zonder expliciete beschrijving.

In plaats van één video te genereren, besloot ik er twee te maken:

1. De muis zit alleen op de wip en de olifant springt op de andere kant. Ik verwachtte dat de muis weg zou vliegen.
2. De olifant zit alleen op de wip en de muis springt op de andere kant. Ik verwachtte dat er niets zou gebeuren, omdat de olifant veel zwaarder is.

Dit zijn de prompts die ik gebruikte:

Side-on static camera shot of a mouse sitting alone on one end of a wooden see-saw as an elephant falls onto the opposite end in an open grassy field. 
The full see-saw and pivot remain visible, the fall completes within the shot, the motion is shown in real-time, and the take is continuous with no cuts.Mogelijk gemaakt door

Side-on static camera shot of an elephant sitting alone on one end of a wooden see-saw as a mouse falls onto the opposite end in an open grassy field. 
The full see-saw and pivot remain visible, the fall completes within the shot, the motion is shown in real-time, and the take is continuous with no cuts.Mogelijk gemaakt door

En dit is het resultaat:

Hoewel het resultaat niet precies was wat ik me voorstelde, vind ik dat Runway 4.5 het qua natuurkunde redelijk goed doet. 

In de eerste video valt de olifant niet echt op de wip, maar wanneer hij erop stapt, tilt hij de muis wel op, al zijn er kleine inconsistenties.

In de tweede video heeft, zoals verwacht, de muis die op de wip valt geen enkel effect, wat goed is.

Emoties van personages

Vervolgens wilde ik zien of ik sterke emoties bij personages kon oproepen. Eerst wilde ik kijken of het een ongemakkelijk moment kon genereren door twee mensen elkaar te laten aanstaren, met niets te doen nadat een gesprek is afgelopen. Ik gebruikte deze prompt:

Two-shot eye-level camera shot of two people holding eye contact after a conversation ends in a small elevator. 
Neither speaks, the doors remain closed, and the moment extends slightly longer than comfortable in real time.Mogelijk gemaakt door

Dit is de video die Runway Gen 4.5 genereerde:

De video gaf me geen gevoel van ongemak. Ik weet dat ik die emotie niet expliciet in de prompt heb gevraagd, en misschien is het subjectief om dat te verwachten van een lange blik.

Ondanks dat het niet was wat ik verwachtte, vond ik dat de video consistente gezichtsuitdrukkingen leverde voor de situatie. Voor mij leek het meer alsof de personages zich klaarmaakten om een lastige situatie aan te pakken.

Ik deed een tweede experiment waarin een vrouw een verdrietig sms’je ontving en daarop reageerde. Dit was de prompt die ik gebruikte:

Locked-off close-up camera shot of a young woman reading a very sad message on her phone and slowly lowering it in a quiet subway station. 
Her face remains fully visible, background movement continues naturally, and the moment plays out in a single continuous take.Mogelijk gemaakt door

Complexe scènes genereren

Iets wat AI-modellen consequent moeilijk vinden, is het genereren van drukke scènes met veel mensen. Meestal zijn er veel artefacten en verdwijnen of verschijnen mensen en objecten uit het niets.

Om de capaciteit van Runway 4.5 voor complexe scènes te testen, vroeg ik om een video van een drukke avondmarkt met deze prompt:

A crowded open-air night market just after a sudden rainstorm. 
Steam rises from food stalls while neon signs in different languages reflect in puddles on the ground. 
Dozens of people move through the narrow aisles: vendors cooking, customers eating, children weaving through the crowd, a street musician performing near an intersection. 
Some people carry umbrellas, others shake water from their clothes. 
Plastic tarps flutter overhead, partially blocking strings of warm lights. 
In the background, scooters pass by, and apartment windows glow at different heights. 
The scene feels alive, messy, and authentic, with many small interactions happening at once.Mogelijk gemaakt door

Dit was het resultaat:

Al met al is het resultaat niet slecht. De mensen vooraan blijven consistent en de video bevat de meeste gevraagde elementen. 

Toch kampt het met hetzelfde probleem als andere modellen: moeite om bewegingsconsistentie te behouden. 

Zo verdwijnt er op een gegeven moment een scooter op de achtergrond. Hetzelfde gebeurt met sommige mensen.

Levensechte scènes genereren

Een claim in de aankondiging is het vermogen van het model om een eenvoudige alledaagse scène te genereren. Om dat te testen vroeg ik om een van de meest alledaagse scènes die ik kon bedenken: iemand die afrekent in de supermarkt.

Dit was de prompt die ik gebruikte:

Eye-level handheld camera shot of a customer placing items on a checkout counter and waiting in a small local grocery store. 
The cashier scans items off-screen, the line behind shifts slightly, and ambient motion continues.Mogelijk gemaakt door

Hoewel het resultaat niet slecht is, heb ik wel het gevoel dat het model moeite had om de prompt te volgen:

Er is geen zichtbare rij klanten en de producten rollen op een vreemde manier over de lopende band en hopen zich aan het eind op. De scène oogt onnatuurlijk en voor mij duidelijk AI-gegenereerd.

Fantasiewerelden genereren

Er is iets wat ik al een tijdje wil genereren en wat steeds mislukte met alle modellen die ik probeerde, dus ik besloot het met Runway 4.5 te proberen. Ik wilde een personage maken met een magische verfkwast die hij gebruikt om uit situaties te ontsnappen. 

Bijvoorbeeld: hij kan wegrennen voor kwaadwillenden en een ladder tekenen om te ontsnappen uit een doodlopend steegje.

Ik vroeg Runway 4.5 om deze scène te genereren met deze prompt:

A fantastical world where painted objects can become real. 
A lone character carrying a glowing magical paintbrush runs through a surreal alley as shadowy pursuers close in behind him. 
He reaches a dead end: a tall, blank wall with no exits. 
Panicked but focused, he turns, presses the brush against the wall, and quickly paints a ladder. 
As the final stroke is completed, the painted ladder transforms into a physical object attached to the wall. 
The character climbs the ladder and escapes upward just as the pursuers reach the wall below. 
The environment feels dreamlike and imaginative, with subtle magical effects reinforcing that art and reality blend together in this world.Mogelijk gemaakt door

De video heeft wat inconsistenties, zoals de slechteriken die aan het begin juist weg lijken te rennen van het hoofdpersonage, en het feit dat ze aan het eind de ladder niet beklimmen. Toch moet ik zeggen dat dit, na deze idee bij andere modellen geprobeerd te hebben, de eerste keer is dat ik iets kreeg dat ook maar enigszins in de buurt kwam van wat ik wilde.

Filmische video’s genereren

Als laatste experiment probeerde ik een video te genereren met een filmische look & feel. Dit is de prompt die ik gebruikte:

A cinematic sequence at dusk in a vast desert landscape. 
A solitary figure walks along a windswept ridge as the sky shifts from deep blue to burning orange. 
The camera begins wide and slowly pushes in, revealing dust catching the light and fabric moving in the wind. 
The character stops, turns toward the horizon, and exhales as distant thunder rolls. 
Subtle lens flares, natural motion blur, and layered sound cues suggest scale and tension. 
The moment feels quiet, dramatic, and intentional, like a scene from a high-budget film.Mogelijk gemaakt door

Dit is het resultaat:

Qua look & feel vind ik het erg raak en zeer filmisch aanvoelen. Het enige wat ik minder vond, is dat het personage rende in plaats van liep. Dat verandert voor mij de hele sfeer van de video.

Vergelijking Runway 4.5 vs Veo 3.1

Ik probeerde enkele voorbeelden met dezelfde prompts op zowel Runway 4.5 als, wat mij betreft, de meest directe concurrent: Veo 3.1 (merk op dat de door Veo 3.1 gegenereerde video’s iets langer zijn).

Ik was enigszins verrast door hoeveel beter Runway 4.5 presteerde in alle drie de voorbeelden. Hier is een vergelijking tussen de door beide modellen gegenereerde video’s voor het wipvoorbeeld met de zittende olifant:

De Veo 3.1-video bevat veel fouten. Zo verschijnt er uit het niets een tweede muis wanneer de muis valt. Vervolgens lijkt het alsof de wip de olifant raakt, maar daarna staat de olifant er eigenlijk vóór.

Ik probeerde nog een laatste voorbeeld met complexe beweging en fysieke interacties:

Slow-motion dolly shot of a line of shopping carts colliding one after another in a steep supermarket parking garage. 
Each impact transfers momentum unevenly, carts crumple differently, loose items fly forward, and the final cart barely moves.Mogelijk gemaakt door

In dit geval faalden beide modellen, maar Veo 3.1 faalde sterker:

Conclusie

In deze walkthrough liet ik zien hoe je Runway 4.5 gebruikt en heb ik het model stevig getest met ongefilterde prompts rond natuurkunde, emoties, complexe menigten, alledaagse momenten, een fantasie-ontsnapping en een filmische scène. Ook vergeleek ik Runway 4.5 rechtstreeks met Veo 3.1. 

Runway 4.5 kan zeker fraai ogende, coherente video’s genereren met een goede naleving van prompts en af en toe uitschieters, maar niets voelde hier echt baanbrekend aan. 

Runway 4.5 kent nog duidelijke beperkingen, met name het ontbreken van native geluid, dat volgens hen binnenkort wordt uitgerold, naast de aanhoudende consistentieproblemen die we zagen in drukke of fijnmazige interacties. 

Alles bij elkaar, op basis van mijn experimenten en hun gepubliceerde benchmarks, lijkt Runway 4.5 op dit moment sterker dan Veo 3.1.

Als je meer wilt leren over de technieken achter AI-videogeneratie, bekijk dan onze gids met de topmodellen voor videogeneratie en onze AI Fundamentals skill track.