Runway lanceert Gen-4: AI voor consistente video creatie
Runway heeft vandaag Gen-4 aangekondigd, hun krachtigste AI model tot nu toe. Het nieuwe systeem maakt het mogelijk om consistente karakters, locaties en objecten te genereren over meerdere scènes heen, wat een doorbraak betekent voor digitale contentcreatie.
Het nieuwe systeem onderscheidt zich door zijn vermogen om 'wereldconsistentie' te bereiken - een primeur in de industrie. Dit betekent dat gebruikers coherente omgevingen kunnen creëren waarin karakters, objecten en locaties consistent blijven over verschillende scènes heen.
Contentmakers kunnen daardoor langere verhaallijnen ontwikkelen met echte continuïteit. Dezelfde karakters, objecten en locaties kunnen worden gegenereerd in verschillende scenario's, waardoor het mogelijk wordt om scènes te plannen en verhalen doelgericht te vertellen. Deze functionaliteit was voorheen niet mogelijk met AI beeldgeneratie.
Om de mogelijkheden van Gen-4 te demonstreren heeft Runway verschillende korte films en experimenten gemaakt. Een van deze films, "The Lonely Little Flame", vertelt het verhaal van een eenzame vlam die op zoek is naar vriendschap. Deze film demonstreert hoe het systeem karakters consistent kan weergeven onder verschillende lichtomstandigheden en in verschillende poses.
Een belangrijk aspect van Gen-4 is de mogelijkheid om bestaande objecten uit de echte wereld te integreren in gegenereerde beelden. Gebruikers kunnen een foto van een object uploaden en dit vervolgens in verschillende omgevingen plaatsen, waarbij het systeem zorgt voor natuurgetrouwe integratie en fysisch correcte weergave.
Het systeem blinkt ook uit in het genereren van realistische bewegingen en fysica. Dit werd gedemonstreerd in verschillende korte films waarin dieren en objecten natuurgetrouw bewegen en interacteren met hun omgeving. Een voorbeeld hiervan is "New York is a Zoo", waarin het team foto's van New York combineerde met beelden van dieren om verrassende en realistische composities te creëren.
Gen-4 is per direct beschikbaar voor betalende gebruikers en zakelijke klanten van Runway. De mogelijkheid om scènereferenties te gebruiken voor consistentie in karakters, locaties en objecten zal binnenkort worden toegevoegd aan het platform.
Het systeem werkt via een eenvoudige interface die toegang geeft tot uitgebreide mogelijkheden, waaronder karakterconsistentie, objectplaatsing, scènedekking en productieklare video. Gebruikers hebben geen aanvullende training of finetuning nodig om met het systeem te werken, wat het toegankelijk maakt voor zowel professionals als creatieve enthousiastelingen.