Runway Solaris maakt van software een live, door AI gegenereerde wereld

Runway Solaris stelt een fundamenteel andere manier van software maken en gebruiken voor. In plaats van een gecodeerde interface met vooraf bepaalde schermen te laden, genereert het systeem de interface voortdurend opnieuw. Het scherm moet daardoor reageren als een levende visuele wereld: de toestand verandert wanneer een gebruiker klikt, sleept, tekst invoert of in natuurlijke taal om een aanpassing vraagt. 38

Daarmee is Solaris meer dan een no-codeappbouwer. Runway probeert het idee van een wereldmodel toe te passen op software-interfaces. Het scherm wordt niet opgebouwd uit een vaste implementatie, maar verschijnt als een doorlopende reeks visuele toestanden die door interactie wordt gevormd.

Wat is Runway Solaris?

Runway presenteerde Solaris op 31 augustus als een experimenteel Interface World Model. Het uitgangspunt is dat de gebruikelijke keten — HTML, CSS en JavaScript schrijven en de browser het resultaat laten tonen — wordt vervangen door directe generatie van de zichtbare interface.

Een Solaris-ervaring kan beginnen met een visuele referentie, bijvoorbeeld een productscène of een omgeving in de huisstijl van een merk. Het model bouwt daar een interface omheen en past die aan wanneer de gebruiker ermee communiceert. Ontwikkelaars hoeven dus niet elk mogelijk scherm vooraf te ontwerpen; het systeem probeert telkens te voorspellen wat er daarna in beeld moet komen.

Dat verschil is vooral relevant bij visueel complexe interfaces. Wanneer een model eerst een beeld of concept naar code moet vertalen, kan onderweg veel informatie verloren gaan. Solaris houdt het visuele beeld juist als primaire uitvoer, met als doel de samenhang en het natuurlijke gedrag tijdens interacties te behouden.

Zo genereert Solaris een interactieve interface

Solaris splitst het nadenken over een actie op van het visueel weergeven van het resultaat:

1. De gebruiker geeft een opdracht of voert een handeling uit. Dat kan een klik, sleepbeweging, tekstinvoer of instructie in natuurlijke taal zijn.
2. Een taalmodel interpreteert de bedoeling. Het bepaalt wat er moet gebeuren, of de scène moet veranderen en hoe de volgende stap aan het visuele model moet worden doorgegeven. 38
3. Het interface-wereldmodel genereert de volgende toestand. In plaats van een gecodeerde webpagina terug te sturen, maakt Solaris het volgende beeld op basis van de interactie en de eerdere beelden.
4. Dit proces blijft zich herhalen. Elke nieuwe handeling wordt onderdeel van de context voor de volgende beelden, zodat de interface zich geleidelijk kan ontwikkelen in plaats van tussen een vaste reeks schermen te springen.

De visuele component bouwt voort op Runway’s Gen-4.5-videotechnologie. In de documentatie wordt Gen-4.5 beschreven als een model voor text-to-video- en image-to-video-generatie; Solaris gebruikt die basis in een interactieve, autoregressieve toepassing. 46

Welke technieken maken realtime gebruik mogelijk?

Een nieuwe visuele toestand genereren na iedere actie is iets anders dan een korte videoclip maken. Daarom gebruikt Solaris technieken die de vertraging moeten beperken en de kwaliteit tijdens langere sessies moeten bewaken.

Beeld voor beeld genereren

Solaris genereert beelden autoregressief: elk nieuw beeld wordt gebaseerd op wat eraan voorafging. Na een actie kan het systeem zo doorgaan op de bestaande visuele toestand, in plaats van telkens vanaf nul een losstaand resultaat te maken.

Een langzaam model distilleren naar een snel model

Volgens Runway wordt een langzamer diffusie-model — de zogenoemde ‘teacher’ — gedistilleerd naar een sneller model dat maar enkele denoisingstappen nodig heeft. Het doel is minder rekenwerk per reactie, terwijl er voldoende beeldkwaliteit overblijft voor interactief gebruik.

Trainen op eigen uitvoer

Runway zegt het snelle model bovendien te trainen op zijn eigen gegenereerde beelden. Daarmee wil het bedrijf voorkomen dat de kwaliteit afneemt tijdens een lange keten van onderling afhankelijke beelden, waarin kleine fouten zich anders kunnen opstapelen.

Runway noemt een interactievertraging van minder dan ongeveer een halve seconde, samenhang gedurende een volledige sessie en een beeldkwaliteit van 720p als ontwerpdoelen. Het gaat om onderzoeksdoelen, niet om een garantie dat iedere interactie die waarden haalt.

Hoe presteerde Solaris tegenover gecodeerde interfaces?

Runway meldt een gebruikersonderzoek met 250 deelnemers, ongeveer 7.500 paarsgewijze beoordelingen en 30 interactievoorbeelden. Deelnemers vergeleken door Solaris gegenereerde interfaces met interfaces die als code waren gemaakt door Claude Opus 5.

Volgens de door Runway gerapporteerde resultaten kreeg Solaris de voorkeur:

• in 61 procent van de gevallen voor het opvolgen van instructies;
• in 71 procent van de gevallen voor natuurlijk gedrag.

De resultaten wijzen erop dat gegenereerde interfaces in sommige scenario’s visueel samenhangender of intuïtiever kunnen aanvoelen. Ze bewijzen niet dat Solaris in het algemeen beter is dan traditionele software. Het onderzoek ging over subjectieve oordelen over interactie, niet over betrouwbaarheid, correctheid, beveiliging, onderhoudbaarheid, kosten, prestaties of toegankelijkheid. De beschikbare informatie maakt bovendien geen onafhankelijke beoordeling van de volledige onderzoeksopzet of statistische analyse mogelijk.

De belangrijkste beperkingen van Solaris

De flexibiliteit die Solaris interessant maakt, leidt ook tot lastige technische en productmatige problemen.

Gegenereerde tekst blijft instabiel

Leesbare en correcte tekst is al lange tijd een uitdaging voor realtime beeld- en videogeneratie. Een interface kan er aantrekkelijk uitzien, maar toch verkeerde labels, cijfers, menu’s of instructies bevatten. Runway noemt tekstgeneratie een onopgelost probleem en wijst op een mogelijke hybride aanpak: beeldmodellen voor statische, tekstintensieve momenten en videomodellen voor doorlopende interactie.

Overtuigend betekent niet automatisch juist

Een overtuigend gegenereerde interface is niet per definitie feitelijk betrouwbaar. Solaris wordt momenteel vooral gestuurd door het uitgangsbeeld en aangeleverde referenties. Daardoor kan het systeem met grote overtuiging een fout antwoord, productdetail of visuele voorstelling tonen. Runway noemt rijkere, gecontroleerde data, documenten en referentiemateriaal als onderwerpen voor verder onderzoek.

Lange sessies kunnen hun samenhang verliezen

Omdat iedere toestand voortkomt uit een keten van gegenereerde beelden en modelbeslissingen, kunnen fouten zich tijdens open gebruik opstapelen. Het blijft een actief onderzoeksprobleem om de scène, eigenschappen van objecten, instructies en interactiegeschiedenis gedurende een lange sessie consistent te houden.

Elk beeld genereren kost rekenkracht

Een gewone website stuurt doorgaans code en bestanden naar het apparaat van de gebruiker, waarna de browser die weergeeft. Solaris voert daarentegen voortdurend generatieve berekeningen uit om het zichtbare resultaat te produceren. Runway zegt dat de optimalisaties dit aanzienlijk goedkoper maken dan standaard videodiffusie, maar beeld-voor-beeldgeneratie blijft veeleisender dan het aanbieden van een vaste, gecodeerde pagina. De genoemde kwaliteitsdoelstelling voor het prototype is 720p.

Toegankelijkheid en software-integratie zijn nog niet af

Een gerenderd beeld bevat niet automatisch de gestructureerde betekenis waarop schermlezers en andere hulpmiddelen vertrouwen. Ook ontbreken niet vanzelf de inspecteerbare status, gebeurtenisstructuur en voorspelbare interfaces die veel softwaresystemen nodig hebben. Analisten wijzen het ontbreken van een conventionele DOM en toegankelijkheidslaag aan als een belangrijk obstakel voor toepassingen waarin toegankelijkheid, controleerbaarheid en auditbaarheid zwaar wegen.

Is Solaris beschikbaar?

Solaris is gepresenteerd als experimenteel onderzoek en niet als een breed beschikbaar productieplatform voor het bouwen van apps. Volgens berichtgeving gaat het om een onderzoeksvoorbeeld met vroege toegang of toegang op aanvraag, niet om een algemeen gelanceerd product.

De huidige betekenis van Solaris is daarom vooral conceptueel en onderzoeksmatig. Het laat een mogelijke richting voor software-interfaces zien, maar biedt nog geen bewijs dat teams het als directe vervanger van gecodeerde applicaties kunnen inzetten.

Wat is de relatie met Runway’s GWM-1?

Solaris maakt deel uit van Runway’s bredere onderzoek naar wereldmodellen, maar heeft een ander doel. Runway beschrijft GWM-1 als een algemeen realtime-simulatiemodel voor omgevingen, avatars en robotische manipulatie. Solaris beperkt dat wereldmodelidee tot software-interfaces: de ‘wereld’ die wordt gesimuleerd is een app of website, en de acties van de gebruiker sturen de ontwikkeling ervan. 12

Daarmee verschuift Runway de aandacht van alleen media genereren naar het genereren van interactieve visuele omgevingen. De interface is niet slechts een video om naar te kijken, maar een scène die op handelingen reageert en tijdens het gebruik opnieuw wordt gegenereerd.

Waarom Runway denkt dat Solaris belangrijk kan worden

Een andere route naar softwareontwikkeling

Als deze aanpak betrouwbaar genoeg wordt, zouden makers een visuele omgeving, producten, doelen en gedragingen in natuurlijke taal kunnen beschrijven, zonder iedere mogelijke toestand afzonderlijk in code vast te leggen. Dat kan vooral interessant zijn voor ruimtelijke, visuele of experimentele ervaringen waarvoor traditionele interface-indelingen beperkend zijn.

De prijs van die flexibiliteit is dat het gedrag uit generatie voortkomt in plaats van uit expliciete programmalogica. Voor productiesoftware blijven voorspelbaarheid, testbaarheid, gegevensintegriteit, toegankelijkheid en koppelingen met andere systemen noodzakelijk. Solaris heeft nog niet laten zien dat het traditionele engineeringpraktijken op die punten kan vervangen.

Een nieuwe interface voor AI-agents

Solaris wijst ook op een mogelijke manier waarop AI-agents onbekende visuele omgevingen kunnen bedienen. In plaats van volledig afhankelijk te zijn van vaste API’s of hardgecodeerde workflows, zou een agent een interface als een dynamische wereld kunnen interpreteren, een actie uitvoeren, de nieuwe toestand bekijken en van daaruit verdergaan.

Dat is relevant voor agents die interfaces moeten gebruiken die niet rond een bekende automatiseringsstructuur zijn ontworpen. Het blijft echter een onderzoeksrichting. Betrouwbare gestructureerde API’s en conventionele, toegankelijke software houden belangrijke voordelen voor taken die controleerbaar, precies en herhaalbaar moeten worden uitgevoerd.

De praktische conclusie

Solaris is het best te begrijpen als een onderzoeksvoorbeeld van generatieve software-interfaces, niet als het einde van applicatiecode. Het vernieuwende idee is dat de interface zelf de uitvoer van het model wordt: een reeks door AI gegenereerde beelden die door een taalmodel en gebruikersacties wordt gestuurd.

De door Runway gerapporteerde studie laat zien dat mensen in bepaalde situaties de voorkeur kunnen geven aan deze aanpak voor natuurlijk gedrag en het opvolgen van instructies. Tegelijkertijd zijn tekstnauwkeurigheid, feitelijke onderbouwing, samenhang tijdens lange sessies, kosten, toegankelijkheid en integratie geen details voor later, maar kernvereisten van bruikbare software. Solaris maakt zichtbaar wat een interface-wereldmodel zou kunnen worden — en waarom traditionele code voorlopig moeilijk te vervangen blijft.