Runway Solaris : l'IA qui génère des applications en temps réel

Runway, la boîte derrière les générateurs de vidéo par IA, vient de dévoiler Solaris, un modèle d'un genre nouveau. Au lieu de coder une application, il génère l'interface elle-même, image par image, en direct pendant que tu interagis. Concrètement : tu cliques, tu glisses, tu parles, et l'écran se redessine en continu, sans qu'aucune ligne de code ne soit écrite derrière. C'est une rupture avec la façon dont fonctionne tout logiciel depuis des décennies.

Qu'est-ce qu'un « modèle de monde d'interface » ?

Pour comprendre, il faut revenir à la base. Aujourd'hui, une application, c'est du code : des instructions écrites à l'avance qui disent à l'ordinateur quoi afficher et comment réagir à chaque clic. Le design visuel doit d'abord être traduit en code, puis ce code est figé jusqu'à la prochaine mise à jour. C'est ce que Runway appelle une « représentation intermédiaire » : une étape de traduction qui, selon elle, fait perdre de la fidélité au rendu final.

Solaris supprime cette étape. C'est un « modèle de monde d'interface » (Interface World Model) : un système d'IA qui génère chaque image de l'écran à la volée, en tenant compte de tes actions. Le modèle ne connaît pas de pages prédéfinies ni de menus figés. Il observe ce que tu fais, décide de ce qui doit se passer, et peint la suite en temps réel. Le résultat tient en 720p et réagit assez vite pour rester fluide.

L'annonce officielle de Runway Solaris, un modèle qui génère des interfaces interactives en temps réel.

Source : Runway, annonce officielle de Solaris.

À quoi ça sert, concrètement ?

Runway imagine plusieurs usages. Le plus parlant, c'est le shopping en ligne : la boutique elle-même devient l'interface. Tu prends une photo de toi, tu attrapes un t-shirt sur le présentoir et tu le glisses sur ton image pour l'essayer, comme dans un vrai magasin. Le magasin n'est plus un site figé identique pour tout le monde : il s'adapte à chaque visiteur, à ses envies et à ses actions.

Autre exemple : la décoration d'intérieur. Tu peux dire « déplace la table » ou « change la couleur du canapé », et la scène réagit instantanément, avec des reflets qui bougent et des objets qui réagissent naturellement. C'est aussi pensé pour les tutoriels : au lieu d'une réponse en texte, l'IA te montre la prochaine étape directement dans ton contexte, par exemple une démonstration de combustion où tu peux tester différents matériaux.

Pourquoi c'est important pour l'IA ?

Au-delà des interfaces, Runway voit Solaris comme un terrain d'entraînement pour les agents IA. Aujourd'hui, les modèles de langage peinent à accomplir des tâches simples sur le web, comme réserver un hôtel ou faire des courses en ligne. Pourquoi ? Parce qu'ils sont entraînés sur des interfaces codées, figées, et ils ne savent pas s'adapter quand un site présente une mise en page différente de celle qu'ils ont apprise.

Avec des interfaces générées en continu, qui changent à chaque session, les agents pourraient s'entraîner dans des environnements dynamiques, jamais vus auparavant. C'est une piste sérieuse pour rendre les assistants IA capables de manipuler n'importe quel logiciel, pas seulement ceux qu'ils connaissent par cœur. On en parlait déjà avec les agents locaux comme le Perplexity Portable Computer, qui promettait de faire tourner l'IA chez toi sans facture de tokens.

Les limites à garder en tête

Solaris reste un effort de recherche, pas un produit fini. Le texte reste difficile à générer proprement, alors que les interfaces en dépendent énormément. Les longues sessions et la fiabilité posent encore question, et un résultat faux mais convaincant peut être pire que pas de résultat du tout. L'accessibilité aussi est un chantier : il faut que ces interfaces fonctionnent avec les lecteurs d'écran pour les personnes malvoyantes.

Et puis, il y a la question de fond : est-ce que les gens veulent vraiment des interfaces qui changent en permanence ? Runway elle-même laisse la question ouverte. Pour l'instant, Solaris est accessible sur demande via un formulaire d'accès anticipé, en attendant des partenaires pour un lancement public.