Avec Project Genie, Google DeepMind transforme Street View en univers interactifs générés par IA

Google DeepMind expérimente une nouvelle manière de créer des environnements virtuels. Son prototype Project Genie peut générer des mondes interactifs à partir de simples instructions — et désormais les ancrer dans des lieux réels grâce aux images de Google Street View.

Concrètement, cela signifie qu’une rue réelle, un quartier ou un monument peuvent servir de point de départ pour un univers généré par IA dans lequel on peut se déplacer comme dans un jeu vidéo.

Cette approche repose sur ce que les chercheurs appellent un « world model » (modèle du monde) : un système d’IA capable de simuler un environnement dynamique qui réagit aux actions de l’utilisateur, plutôt que de produire simplement une image ou une vidéo statique.

De Street View à un monde interactif

La dernière évolution de Project Genie relie le système à la base d’images Street View de Google Maps. L’IA peut ainsi générer des environnements basés sur des photos réelles de rues et de lieux existants.

Dans la pratique, l’utilisateur peut :

• choisir un lieu sur Google Maps ou mentionner un endroit réel,
• ajouter une description ou un style via un prompt,
• entrer dans un environnement généré par l’IA inspiré de ce lieu.

Le résultat ressemble à une simulation jouable de l’endroit, que l’on peut parcourir comme un niveau de jeu vidéo.

Comme l’environnement est généré dynamiquement, il peut aussi être réinventé : changer la météo, transformer une rue moderne en décor historique, ou imaginer une ville entière dans un autre climat ou paysage.

Ce que les utilisateurs peuvent faire aujourd’hui

Project Genie agit davantage comme un constructeur de mondes interactifs qu’un simple générateur d’images.

Parmi les fonctions actuellement démontrées :

• Créer des mondes à partir de prompts : décrire un environnement et laisser l’IA générer un espace explorable.
• Explorer en temps réel : se déplacer librement dans ces environnements interactifs.
• Partir de lieux réels : utiliser les images Street View pour générer une simulation d’une rue ou d’un monument existant.
• Modifier l’environnement : changer le style, les conditions météo ou le contexte via de nouveaux prompts.

Le rendu final se rapproche davantage d’un niveau de jeu généré procéduralement que d’une simple image produite par IA.

Où et pour qui le service est disponible

Project Genie reste pour l’instant un prototype expérimental distribué via Google Labs.

Quelques points clés :

• l’accès nécessite un abonnement Google AI Ultra, l’offre d’IA la plus avancée de Google.
• les utilisateurs doivent avoir au moins 18 ans et se connecter avec un compte Google personnel.
• le service a d’abord été lancé pour les abonnés AI Ultra aux États‑Unis, avec un déploiement progressif plus large.
• certaines annonces indiquent une extension globale pour les abonnés AI Ultra, même si les fonctionnalités peuvent varier selon les régions.

Concernant la nouvelle intégration Street View, les premières implémentations concernent surtout des lieux situés aux États‑Unis, avec une extension à d’autres régions prévue par la suite.

La technologie derrière Project Genie

Le système repose sur Genie 3, un modèle de monde développé par Google DeepMind.

Contrairement aux générateurs d’images ou de vidéo classiques, Genie crée des environnements interactifs complets.

Ses principales caractéristiques techniques incluent :

• génération d’environnement en temps réel, qui se construit au fur et à mesure de l’exploration,
• navigation interactive, plutôt qu’une séquence vidéo prédéfinie,
• environ 20 à 24 images par seconde avec une résolution autour de 720p,
• cohérence de l’environnement pendant plusieurs minutes lors de l’interaction.

Techniquement, le modèle génère chaque nouvelle image en fonction des images précédentes et des actions de l’utilisateur, un mécanisme comparable à la façon dont les modèles de langage prédisent le mot suivant dans une phrase.

Les limites actuelles

Malgré des démonstrations impressionnantes, Project Genie reste un prototype de recherche avec plusieurs contraintes.

Parmi les limites connues :

• accès restreint via un abonnement haut de gamme Google AI Ultra,
• couverture géographique limitée pour l’intégration Street View, initialement centrée sur les États‑Unis,
• cohérence temporaire limitée, les environnements restant stables seulement quelques minutes,
• interactions encore restreintes, avec un nombre d’actions possibles relativement limité.

Ces limites signifient que la technologie est encore loin d’un moteur de simulation complet prêt pour un usage grand public.

Pourquoi Google développe des « world models »

Pour Google DeepMind, les modèles de monde comme Genie pourraient devenir une brique essentielle de l’IA avancée, capable de comprendre et simuler des environnements complexes.

Plusieurs domaines pourraient en bénéficier.

Jeux vidéo et création interactive

Les développeurs pourraient générer rapidement des environnements jouables à partir d’une simple description, accélérant la création de niveaux ou de mondes entiers.

Éducation et exploration virtuelle

Grâce à l’ancrage dans des lieux réels, les élèves pourraient explorer des villes, des sites historiques ou des écosystèmes sous forme de simulations interactives.

Entraînement de robots et d’agents IA

Les simulations sont essentielles pour entraîner des robots en toute sécurité. Un système capable de générer un nombre quasi illimité d’environnements réalistes pourrait servir de terrain d’apprentissage pour l’IA et la robotique.

Un changement plus large dans l’IA

La plupart des outils d’IA générative créent du contenu : texte, images ou vidéos.

Les modèles comme Genie visent plutôt à créer des environnements entiers qui évoluent dans le temps et réagissent aux actions.

Si cette approche mûrit, la frontière entre cartes numériques, jeux vidéo, simulations et environnements d’entraînement pour l’IA pourrait progressivement s’estomper au profit d’une même plateforme technologique.