Project Genie de Google DeepMind permet de créer et explorer des mondes virtuels en temps réel

Project Genie est un prototype de recherche que Google DeepMind a commencé à distribuer auprès des abonnés Google AI Ultra aux États-Unis. L'outil permet de créer des environnements navigables en utilisant des descriptions textuelles et des images, qui peuvent ensuite être explorés en temps réel.

La technologie qui alimente ce prototype est Genie 3, un modèle de monde qui simule la dynamique d'un environnement et prédit comment les éléments évoluent selon les actions de l'utilisateur. Contrairement aux expériences 3D statiques, Genie 3 génère le chemin à suivre en temps réel pendant que l'utilisateur se déplace et interagit. Le modèle simule la physique et les interactions pour créer des mondes dynamiques et permet la simulation de divers scénarios, de la robotique à la fiction en passant par l'exploration de lieux historiques.

Le fonctionnement de Project Genie repose sur trois capacités. La première est l'esquisse de mondes, qui permet de créer un environnement à l'aide de texte et d'images. Les utilisateurs définissent leur personnage, le monde et comment l'explorer, que ce soit en marchant, en volant ou en conduisant. Nano Banana Pro a été intégré pour prévisualiser le monde et ajuster l'image avant d'y entrer, ainsi que pour définir la perspective du personnage.

La deuxième fonctionnalité est l'exploration du monde. Une fois créé, l'environnement devient un espace navigable où Project Genie génère le chemin en temps réel selon les actions de l'utilisateur, avec la possibilité d'ajuster la caméra pendant le parcours.

La troisième capacité est le remixage de mondes. Les utilisateurs peuvent modifier des mondes existants pour créer de nouvelles versions ou explorer des mondes de la galerie. Une fois l'exploration terminée, il est possible de télécharger des vidéos des mondes créés.

En tant que prototype expérimental, Project Genie présente des limitations. Les mondes générés peuvent ne pas sembler complètement réalistes ou ne pas adhérer aux indications ou à la physique du monde réel. Les personnages peuvent être moins contrôlables et les générations sont limitées à 60 secondes.

L'accès a commencé à être déployé pour les abonnés Google AI Ultra aux États-Unis âgés de 18 ans et plus, avec des plans d'expansion vers d'autres territoires prochainement.

Points clés

• Google DeepMind lance Project Genie, un prototype pour créer et explorer des mondes interactifs avec l'IA
• Fonctionne avec Genie 3, un modèle qui génère des environnements en temps réel pendant que l'utilisateur interagit
• Permet de créer des mondes avec du texte et des images, de les explorer de manière navigable et de remixer des créations existantes
• Intègre Nano Banana Pro pour prévisualiser et ajuster les mondes avant d'y accéder
• Les mondes sont générés dynamiquement selon les actions de l'utilisateur pendant l'exploration
• Disponible initialement pour les abonnés Google AI Ultra aux États-Unis âgés de 18 ans et plus
• Présente des limitations comme le réalisme visuel, le contrôle des personnages et une durée maximale de 60 secondes
• Google prévoit d'étendre l'accès à d'autres territoires à l'avenir