WorldGrow : une nouvelle IA capable de générer des mondes 3D entiers à partir d'un simple texte

internal/news/actu

Des chercheurs ont dévoilé WorldGen, un modèle d'intelligence artificielle révolutionnaire qui peut créer des environnements 3D vastes, cohérents et détaillés à partir d'une description textuelle. Le projet est disponible en open source sur GitHub.

WorldGen : Une avancée majeure dans la génération de contenu procédural

Une équipe de chercheurs a récemment publié un article scientifique présentant WorldGen, un système d'intelligence artificielle qui repousse les limites de la création de mondes virtuels. Contrairement aux outils précédents qui génèrent des objets ou des scènes de taille limitée, WorldGen est capable de construire des environnements 3D complets, avec des terrains, des bâtiments, une végétation et une topographie cohérente, le tout à partir d'une simple instruction textuelle (prompt). Par exemple, une commande comme "une vallée forestière dense avec une rivière sinueuse, des ruines de château sur une colline et un petit village médiéval près d'un pont en pierre" peut être transformée en un monde 3D explorable en quelques minutes.

Comment ça marche ?

WorldGen s'appuie sur une architecture de type "modèle de diffusion" spécifiquement entraînée sur d'immenses ensembles de données de scènes 3D, de cartes topographiques et de données géospatiales. Le modèle apprend non seulement l'apparence des objets individuels, mais aussi les relations spatiales et écologiques qui les unissent. Il comprend comment une rivière sculpte un paysage, où une forêt est susceptible de pousser, et comment une ville s'organise naturellement autour de ses points d'intérêt. Cette compréhension contextuelle lui permet de générer des mondes qui sont non seulement visuellement impressionnants, mais aussi logiques et crédibles.

Applications potentielles et implications

Les implications d'une telle technologie sont immenses et touchent de nombreux secteurs :

  • Jeu vidéo : Création rapide de niveaux et de mondes ouverts uniques, réduisant considérablement les coûts et les délais de développement.
  • Cinéma et effets spéciaux : Génération de décors numériques complexes pour des films et des séries, offrant une flexibilité créative sans précédent.
  • Simulations et métavers : Peuplement rapide de vastes mondes virtuels pour la formation, la recherche ou le divertissement.
  • Architecture et urbanisme : Visualisation de projets à grande échelle en générant des environnements urbains ou ruraux réalistes.

Un projet accessible à tous

Fait notable, l'équipe derrière WorldGen, dirigée par le chercheur ZiYang Xie, a rendu le projet entièrement open source. Le code source, les modèles pré-entraînés et la documentation sont disponibles sur GitHub, permettant aux développeurs, aux artistes et aux chercheurs du monde entier d'expérimenter avec cette technologie, de l'améliorer et de l'intégrer dans leurs propres projets. Cette ouverture promet d'accélérer encore davantage l'innovation dans le domaine de la création de contenu 3D.

Sources

Voir sur YoutTube