Amélioration des modèles d'IA pour des textures de meilleure qualité dans Unity Muse
Lors de l'Unite 2023, nous avons présenté au monde entier Unity Muse, une suite de fonctionnalités pour vous aider à explorer, idéaliser et itérer avec une plus grande facilité dans l'éditeur Unity. L'une de ces capacités est la texture. La capacité de texture de Muse transforme le langage naturel et les entrées visuelles en matériaux PBR qui peuvent être appliqués directement aux surfaces et aux objets de votre projet.
Dans notre blog "Responsible AI and enhanced model training at Unity", nous avons expliqué comment le modèle de base de Muse pour les textures, Photo-Real-Unity-Texture-1, a été construit et formé de manière responsable afin que les résultats puissent être utilisés en toute sécurité et dans le respect des droits d'auteur d'autrui. Plus précisément, nous avons expliqué comment nous avons mis au point un modèle de diffusion sur mesure, formé à partir de zéro sur des données exclusives appartenant à l'Union ou faisant l'objet d'une licence.
Nous restons déterminés à construire l'IA de manière responsable au service de nos créateurs et nous lançons aujourd'hui la nouvelle génération de ce modèle, Photo-Real-Unity-Texture-2.
Dans la dernière version de notre modèle, nous nous sommes concentrés sur l'amélioration des types de matériaux que l'on trouve couramment dans les jeux. Les matériaux tels que le bois, les briques, le béton, le cuir, les métaux, le gravier, la terre et bien d'autres encore ont tous connu des améliorations significatives. La cohérence des couleurs basée sur les invites a également été améliorée, et une prochaine version de Muse Texture permettra de choisir simultanément une couleur et un motif spécifiques.
En outre, notre modèle apporte des améliorations significatives en ce qui concerne la création de cartes d'altitude. Les cartes de hauteur sont maintenant en 16 bits par défaut, et le modèle est beaucoup plus capable de produire des cartes crédibles pour des concepts abstraits dans de nombreux cas.
Photo-Real-Unity-Texture-2 a été implémenté dans Unity Muse, de sorte que tous les utilisateurs de Muse peuvent profiter de ces textures améliorées dès aujourd'hui.
Ces comparaisons côte à côte montrent la différence de qualité entre Photo-Real-Unity-Texture 1 et Photo-Real-Unity Texture 2.
Les images de gauche sont celles de notre ancien modèle et celles de droite celles de notre nouveau modèle.
La profondeur est un aspect essentiel pour obtenir une interaction de qualité avec la lumière. Les comparaisons côte à côte montrent la différence de qualité des cartes de hauteur et des normales entre Photo-Real-Unity-Texture-1 et Photo-Real-Unity-Texture-2.
Les images de gauche sont celles de notre modèle précédent, tandis que les images de droite sont celles de notre nouveau modèle.
Nous continuerons à améliorer la qualité de Muse Texture de la manière la plus responsable possible. Parmi les autres domaines d'amélioration de notre feuille de route actuelle figurent l'intégration de l'éditeur, le contrôle artistique et de meilleurs outils d'éducation et de formation.
Intégration de l'éditeur
Vous nous avez dit que l'intégration de Muse Texture dans votre flux de travail d'éditeur était primordiale pour votre réussite. Nous continuerons à le faire et nous visons à créer une expérience aussi transparente que possible grâce à de nouvelles fonctionnalités telles que la variation rapide dans la scène, et en facilitant l'intégration de nos cartes de matériaux dans d'autres shaders.
Contrôle artistique
Les modèles continueront à s'améliorer, mais nous avons appris que beaucoup d'entre vous souhaitent et ont besoin d'un contrôle artistique plus poussé pour obtenir les résultats souhaités. Les fonctions supplémentaires qui améliorent le contrôle artistique vous permettront d'atteindre votre objectif plus rapidement et plus facilement. Nous prévoyons d'améliorer encore le contrôle et la cohérence des couleurs, d'ajouter la possibilité de convertir des photos ou des images de référence en matériaux, et de vous permettre de contrôler la stylisation des textures à l'aide de ressources de référence.
Formation et intégration
L'IA générative est une nouvelle technologie. Nous nous concentrerons sur l'amélioration de l'accueil et du matériel d'apprentissage afin de vous aider à tirer parti des fonctionnalités de l'outil pour un contrôle artistique approfondi. Nous nous efforcerons de raccourcir votre parcours pour vous aider à réussir le plus rapidement possible.
Essayez Unity Muse gratuitement pendant les 15 premiers jours pour découvrir comment les capacités de l'IA vous permettent de prototyper plus rapidement dans l'éditeur Unity. Si vous avez des questions, consultez notre FAQ sur l'IA, ou visitez nos discussions dédiées à Unity Muse pour discuter directement avec nous.