Verbesserungen am AI-Modell für hochwertigere Texturen in Unity Muse
Auf der Unite 2023 haben wir der Welt Unity Muse vorgestellt, eine Reihe von Funktionen, die Ihnen helfen, den Unity-Editor noch einfacher zu erforschen, Ideen zu entwickeln und zu bearbeiten. Eine dieser Fähigkeiten ist die Textur. Die Texturfunktion von Muse wandelt natürliche Sprache und visuelle Eingaben in PBR-aktivierte Materialien um, die direkt auf Oberflächen und Objekte in Ihrem Projekt angewendet werden können.
In unserem Blog "Responsible AI and enhanced model training at Unity"(Verantwortungsvolle KI und verbessertes Modelltraining bei Unity) haben wir beschrieben, wie das grundlegende Modell von Muse für Texturen, Photo-Real-Unity-Texture-1, verantwortungsvoll erstellt und trainiert wurde, sodass die Ausgaben sicher zu verwenden sind und die Urheberrechte anderer respektiert werden. Im Einzelnen haben wir erläutert, wie wir ein maßgeschneidertes Diffusionsmodell entwickelt haben, das von Grund auf auf geschützten Daten trainiert wurde, die sich im Besitz von Unity befinden oder lizenziert sind.
Wir verpflichten uns weiterhin, KI verantwortungsvoll im Dienste unserer Schöpfer zu entwickeln, und bringen heute die nächste Generation dieses Modells auf den Markt: Photo-Real-Unity-Texture-2.
In der neuesten Version unseres Modells haben wir uns auf die Verbesserung von Materialtypen konzentriert, die in Spielen häufig vorkommen. Materialien wie Holz, Ziegel, Beton, Leder, Metalle, Kies, Erde und viele andere wurden erheblich verbessert. Die auf Eingabeaufforderungen basierende Farbkonsistenz wurde ebenfalls verbessert, und eine kommende Version des Muse-Texturpakets wird die Möglichkeit bieten, sowohl eine bestimmte Farbe als auch ein bestimmtes Muster gleichzeitig auszuwählen.
Darüber hinaus weist unser Modell erhebliche Verbesserungen bei der Erstellung von Höhenkarten auf. Heightmaps sind jetzt standardmäßig 16 Bit, und das Modell ist in vielen Fällen viel besser in der Lage, glaubwürdige Maps für abstrakte Konzepte zu erstellen.
Photo-Real-Unity-Texture-2 wurde in Unity Muse implementiert, so dass alle Muse-Benutzer die Vorteile dieser verbesserten Texturen noch heute nutzen können.
Diese Gegenüberstellung zeigt den Qualitätsunterschied zwischen Photo-Real-Unity-Texture 1 und Photo-Real-Unity-Texture 2.
Die Bilder auf der linken Seite stammen von unserem vorherigen Modell, die Bilder auf der rechten Seite von unserem neuen Modell.
Die Tiefe ist ein entscheidender Aspekt für eine hochwertige Interaktion mit Licht. Die nebeneinander liegenden Vergleiche zeigen den Unterschied in der Qualität der Höhenkarten und Normalen zwischen Photo-Real-Unity-Texture-1 und Photo-Real-Unity-Texture-2.
Die Bilder auf der linken Seite stammen von unserem vorherigen Modell, während die Bilder auf der rechten Seite von unserem neuen Modell stammen.
Wir werden die Ausgabequalität von Muse Texture weiterhin auf möglichst verantwortungsvolle Weise verbessern. Zu den weiteren Verbesserungsmöglichkeiten in unserer aktuellen Roadmap gehören die Integration von Editoren, die künstlerische Kontrolle und bessere Tools für die Ausbildung und das Onboarding.
Integration von Editoren
Sie haben uns gesagt, dass die tiefe Integration von Muse Texture in Ihren Editor-Workflow für Ihren Erfolg ausschlaggebend ist. Wir werden dies auch weiterhin tun und versuchen, ein möglichst nahtloses Erlebnis zu schaffen, indem wir neue Funktionen wie schnelle Variationen in der Szene anbieten und es einfacher machen, unsere Materialkarten in andere Shader zu integrieren.
Künstlerische Kontrolle
Die Modelle werden weiter verbessert, aber wir haben erfahren, dass viele von Ihnen mehr künstlerische Kontrolle wünschen und benötigen, um die gewünschten Ergebnisse zu erzielen. Zusätzliche Funktionen, die die künstlerische Kontrolle verbessern, ermöglichen es Ihnen, Ihre Vorstellungen schneller und einfacher zu verwirklichen. Wir planen, die Farbkontrolle und -konsistenz weiter zu verbessern, die Möglichkeit hinzuzufügen, Fotos oder Referenzbilder in Materialien zu konvertieren, und Ihnen die Möglichkeit zu geben, die Texturstilisierung anhand von Referenzobjekten zu steuern.
Ausbildung und Einarbeitung
Generative KI ist eine neue Technologie. Wir werden uns auf ein besseres Onboarding und Lernmaterial konzentrieren, um Ihnen zu helfen, die Funktionen des Tools für eine tiefgreifende künstlerische Kontrolle zu nutzen. Wir werden uns darauf konzentrieren, Ihren Weg zu verkürzen, damit Sie so schnell wie möglich Erfolg haben.
Testen Sie Unity Muse in den ersten 15 Tagen kostenlos und erfahren Sie, wie Sie mit den KI-Funktionen im Unity-Editor schneller Prototypen erstellen können. Wenn Sie Fragen haben, lesen Sie unsere KI-FAQ, oder besuchen Sie unsere speziellen Unity Muse-Diskussionen, um direkt mit uns zu sprechen.