Улучшение моделей ИИ для получения более качественных текстур в Unity Muse

На выставке Unite 2023 мы представили миру Unity Muse- набор возможностей, которые помогут вам с большей легкостью исследовать, создавать идеи и итерации в редакторе Unity. Одной из таких возможностей является текстура. Возможность текстурирования в Muse преобразует естественный язык и визуальные данные в материалы с поддержкой PBR, которые можно применять непосредственно к поверхностям и объектам в вашем проекте.

В нашем блоге "Ответственный ИИ и улучшенная подготовка моделей в Unity" мы рассказали о том, как основополагающая модель текстур Muse, Photo-Real-Unity-Texture-1, была ответственно построена и обучена, чтобы выходные данные были безопасны для использования и уважали авторские права других людей. В частности, мы подробно рассказали о том, как мы впервые разработали специальную модель диффузии, обученную с нуля на основе собственных данных, которые принадлежат Unity или лицензированы.
Мы продолжаем ответственно относиться к созданию искусственного интеллекта в интересах наших создателей, и сегодня мы запускаем следующее поколение этой модели - Photo-Real-Unity-Texture-2.

В последней версии нашей модели мы сосредоточились на улучшении типов материалов, которые часто встречаются в играх. Такие материалы, как дерево, кирпич, бетон, кожа, металлы, гравий, почва и многие другие, претерпели значительные изменения. Также улучшена согласованность цветов в подсказках, а в предстоящем выпуске пакета Muse Texture появится возможность выбирать одновременно и конкретный цвет, и конкретный узор.
Кроме того, наша модель имеет значительные улучшения, связанные с созданием карт высот. Высотные карты теперь по умолчанию 16-битные, и модель стала гораздо более способной создавать правдоподобные карты для абстрактных концепций во многих случаях.
Photo-Real-Unity-Texture-2 была внедрена в Unity Muse, так что все пользователи Muse могут воспользоваться преимуществами этих улучшенных текстур уже сегодня.
Эти боковые сравнения показывают разницу в качестве между Photo-Real-Unity-Texture 1 и Photo-Real-Unity Texture 2.
Слева - изображения предыдущей модели, справа - новой.









Глубина - важнейший аспект для достижения качественного взаимодействия со светом. Сравнение бок о бок показывает разницу в качестве карт высот и нормалей между Photo-Real-Unity-Texture-1 и Photo-Real-Unity-Texture-2.
Изображения слева относятся к нашей предыдущей модели, а изображения справа - к новой.




Мы продолжим улучшать качество вывода Muse Texture самым ответственным образом. Другие области для улучшения в нашей текущей дорожной карте включают интеграцию редакторов, художественный контроль, а также лучшие инструменты для обучения и введения в курс дела.
Интеграция редактора
Вы сказали нам, что глубокая интеграция Muse Texture в рабочий процесс редактора имеет первостепенное значение для вашего успеха. Мы будем продолжать в том же духе и стремиться создать как можно более бесшовный опыт с помощью новых функций, таких как быстрое изменение в сцене, а также упростить использование наших карт материалов в других шейдерах.
Художественный контроль
Модели будут совершенствоваться и дальше, но мы узнали, что многие из вас хотят и нуждаются в большем художественном контроле для достижения желаемых результатов. Дополнительные функции, улучшающие художественный контроль, позволят вам быстрее и легче реализовать задуманное. Мы планируем еще больше улучшить контроль и согласованность цветов, добавить возможность конвертировать фотографии или эталонные изображения в материалы, а также позволить вам управлять стилизацией текстур с помощью эталонных активов.
Обучение и введение в должность
Генеративный ИИ - это новая технология. Мы сосредоточимся на улучшении вводных и обучающих материалов, чтобы помочь вам использовать возможности инструмента для глубокого художественного контроля. Мы сосредоточимся на сокращении вашего пути, чтобы помочь вам как можно быстрее достичь успеха.
Попробуйте Unity Muse бесплатно в течение первых 15 дней, чтобы узнать, как возможности искусственного интеллекта позволяют быстрее создавать прототипы в редакторе Unity. Если у вас возникли вопросы, ознакомьтесь с нашим FAQ по искусственному интеллекту или посетите специальные обсуждения Unity Muse, чтобы пообщаться с нами напрямую.