Mejoras en los modelos de IA para obtener texturas de mayor calidad en Unity Muse.
En Unite 2023, presentamos al mundo Unity Muse, un conjunto de funciones para ayudarte a explorar, idear e iterar con mayor facilidad en el Editor de Unity. Una de estas capacidades es la Textura. La función de texturas de Muse transforma el lenguaje natural y las entradas visuales en materiales habilitados para PBR que pueden aplicarse directamente a superficies y objetos del proyecto.
En nuestro blog "Responsible AI and enhanced model training at Unity," compartimos cómo el modelo fundacional de Muse para texturas, Photo-Real-Unity-Texture-1,fue construido y entrenado responsablemente para que las salidas sean seguras de usar y respetuosas de los derechos de autor de otros. En concreto, detallamos cómo hemos sido pioneros en la creación de un modelo de difusión a medida entrenado desde cero a partir de datos propios que son propiedad de Unity o tienen licencia.
Seguimos comprometidos con la construcción responsable de IA al servicio de nuestros creadores y hoy, por eso, lanzamos la siguiente generación de este modelo, Photo-Real-Unity-Texture-2.
En la última versión de nuestro modelo, nos hemos centrado en mejorar los tipos de material que suelen aparecer en los juegos. Materiales como la madera, los ladrillos, el hormigón, el cuero, los metales, la grava, el suelo y muchos otros han experimentado mejoras significativas. También se ha mejorado la coherencia del color basada en instrucciones, y una próxima versión del paquete Muse Texture incluirá la posibilidad de elegir un color específico y un patrón específico al mismo tiempo.
Además, nuestro modelo presenta mejoras significativas relacionadas con la creación de mapas de altura. Los mapas de altura son ahora de 16 bits por defecto, y el modelo es mucho más capaz de producir mapas creíbles para conceptos abstractos en muchos casos.
Photo-Real-Unity-Texture-2 se ha implementado en Unity Muse, por lo que todos los usuarios de Muse pueden beneficiarse hoy mismo de estas texturas mejoradas.
Estas comparaciones muestran la diferencia de calidad entre Foto-Realidad-Unidad-Textura 1 y Foto-Realidad-Unidad-Textura 2.
Las imágenes de la izquierda son de nuestro modelo anterior, y las de la derecha, del nuevo.
La profundidad es un aspecto fundamental para lograr una interacción de alta calidad con la luz. Las comparaciones de lado a lado muestran la diferencia de calidad de los mapas de altura y las normales entre Foto-Realidad-Unidad-Textura-1 y Foto-Realidad-Unidad-Textura-2.
Las imágenes de la izquierda son de nuestro modelo anterior, mientras que las de la derecha son de nuestro nuevo modelo.
Seguiremos mejorando la calidad de salida de Muse Texture de la forma más responsable posible. Otras áreas de mejora en nuestra hoja de ruta actual incluyen la integración del editor, el control artístico y mejores herramientas para la educación y la incorporación.
Integración del editor
Nos has dicho que integrar profundamente Muse Texture en tu flujo de trabajo de Editor es primordial para tu éxito. Seguiremos haciéndolo y nuestro objetivo es crear una experiencia lo más fluida posible con nuevas funciones, como la variación rápida en escena, y facilitando la incorporación de nuestros mapas de materiales a otros sombreadores.
Control artístico
Los modelos seguirán mejorando, pero hemos aprendido que muchos de ustedes desean y necesitan un mayor control artístico para lograr los resultados deseados. Las funciones adicionales que mejoran el control artístico le permitirán alcanzar su visión con mayor rapidez y facilidad. Tenemos previsto mejorar aún más el control y la coherencia del color, añadir la posibilidad de convertir fotos o imágenes de referencia en materiales y permitir controlar la estilización de las texturas utilizando activos de referencia.
Formación e incorporación
La IA generativa es una tecnología nueva. Nos centraremos en mejorar la incorporación y los materiales de aprendizaje para ayudarle a aprovechar las funciones de la herramienta para un control artístico profundo. Nos centraremos en acortar su camino para ayudarle a encontrar el éxito lo antes posible.
Prueba Unity Muse gratis durante tus primeros 15 días para experimentar cómo las capacidades de IA te permiten crear prototipos más rápido en el Editor de Unity. Si tiene alguna pregunta, consulte nuestras Preguntas frecuentes sobre IA o visite nuestros Debates dedicados a Unity Muse para charlar directamente con nosotros.