Melhorias no modelo de IA para texturas de alta qualidade no Unity Muse

Na Unite 2023, apresentamos ao mundo o Unity Muse, um conjunto de recursos para ajudar você a explorar, idealizar e iterar com mais facilidade no Unity Editor. Um desses recursos é Textura. O recurso de textura do Muse transforma linguagem natural e entradas visuais em materiais habilitados para PBR que podem ser aplicados diretamente a superfícies e objetos em seu projeto.

Em nosso blog “IA responsável e treinamento de modelo aprimorado na Unity”, compartilhamos como o modelo fundamental do Muse para texturas, Photo-Real-Unity-Texture-1, foi criado e treinado de forma responsável para que as saídas sejam seguras para uso e respeitem os direitos autorais de terceiros. Especificamente, detalhamos como fomos pioneiros em um modelo de difusão personalizado, treinado do zero em dados proprietários da Unity ou licenciados.
Continuamos comprometidos em construir IA de forma responsável a serviço de nossos criadores e, hoje, estamos lançando a próxima geração deste modelo, Photo-Real-Unity-Texture-2.

Na versão mais recente do nosso modelo, nos concentramos em melhorar os tipos de materiais que comumente ocorrem em jogos. Materiais como madeira, tijolos, concreto, couro, metais, cascalho, solo e muitos outros tiveram melhorias significativas. A consistência de cores baseada em prompts também foi melhorada, e um lançamento futuro do pacote Muse Texture incluirá a capacidade de escolher uma cor e um padrão específicos ao mesmo tempo.
Além disso, nosso modelo tem melhorias significativas relacionadas à criação de mapas de altura. Os mapas de altura agora são de 16 bits por padrão, e o modelo é muito mais capaz de produzir mapas confiáveis para conceitos abstratos em muitos casos.
O Photo-Real-Unity-Texture-2 foi implementado no Unity Muse, para que todos os usuários do Muse possam aproveitar essas texturas aprimoradas hoje mesmo.
Essas comparações lado a lado mostram a diferença de qualidade entre o Photo-Real-Unity-Texture 1 e o Photo-Real-Unity Texture 2.
As imagens à esquerda são do nosso modelo anterior e as imagens à direita são do nosso novo modelo.









A profundidade é um aspecto essencial para alcançar uma interação de alta qualidade com a luz. As comparações lado a lado mostram a diferença na qualidade dos mapas de altura e normais entre Photo-Real-Unity-Texture-1 e Photo-Real-Unity-Texture-2.
As imagens à esquerda são do nosso modelo anterior, enquanto as imagens à direita são do nosso novo modelo.




Continuaremos melhorando a qualidade dos resultados do Muse Texture da maneira mais responsável possível. Outras áreas de melhoria em nosso roteiro atual incluem integração do Editor, controle artístico e melhores ferramentas para educação e integração.
Integração do editor
Você nos disse que integrar profundamente o Muse Texture ao seu fluxo de trabalho do Editor é fundamental para seu sucesso. Continuaremos fazendo isso e buscaremos criar uma experiência o mais integrada possível com novos recursos, como variação rápida na cena, e facilitando a transferência de nossos mapas de materiais para outros shaders.
Controle artístico
Os modelos continuarão melhorando, mas aprendemos que muitos de vocês querem e precisam de mais controle artístico para alcançar os resultados desejados. Recursos adicionais que melhoram o controle artístico permitirão que você alcance sua visão com mais rapidez e facilidade. Planejamos melhorar ainda mais o controle e a consistência das cores, adicionar a capacidade de converter fotos ou imagens de referência em materiais e permitir que você controle a estilização de textura usando ativos de referência.
Educação e integração
IA generativa é uma nova tecnologia. Vamos nos concentrar em melhores materiais de integração e aprendizado para ajudar você a aproveitar os recursos da ferramenta para um controle artístico profundo. Vamos nos concentrar em encurtar sua jornada para ajudar você a encontrar o sucesso o mais rápido possível.
Experimente o Unity Muse gratuitamente pelos primeiros 15 dias para ver como os recursos de IA permitem que você crie protótipos mais rapidamente no Unity Editor. Se você tiver dúvidas, confira nossas Perguntas frequentes sobre IAou visite nossas discussões dedicadas do Unity Muse para conversar conosco diretamente.