Melhorias no modelo de IA para texturas de alta qualidade no Unity Muse

Mar 5, 2024|5:00 Min
Melhorias no modelo de IA para texturas de alta qualidade no Unity Muse

Esta página da Web foi automaticamente traduzida para sua conveniência. Não podemos garantir a precisão ou a confiabilidade do conteúdo traduzido. Se tiver dúvidas sobre a precisão do conteúdo traduzido, consulte a versão oficial em inglês da página da Web.

Na Unite 2023, apresentamos ao mundo o Unity Muse, um conjunto de recursos para ajudar você a explorar, idealizar e iterar com mais facilidade no Unity Editor. Um desses recursos é Textura. O recurso de textura do Muse transforma linguagem natural e entradas visuais em materiais habilitados para PBR que podem ser aplicados diretamente a superfícies e objetos em seu projeto.

Interface de textura Muse com texturas geradas

Interface de textura Muse com texturas geradas

Em nosso blog “IA responsável e treinamento de modelo aprimorado na Unity”, compartilhamos como o modelo fundamental do Muse para texturas, Photo-Real-Unity-Texture-1, foi criado e treinado de forma responsável para que as saídas sejam seguras para uso e respeitem os direitos autorais de terceiros. Especificamente, detalhamos como fomos pioneiros em um modelo de difusão personalizado, treinado do zero em dados proprietários da Unity ou licenciados.

Continuamos comprometidos em construir IA de forma responsável a serviço de nossos criadores e, hoje, estamos lançando a próxima geração deste modelo, Photo-Real-Unity-Texture-2.

Comparando duas texturas de concreto geradas

Comparando duas texturas de concreto geradas

Na versão mais recente do nosso modelo, nos concentramos em melhorar os tipos de materiais que comumente ocorrem em jogos. Materiais como madeira, tijolos, concreto, couro, metais, cascalho, solo e muitos outros tiveram melhorias significativas. A consistência de cores baseada em prompts também foi melhorada, e um lançamento futuro do pacote Muse Texture incluirá a capacidade de escolher uma cor e um padrão específicos ao mesmo tempo.

Além disso, nosso modelo tem melhorias significativas relacionadas à criação de mapas de altura. Os mapas de altura agora são de 16 bits por padrão, e o modelo é muito mais capaz de produzir mapas confiáveis para conceitos abstratos em muitos casos.

O Photo-Real-Unity-Texture-2 foi implementado no Unity Muse, para que todos os usuários do Muse possam aproveitar essas texturas aprimoradas hoje mesmo.

Melhorias de qualidade

Essas comparações lado a lado mostram a diferença de qualidade entre o Photo-Real-Unity-Texture 1 e o Photo-Real-Unity Texture 2.

As imagens à esquerda são do nosso modelo anterior e as imagens à direita são do nosso novo modelo.

Comparação de duas texturas de couro preto geradas

Comparação de duas texturas de couro preto geradas

Comparação de duas texturas de couro preto riscado geradas

Comparação de duas texturas de couro preto riscado geradas

Texturas geradas por paralelepípedos rápidos, grama

Texturas geradas por paralelepípedos rápidos, grama

Comparação de duas imagens geradas de concreto sujo

Comparação de duas imagens geradas de concreto sujo

Comparando duas texturas de cascalho geradas

Comparando duas texturas de cascalho geradas

Comparação de duas texturas de aço geradas

Comparação de duas texturas de aço geradas

Comparação de duas texturas de piso de mármore geradas

Comparação de duas texturas de piso de mármore geradas

Comparação de duas texturas de tábuas de madeira geradas

Comparação de duas texturas de tábuas de madeira geradas

Comparação de duas texturas de folheado de madeira geradas

Comparação de duas texturas de folheado de madeira geradas

Profundidade melhorada

A profundidade é um aspecto essencial para alcançar uma interação de alta qualidade com a luz. As comparações lado a lado mostram a diferença na qualidade dos mapas de altura e normais entre Photo-Real-Unity-Texture-1 e Photo-Real-Unity-Texture-2.

As imagens à esquerda são do nosso modelo anterior, enquanto as imagens à direita são do nosso novo modelo.

Comparação de duas texturas de pedras de pavimentação geradas

Comparação de duas texturas de pedras de pavimentação geradas

Comparação de duas texturas de tábuas de madeira envelhecidas geradas

Comparação de duas texturas de tábuas de madeira envelhecidas geradas

Comparação de duas texturas de cascalho geradas

Comparação de duas texturas de cascalho geradas

Comparação de duas texturas de rochas musgosas geradas

Comparação de duas texturas de rochas musgosas geradas

Melhorias contínuas

Continuaremos melhorando a qualidade dos resultados do Muse Texture da maneira mais responsável possível. Outras áreas de melhoria em nosso roteiro atual incluem integração do Editor, controle artístico e melhores ferramentas para educação e integração.

Integração do editor

Você nos disse que integrar profundamente o Muse Texture ao seu fluxo de trabalho do Editor é fundamental para seu sucesso. Continuaremos fazendo isso e buscaremos criar uma experiência o mais integrada possível com novos recursos, como variação rápida na cena, e facilitando a transferência de nossos mapas de materiais para outros shaders.

Controle artístico

Os modelos continuarão melhorando, mas aprendemos que muitos de vocês querem e precisam de mais controle artístico para alcançar os resultados desejados. Recursos adicionais que melhoram o controle artístico permitirão que você alcance sua visão com mais rapidez e facilidade. Planejamos melhorar ainda mais o controle e a consistência das cores, adicionar a capacidade de converter fotos ou imagens de referência em materiais e permitir que você controle a estilização de textura usando ativos de referência.

Educação e integração

IA generativa é uma nova tecnologia. Vamos nos concentrar em melhores materiais de integração e aprendizado para ajudar você a aproveitar os recursos da ferramenta para um controle artístico profundo. Vamos nos concentrar em encurtar sua jornada para ajudar você a encontrar o sucesso o mais rápido possível.

Experimente o Unity Muse gratuitamente pelos primeiros 15 dias para ver como os recursos de IA permitem que você crie protótipos mais rapidamente no Unity Editor. Se você tiver dúvidas, confira nossas Perguntas frequentes sobre IAou visite nossas discussões dedicadas do Unity Muse para conversar conosco diretamente.