Visualização imersiva de imagens médicas com a Specto Medical e Unity

Visualização imersiva de imagens médicas com a Specto Medical e Unity

A Specto Medical é uma empresa de software suíça, fundada em 2022, como um desdobramento da Universidade de Basel, Suíça. A Specto Medical evoluiu para uma promissora empresa de tecnologia em saúde. Alcançar marcos regulatórios tem sido crítico para a jornada da Specto dos laboratórios de pesquisa para as salas de operação. Com o apoio do incubador JLABS da Johnson & Johnson e uma bem-sucedida rodada de investimento inicial, a empresa recentemente obteve a autorização 510(k) da FDA para uso clínico, com a marca CE no horizonte.

Neste artigo, descubra como a Specto Medical está redefinindo o planejamento pré-cirúrgico e a comunicação com os pacientes através da visualização 3D imersiva — e a jornada por trás de sua plataforma XR aprovada pela FDA construída na Unity que está transformando a imagem médica em uma experiência interativa e intuitiva.

Observação: Este artigo contém imagens médicas que podem ser desconfortáveis para alguns.

Em uma sessão de planejamento pré-cirúrgico, um neurocirurgião coloca um headset de VR e entra na tomografia cerebral de um paciente. Um emaranhado complexo de vasos sanguíneos é exibido em três dimensões ao seu redor e uma anormalidade vascular, um chamado aneurisma, é rapidamente identificada. O que antes era uma pilha de fatias de tomografia computadorizada (TC) em escala de cinza agora é um ambiente 3D imersivo, e o cirurgião pode literalmente caminhar ao redor do aneurisma para examiná-lo de todos os ângulos. Isso não é um protótipo distante; é uma realidade diária com Specto, uma plataforma de visualização de imagens médicas de ponta construída com Unity.

Da complexidade à clareza

No mundo de alto risco da neurocirurgia, clareza é tudo. A tecnologia de imagem médica de hoje produz escaneamentos incrivelmente detalhados, mas esses ricos conjuntos de dados são frequentemente subutilizados no planejamento cirúrgico e na comunicação com os pacientes. Visualizações tradicionais em 2D exigem que os cirurgiões reconstruam mentalmente anatomias complexas em 3D a partir de fatias planas—um processo que é tanto cognitivamente exigente quanto propenso a interpretações errôneas. Enquanto isso, os pacientes frequentemente têm dificuldade em compreender seus diagnósticos quando apresentados com imagens em escala de cinza e jargão médico.

A Specto aborda esses desafios transformando os dados de imagem bruta em visualizações 3D intuitivas e interativas que tanto profissionais médicos quanto pacientes podem entender facilmente. Para os cirurgiões, isso significa uma carga cognitiva reduzida e uma melhor compreensão espacial. Para os pacientes, isso fornece uma janela acessível para suas próprias condições, substituindo a ansiedade e a confusão por clareza.

Transformando a imagem médica em insights acionáveis

A Specto transforma essa promessa de clareza em ação, oferecendo um conjunto de ferramentas práticas que trazem a imagem médica à vida em três dimensões. Desde visualização imersiva e planejamento cirúrgico até colaboração remota e integração hospitalar, a solução apoia os clínicos em cada etapa—do diagnóstico à sala de cirurgia.

1. Visualização médica de alta fidelidade em XR

Em sua essência, a Specto permite que profissionais de saúde visualizem dados tradicionais de imagem médica, como TC e RM, em um ambiente XR interativo em segundos. Usando renderização de volume direta com interação em tempo real, a Specto elimina a necessidade de análises de imagem longas, reconstruções em 3D ou criação de malhas de superfície. Os dados radiológicos são renderizados em tempo real via ray marching, preservando todos os ricos detalhes da varredura original.

Os médicos podem ajustar os parâmetros de visualização dinamicamente para destacar diferentes tecidos ou estruturas e isolar os órgãos ou patologias de interesse. O renderizador de volume é otimizado para manter altas taxas de quadros mesmo com conjuntos de dados complexos, garantindo uma experiência suave e confortável em sessões prolongadas de XR.

2. Planejamento cirúrgico

Indo além da visualização, o Specto inclui ferramentas interativas para planejamento pré-operatório. Os cirurgiões podem anotar estruturas de interesse, usar instrumentos de medição para avaliar distâncias ou ângulos entre marcos anatômicos e posicionar virtualmente implantes dentro da anatomia do paciente para avaliar seu encaixe—tudo isso antes de fazer uma única incisão na sala de cirurgia.

Para os cirurgiões, um dos aspectos mais transformadores é a capacidade de visualizar anatomia complexa com verdadeira percepção de profundidade. Os exercícios mentais de reconstruir uma imagem 3D a partir de tomografias ou ressonâncias magnéticas planas não são mais necessários. A anatomia específica do paciente é renderizada em 3D, em escala, bem diante de seus olhos. Essa consciência espacial aprimorada melhora a confiança cirúrgica e pode resultar em um efeito de déjà vu na sala de cirurgia.

3. Colaboração online

O Specto suporta sessões multiusuário em um ambiente virtual compartilhado. Vários cirurgiões, radiologistas ou estudantes podem se juntar à mesma cena 3D e examinar um caso juntos de forma colaborativa. Em um ambiente educacional, um instrutor pode guiar residentes pela anatomia em VR. Em um contexto clínico, cirurgiões de diferentes locais e áreas de especialização podem se encontrar em um espaço virtual compartilhado para discutir uma abordagem cirúrgica.

Esses recursos colaborativos também melhoram a educação do paciente. Ser informado sobre um diagnóstico em jargão técnico ou olhar para imagens de escaneamento em preto e branco pode ser intimidador e confuso para os pacientes.

Usando o Specto, os cuidadores podem mostrar aos pacientes qual é o problema dentro de seu corpo e como será resolvido em um formato intuitivo que não requer formação médica para entender. Essa transparência ajuda os pacientes a se tornarem participantes mais ativos em sua jornada de cuidados, em vez de meros receptores de tratamento.

4. Integração hospitalar

O Specto pode se integrar perfeitamente aos sistemas de imagem e arquivamento do hospital, permitindo que os cirurgiões puxem rapidamente escaneamentos para o ambiente de visualização. Essa integração economiza minutos preciosos durante as reuniões cirúrgicas matinais, pois os clínicos podem acessar imediatamente os escaneamentos dos pacientes e discutir o caso em um ambiente virtual 3D.

Poderando precisão com a plataforma 3D em tempo real da Unity

Para criar esta plataforma de visualização médica em tempo real, os desenvolvedores da Specto escolheram Unity como sua base—uma decisão que trouxe dividendos em agilidade e capacidade.

1. Prototipagem rápida e iteração

Na fase inicial de prototipagem, a equipe precisava experimentar várias técnicas de renderização volumétrica e conceitos de interação em VR. O ambiente de desenvolvimento da Unity forneceu ferramentas ideais para iteração rápida, particularmente para o desenvolvimento de shaders. A capacidade de hot-reloading da Unity permite que o código do shader seja atualizado em tempo real sem recompilar toda a aplicação, criando um fluxo de trabalho eficiente para refinar algoritmos de renderização volumétrica. Esse recurso se mostrou inestimável ao ajustar os shaders de marcha de raios que alimentam a visualização da Specto.

2. Gráficos de alto desempenho e integração

A pipeline gráfica extensível da Unity permitiu que a equipe da Specto implementasse seu renderizador de marcha de raios personalizado, enquanto ainda se beneficiava das capacidades centrais de um sistema de renderização robusto e comprovado em produção. Eles aproveitaram shaders de computação personalizados para processamento volumétrico acelerado por GPU, alcançando o desempenho necessário para visualização médica em VR.

As ferramentas de perfilamento integradas na Unity ajudaram a identificar e resolver gargalos de desempenho, resultando em uma experiência suave onde os cirurgiões podem ajustar instantaneamente a visibilidade do tecido ou aplicar planos de corte e segmentações para destacar estruturas internas.

3. Suporte XR multiplataforma

Uma das forças mais importantes da Unity é seu amplo suporte a plataformas e dispositivos. Com a Unity, a equipe pode implantar a Specto em vários hardwares sem dedicar recursos significativos de engenharia na integração de novas APIs. O aplicativo suporta headsets de VR como Meta Quest 3 e dispositivos de AR como HoloLens 2. Unity abstrai muitas diferenças de hardware, incluindo os backends gráficos subjacentes usados por diferentes headsets, então adicionar suporte para novos dispositivos é relativamente simples. Essa flexibilidade garante que o Specto esteja preparado para o futuro à medida que novos hardwares de XR surgem.

4. Os benefícios do ecossistema Unity

Construir sobre o Unity permitiu que o Specto aproveitasse um ecossistema de desenvolvimento maduro e bem suportado. A disponibilidade de recursos na Unity Asset Store, como ativos pré-construídos, ferramentas e pacotes de terceiros, acelerou significativamente o progresso da equipe—liberando-os para se concentrar em suas inovações principais em vez de reinventar componentes fundamentais.

Por exemplo, o Specto usou o Mirror, um framework multiplayer de terceiros, para implementar rapidamente recursos colaborativos sem construir uma camada de rede do zero. Outros recursos prontos para uso, como modelos 3D simples, ferramentas de depuração e ativos de ambiente, ajudaram a agilizar o desenvolvimento e a prototipagem.

A ubiquidade do Unity também significa ampla compatibilidade com serviços de terceiros e integrações de hardware, enquanto o suporte ao .NET Standard permite acesso a bibliotecas confiáveis para criptografia, registro avançado e outras funcionalidades essenciais de backend.

Confiável por cirurgiões, validado nas linhas de frente do atendimento

A validação mais convincente vem dos cirurgiões que usam o software.

Prof. Dr. med. Raphael Guzman, Chefe de Neurocirurgia no Hospital Universitário de Basileia, e Dr. med. Thorsten Gehrke, Médico Chefe na Clínica Helios em Hamburgo, atestam como o uso do Specto reduziu o tempo de cirurgia e melhorou a segurança por meio de abordagens mais precisas e minimamente invasivas.

Modelando o que vem a seguir nos cuidados cirúrgicos

À medida que a tecnologia XR avança—com headsets mais leves, displays mais nítidos e maior duração da bateria— a experiência de usar o Specto se tornará cada vez mais fluida e impactante. É fácil imaginar um futuro onde revisar exames em VR é tão rotineiro para os cirurgiões quanto ler anotações de casos, e onde os pacientes recebem passeios 3D personalizados de sua anatomia como parte do atendimento padrão.

Ao combinar expertise médica com a tecnologia 3D em tempo real da Unity, a Specto Medical está ajudando a fechar a lacuna entre dados médicos complexos e compreensão intuitiva—permitindo que os clínicos tomem decisões mais confiantes e capacitando os pacientes com insights mais claros sobre sua saúde.

A saúde imersiva não está mais no horizonte; ela está aqui—e já está moldando melhores resultados tanto para cirurgiões quanto para pacientes.