Visualización médica inmersiva con Specto Medical y Unity

Visualización médica inmersiva con Specto Medical y Unity

Specto Medical es una empresa de software suiza, fundada en 2022, como una escisión de la Universidad de Basilea, Suiza. Specto Medical ha evolucionado hacia una prometedora empresa de tecnología en salud. Lograr hitos regulatorios ha sido crítico para el viaje de Specto desde los laboratorios de investigación hasta las salas de operaciones. Con el respaldo del incubador JLABS de Johnson & Johnson y una exitosa ronda de financiación inicial, la empresa logró recientemente la autorización 510(k) de la FDA para uso clínico, con la marca CE en el horizonte.

En este artículo, descubre cómo Specto Medical está redefiniendo la planificación prequirúrgica y la comunicación con los pacientes a través de visualización 3D inmersiva — y el viaje detrás de su plataforma XR autorizada por la FDA construida sobre Unity que está transformando la imagen médica en una experiencia interactiva e intuitiva.

Nota: Este artículo contiene imágenes médicas que pueden ser incómodas para algunos.

En una sesión de planificación prequirúrgica, un neurocirujano se pone un visor de VR y entra en la exploración cerebral de un paciente. Un complejo enredo de vasos sanguíneos se muestra en tres dimensiones a su alrededor y se identifica rápidamente una anormalidad vascular, un llamado aneurisma. Lo que antes era una pila de cortes de tomografía computarizada (TC) en escala de grises ahora es un entorno 3D inmersivo, y el cirujano puede literalmente caminar alrededor del aneurisma para examinarlo desde todos los ángulos. Este no es un prototipo lejano; es una realidad diaria con Specto, una plataforma de visualización médica de vanguardia construida con Unity.

In a pre-surgical planning session, a neurosurgeon puts on a VR headset and steps inside a patient’s brain scan. A complex tangle of blood vessels is displayed in three dimensions around them and a vascular abnormality, a so-called aneurysm, is quickly identified. What was once a stack of grayscale computed tomography (CT) slices is now an immersive 3D environment, and the surgeon can literally walk around the aneurysm to examine it from every angle. This isn’t a far-off prototype; it’s a daily reality with Specto, a cutting-edge medical imaging visualization platform built with Unity.

De la complejidad a la claridad

En el mundo de alto riesgo de la neurocirugía, la claridad lo es todo. La tecnología de imagen médica de hoy produce exploraciones increíblemente detalladas, pero estos ricos conjuntos de datos a menudo se utilizan poco en la planificación quirúrgica y la comunicación con los pacientes. Las visualizaciones 2D tradicionales requieren que los cirujanos reconstruyan mentalmente complejas anatomías 3D a partir de cortes planos, un proceso que es tanto cognitivamente exigente como propenso a la mala interpretación. Mientras tanto, los pacientes a menudo luchan por comprender sus diagnósticos cuando se les presentan imágenes en escala de grises y jerga médica.

Specto aborda estos desafíos transformando los datos de imagen en bruto en visualizaciones 3D intuitivas e interactivas que tanto los profesionales médicos como los pacientes pueden entender fácilmente. Para los cirujanos, esto significa una carga cognitiva reducida y una mejor comprensión espacial. Para los pacientes, proporciona una ventana accesible a sus propias condiciones, reemplazando la ansiedad y la confusión con claridad.

Transformando la imagen médica en información útil

Specto convierte esa promesa de claridad en acción al ofrecer un conjunto de herramientas prácticas que dan vida a la imagen médica en tres dimensiones. Desde la visualización inmersiva y la planificación quirúrgica hasta la colaboración remota y la integración hospitalaria, la solución apoya a los clínicos en cada paso, desde el diagnóstico hasta el quirófano.

1. Visualización médica de alta fidelidad en XR

En su núcleo, Specto permite a los profesionales de la salud visualizar datos de imagen médica tradicionales, como CT y MRI, en un entorno XR interactivo en segundos. Utilizando renderizado de volumen directo con interacción en tiempo real, Specto elimina la necesidad de análisis de imágenes prolongados, reconstrucciones 3D o creación de mallas de superficie. Los datos radiológicos se renderizan sobre la marcha a través de ray marching, preservando todo el rico detalle de la exploración original.

Los médicos pueden ajustar los parámetros de visualización dinámicamente para resaltar diferentes tejidos o estructuras e aislar los órganos o patologías de interés. El renderizador de volumen está optimizado para mantener altas tasas de fotogramas incluso con conjuntos de datos complejos, asegurando una experiencia fluida y cómoda en sesiones XR prolongadas.

2. Planificación quirúrgica

Más allá de la visualización, Specto incluye herramientas interactivas para la planificación preoperatoria. Los cirujanos pueden anotar estructuras de interés, usar instrumentos de medición para evaluar distancias o ángulos entre puntos de referencia anatómicos, y posicionar virtualmente implantes dentro de la anatomía del paciente para evaluar su ajuste, todo antes de hacer una sola incisión en el quirófano.

Para los cirujanos, uno de los aspectos más transformadores es la capacidad de visualizar anatomía compleja con verdadera percepción de profundidad. Las acrobacias mentales de reconstruir una imagen 3D a partir de escaneos de TC o RM planas ya no son necesarias. La anatomía específica del paciente se representa en 3D, a escala, justo ante sus ojos. Esta mayor conciencia espacial mejora la confianza quirúrgica y puede resultar en un efecto de déjà vu en el quirófano.

3. Colaboración en línea

Specto admite sesiones de múltiples usuarios en un entorno virtual compartido. Múltiples cirujanos, radiólogos o estudiantes pueden unirse a la misma escena 3D y examinar un caso juntos de manera colaborativa. En un entorno educativo, un instructor puede guiar a los residentes a través de la anatomía en VR. En un contexto clínico, cirujanos de diferentes ubicaciones y áreas de especialización pueden reunirse en un espacio virtual compartido para discutir un enfoque quirúrgico.

Estas características colaborativas también mejoran la educación del paciente. Ser informado sobre un diagnóstico en jerga técnica o mirar imágenes de escaneo en blanco y negro borrosas puede ser intimidante y confuso para los pacientes.

Usando Specto, los cuidadores pueden mostrar a los pacientes cuál es el problema dentro de su cuerpo y cómo se solucionará en un formato intuitivo que no requiere antecedentes médicos para entender. Esta transparencia ayuda a los pacientes a convertirse en participantes más activos en su viaje de atención en lugar de receptores pasivos de tratamiento.

4. Integración hospitalaria

Specto puede integrarse sin problemas con los sistemas de imagen y archivo del hospital, permitiendo a los cirujanos extraer rápidamente escaneos en el entorno de visualización. Esta integración ahorra minutos preciosos durante las reuniones quirúrgicas matutinas, ya que los clínicos pueden acceder inmediatamente a los escaneos de los pacientes y discutir el caso en un entorno 3D virtual.

Poderando la precisión con la plataforma 3D en tiempo real de Unity

Para crear esta plataforma de visualización médica en tiempo real, los desarrolladores de Specto eligieron Unity como su base, una decisión que ha dado dividendos en agilidad y capacidad.

1. Prototipado e iteración rápida

En la fase temprana de prototipado, el equipo necesitaba experimentar con varias técnicas de renderizado volumétrico y conceptos de interacción en VR. El entorno de desarrollo de Unity proporcionó herramientas ideales para la iteración rápida, particularmente para el desarrollo de shaders. La capacidad de recarga en caliente de Unity permite que el código de shader se actualice en tiempo real sin recompilar toda la aplicación, creando un flujo de trabajo eficiente para refinar los algoritmos de renderizado volumétrico. Esta característica resultó invaluable al ajustar los shaders de marcha de rayos que impulsan la visualización de Specto.

2. Gráficos de alto rendimiento e integración

La tubería gráfica extensible de Unity permitió al equipo de Specto implementar su propio renderizador de marcha de rayos mientras aún se beneficiaban de las capacidades centrales de un sistema de renderizado robusto y probado en producción. Aprovecharon los shaders de cómputo personalizados para el procesamiento volumétrico acelerado por GPU, logrando el rendimiento necesario para la visualización médica en VR.

Las herramientas de perfilado integradas en Unity ayudaron a identificar y resolver cuellos de botella en el rendimiento, resultando en una experiencia fluida donde los cirujanos pueden ajustar instantáneamente la visibilidad de los tejidos o aplicar planos de corte y segmentaciones para resaltar estructuras internas.

3. Soporte XR multiplataforma

Una de las fortalezas más importantes de Unity es su amplio soporte de plataformas y dispositivos. Con Unity, el equipo puede desplegar Specto en varios hardware sin dedicar recursos significativos de ingeniería a la integración de nuevas API. La aplicación soporta cascos de VR como Meta Quest 3 y dispositivos de AR como HoloLens 2. Unity abstrae muchas diferencias de hardware, incluyendo los backends gráficos subyacentes utilizados por diferentes cascos, por lo que agregar soporte para nuevos dispositivos es relativamente sencillo. Esta flexibilidad asegura el futuro de Specto a medida que surgen nuevos hardware de XR.

4. beneficios del ecosistema de Unity

Construir sobre Unity permitió a Specto aprovechar un ecosistema de desarrollo maduro y bien soportado. La disponibilidad de recursos en Unity Asset Store como activos preconstruidos, herramientas y paquetes de terceros aceleró significativamente el progreso del equipo, liberándolos para enfocarse en sus innovaciones centrales en lugar de reinventar componentes fundamentales.

Por ejemplo, Specto utilizó Mirror, un marco de multiplayer de terceros, para implementar rápidamente características colaborativas sin construir una capa de red desde cero. Otros recursos disponibles, como modelos 3D simples, herramientas de depuración y activos de entorno, ayudaron a agilizar el desarrollo y la creación de prototipos.

La ubicuidad de Unity también significa una amplia compatibilidad con servicios de terceros e integraciones de hardware, mientras que el soporte para el .NET Standard permite el acceso a bibliotecas confiables para cifrado, registro avanzado y otras funcionalidades esenciales del backend.

Confiado por cirujanos, validado en la primera línea de atención

La validación más convincente proviene de los cirujanos que utilizan el software.

Prof. Dr. med. Raphael Guzman, Jefe de Neurocirugía en el Hospital Universitario de Basilea, y Dr. med. Thorsten Gehrke, Médico Jefe en la Clínica Helios en Hamburgo, atestiguan cómo el uso de Specto ha reducido el tiempo de cirugía y mejorado la seguridad a través de enfoques más precisos y mínimamente invasivos.

Dando forma a lo que viene en la atención quirúrgica

A medida que la tecnología XR avanza—con auriculares más ligeros, pantallas más nítidas y mayor duración de la batería—la experiencia de usar Specto solo se volverá más fluida e impactante. Es fácil imaginar un futuro donde revisar escaneos en VR sea tan rutinario para los cirujanos como leer notas de casos, y donde los pacientes reciban recorridos 3D personalizados de su anatomía como parte de la atención estándar.

Al combinar la experiencia médica con la tecnología 3D en tiempo real de Unity, Specto Medical está ayudando a cerrar la brecha entre datos médicos complejos y comprensión intuitiva—permitiendo a los clínicos tomar decisiones más seguras y empoderando a los pacientes con una visión más clara de su salud.

La atención médica inmersiva ya no está en el horizonte; está aquí—y ya está moldeando mejores resultados tanto para cirujanos como para pacientes.