Cómo BMW está aprovechando Unity para abrir nuevas dimensiones en la experiencia de conducción

Con una rica historia arraigada en un rendimiento superior del motor, la mayoría conoce la marca BMW como sinónimo de una experiencia de conducción elevada. Como el Grupo BMW también ha sido conocido por ser pionero en innovaciones digitales en la industria automotriz en la última década, no debería sorprender que en los últimos años, el equipo de investigación del Grupo BMW ha liderado la carga en la búsqueda de formas de llevar la tecnología de realidad aumentada a sus vehículos. Nos sentamos con los ingenieros de investigación Manfred Pauli y Wolfgang Haberl para discutir su visión para el futuro de la conducción y cómo BMW está innovando la experiencia dentro del vehículo con realidad aumentada (AR).

¿Qué equipos o unidades de negocio en BMW están utilizando actualmente Unity?

Manfred: Somos parte del equipo de investigación del Grupo BMW. Construimos prototipos tempranos y proporcionamos una visión para las futuras generaciones de vehículos BMW. Unity se utiliza en toda la empresa, especialmente para diseñar gráficos de pantallas de visualización frontal o desarrollar prototipos gráficos.

¿Cómo funciona este nuevo prototipo para una pantalla de visualización frontal? ¿Cuáles son las capacidades actuales en cuanto al uso de AR para construir una nueva experiencia de conducción?

Wolfgang: En este caso, es una pantalla de gafas AR, por lo que tiene algunas similitudes con el sistema de visualización frontal. Intentamos ver cuáles son las especificaciones para las gafas AR y dónde tienen sentido además de una pantalla de visualización frontal tradicional. Nuestro prototipo actual incluye algunos casos de uso relacionados con el conductor y algunos con el pasajero para demostrar el rango de posibilidades. Para el conductor, tenemos una augmentación de asistencia al conductor. Ves, por ejemplo, representaciones gráficas de distancia asistida durante el estacionamiento, tienes tus flechas de navegación que te guían exactamente a lo largo de la carretera y las intersecciones donde debes girar. También resalta otras cosas, como marcadores para baches y sitios de construcción, así como algunas señales que podrías pasar por alto, como un límite de velocidad o un cruce peatonal. Toda esa información se presenta en tu vista central en AR. Para el pasajero, realmente estamos tratando de explorar qué podría ser un buen uso del tiempo en el coche. Hemos implementado un ejemplo de juego que te permite recoger monedas que aparecen a lo largo de la ruta de conducción para ganar puntos. También tenemos una función que te permite usar las gafas como tu cine personal.

¿Puedes hablar sobre qué objetivos estás tratando de lograr al llevar AR a los conductores? Tocaste el tema de la seguridad y la navegación, así como la experiencia general de conducción y hacerla más inmersiva. ¿Qué esperas ver?

Manfred: BMW no es, como sabes, un fabricante de gafas de AR. Entonces, lo que queremos hacer es permitir que el cliente pueda conectar sus gafas de AR existentes que ya usa fuera del coche. El objetivo general es hacer que cualquier conjunto de gafas de AR funcione dentro del coche, como hemos hecho con el teléfono inteligente. Ya hay una multitud de aplicaciones de AR, pero lo que hay en el mercado en este momento no funciona durante la conducción porque el coche y la cabeza se mueven. Los dispositivos tienen que ser capaces de diferenciar entre estos movimientos, pero hasta donde sabemos, ninguno de los fabricantes de gafas puede hacer el seguimiento necesario de 6 grados de libertad (6-dof) sin datos adicionales del coche aún. Hemos desarrollado nuestro propio algoritmo de seguimiento de gafas, software e interfaz de vehículo para que podamos habilitar las gafas para que funcionen dentro del coche. Ese es el primer paso.

Wolfgang: Hacer que este sistema básico funcione ha consumido mucho de nuestro tiempo en los últimos años. Esta solución de seguimiento nos permite colocar aumentaciones estables mientras el coche se mueve. Ahora podemos colocar activos virtuales en el tablero que siguen los movimientos del coche. Al mismo tiempo, podemos colocar señales o marcadores en la carretera o en un edificio en tu entorno que son independientes de los movimientos del coche o de la cabeza del usuario.

Estamos prototipando diferentes casos de uso para ver qué tiene sentido y qué es útil para el conductor. Por supuesto, siempre se trata de crear contenido que haga la conducción más segura. Estamos tratando de ver qué podemos mostrar para reducir su carga cognitiva cuando tiene la augmentación justo frente a usted. Probamos estas características con conductores de prueba en nuestro simulador para estudiar si sus tiempos de reacción mejoran al usar las gafas en comparación con un cockpit clásico.

¿Serán las gafas de AR complementarias a lo que estás viendo en la pantalla frontal o es básicamente la misma información?

Wolfgang: Creemos que las gafas de AR actuales podrían ser una gran extensión de un sistema de pantalla frontal regular. La pantalla frontal proporciona información importante que no está bloqueada por el mundo, como la velocidad del vehículo, navegación giro a giro y el límite de velocidad actual. Siempre está disponible, sin importar si estás usando las gafas o no. Las gafas proporcionan un enorme campo de visión, significativamente más grande que los tamaños de imagen de cualquier pantalla frontal. Esto permite cubrir una buena parte del mundo real con augmentaciones, extendiendo así la pantalla frontal tradicional.

Hablemos un poco más en general sobre la industria automotriz y la adopción de AR. Como dijiste, todo esto está en desarrollo temprano. ¿Cuál crees que es el estado actual para la mayoría de los fabricantes, y qué están priorizando ustedes, como BMW, y otros a medida que avanzan hacia esto?

Wolfgang: Por lo que vemos en el mercado, muchas empresas están integrando actualmente características de AR en sus sistemas de pantalla frontal existentes, lo que desde nuestro punto de vista tiene mucho sentido. Al mismo tiempo, estas soluciones aún están limitadas al campo de visión más pequeño del sistema de pantalla frontal. Por eso hemos puesto mucho esfuerzo en las gafas de AR para ver cómo podrían aprovechar el campo de visión restante. Tenemos el único sistema en este momento, que funciona con un pequeño par de gafas de AR que son realmente ergonómicas y proporcionan un factor de forma y diseño atractivos (las Xreal Air 2). Hemos puesto mucho esfuerzo en el desarrollo para hacer que el seguimiento funcione en un dispositivo amigable para el cliente.

Esperamos que más empresas que producen gafas cooperen con nosotros y hagan sus gafas compatibles con nuestros vehículos. En el futuro, esperamos que las gafas sean tan omnipresentes como los teléfonos inteligentes. Queremos establecer un estándar de la industria con nuestra integración para proporcionar una base común para los fabricantes de gafas y los fabricantes de automóviles para tener una plataforma de trabajo independiente de una cierta combinación de marcas de gafas y automóviles.

Manfred: Hicimos público un par diferente de gafas en 2014. Usamos gafas inteligentes ODG, y si comparas esas con las que estamos usando ahora, ha cambiado mucho. El campo de visión casi se ha duplicado y la calidad de imagen ha mejorado mucho. Además, ahora podemos usar Unity. Estamos realmente contentos de ver esta tecnología madurar y estamos orgullosos de nuestro trabajo.

¿Qué limitaciones en torno a la seguridad del conductor, las expectativas del consumidor o el hardware estás considerando cuando piensas en la próxima fase de esto?

Wolfgang: Desde el punto de vista del consumidor, queremos que las gafas sean aún más pequeñas para aumentar la portabilidad y la comodidad. La mayoría de los dispositivos actuales están dirigidos a un uso en interiores y tienen muy poco tinte. Así que, si estás conduciendo afuera bajo el sol, el tinte puede no ser lo suficientemente oscuro para ver el contenido mostrado. Por otro lado, si estás conduciendo de noche, no necesitas ningún tinte en absoluto. En consecuencia, el tinte dinámico es una característica deseable. Al mismo tiempo, necesitas una pantalla muy buena que proporcione un amplio rango de brillo para lograr una calidad de imagen convincente incluso bajo la luz solar brillante.

Muchas de estas gafas también funcionan con batería, por lo que tienen un tiempo de funcionamiento limitado. Por supuesto, también proporcionamos la información de conducción más importante en una de las pantallas integradas del automóvil por razones de seguridad. Aún así, esperamos ver un aumento en los tiempos de funcionamiento para viajes más largos.

Podemos fusionar las áreas de visualización separadas de nuestros diferentes sistemas en el automóvil para evitar superposiciones. Con nuestro sistema de seguimiento, sabemos exactamente hacia dónde están mirando las gafas, y también sabemos dónde están el área para el sistema de visualización frontal y otras pantallas. Así que podemos omitir poner artículos en las gafas sobre otras exhibiciones, dándonos la posibilidad de ejecutarlos en paralelo.

¿Cuáles son tus esperanzas para el papel de BMW en el desarrollo de esta tecnología?

Manfred: BMW fue el primero en introducir la tecnología de visualización heads-up, inspirada en la industria de la aviación. ¿Y qué sigue después del heads-up? Estamos lanzando una interfaz de usuario completamente nueva con el BMW Panoramic Vision en vehículos de serie a partir de 2025. Toda la anchura del parabrisas se utiliza para la visualización, de pilar a pilar. Siempre estamos pensando en lo que sigue. Queremos señalar el enorme beneficio de las gafas AR en el automóvil. Nuestro objetivo principal es crear la máxima seguridad en combinación con puro placer de conducción. Los conductores de BMW no están distraídos, sino que son apoyados intuitivamente en su tarea de conducción, lo que resulta en una emoción adicional.

Wolfgang: Creemos que un paso importante es crear un estándar para la integración del automóvil con más fabricantes de gafas y seguir mejorándolo. Desde la perspectiva del cliente, sus gafas simplemente deberían funcionar en su automóvil, independientemente de los respectivos fabricantes.

Cuando se trató de construir esto, ¿cómo tomaron la decisión de elegir Unity? ¿Cómo encaja Unity en sus flujos de trabajo de desarrollo actuales?

Wolfgang: La mayoría de las empresas que ofrecen gafas AR en el mercado en este momento son compatibles con Unity. Hoy en día, el Unity Engine es el estándar de facto para las gafas AR. Definitivamente tenía más sentido para nosotros optar por Unity por esta razón.

Manfred: El Unity Asset Store fue otro beneficio adicional. Los complementos de mapa de Infinity Code fueron de gran ayuda en el desarrollo de características de navegación. Tuvimos diseñadores trabajando en el prototipo que traería activos de Blender, y luego los integramos en el editor de Unity y los desplegamos a través de nuestros dispositivos Android. Desde todo lo relacionado con la grabación de rutas con nuestros coches y la simulación, Unity ha sido una herramienta muy personalizable que nos ha ayudado mucho.

Wolfgang: Sabemos que muchas veces, los proyectos de investigación técnica son difíciles de transmitir o explicar a los no expertos y a veces también a los tomadores de decisiones. Siempre intentamos implementar casos de uso y grandes visualizaciones para transportar la idea y la visión del producto final del cliente. Unity fue de gran ayuda al abstraer todos los problemas de bajo nivel para mostrar las visualizaciones de la manera deseada. Esto hizo que toda nuestra visión fuera mucho más comprensible y realmente fascinó a la gente. Les permitió ver lo genial e inmersivo que podría ser el futuro de las gafas de AR en los vehículos.

¿Quieres saber más sobre este emocionante proyecto? Mira nuestra sesión de inmersión profunda con BMW de Unite 2024 en Barcelona.

Explora las posibilidades de Unity para automoción, o contáctanos para más información.