Contexto

Durante la pandemia del COVID-19, Pi desarrolló para NovoNordisk una plataforma de e-learning llamada “Academia de Diabetes”, diseñada para introducir a médicos a los nuevos tratamientos para la diabetes. Tras 3 meses de curso online, creamos una experiencia inmersiva de 40 minutos como culminación del programa.

En esta actividad, los médicos, organizados en grupos de 4 y guiados por 2 actores, asumieron el rol de agentes especiales y resolvieron acertijos en tres salas virtuales. Este recorrido les permitió aplicar lo aprendido de manera entretenida y colaborar con otros médicos, generando una interacción social valiosa en un momento de distanciamiento.

La experiencia fue altamente valorada tanto por los médicos como por NovoNordisk, destacando la combinación de aprendizaje, entretenimiento y la posibilidad de conexión en un entorno virtual seguro.

Recorrido

Bienvenida

Al abrirse las puertas del ascensor, los 4 médicos son recibidos por 2 actores que les presentan la misión e invitan a elegir un personaje.

Usando sus teléfonos, los participantes escanean un código QR que los lleva a una interfaz única vinculada a su rol. A lo largo de la experiencia, deben colaborar para resolver códigos y acertijos utilizando esta interfaz.

Una vez que todos han seleccionado un personaje, se activa un “hackeo”. Se encienden alarmas, luces rojas intermitentes y humo llena la sala, simulando un ataque a las instalaciones. Los participantes tendrán que trabajar en equipo para detener a los hackers y salvar vidas. El equipo es entonces conducido a la primera sala, donde comienza el desafío.

Sala 1

Al llegar a la primera sala, se les presenta un caso médico urgente: un paciente cuya vida está en peligro.

Debido al ataque de los hackers, el perfil médico del paciente está encriptado. El objetivo de esta sala es salvar la vida del paciente. Para hacerlo, los médicos deben descifrar la información mostrada en la pantalla y asociarla con el perfil médico correcto. Usando sus teléfonos, deben introducir los códigos correctos para revelar la información crucial del paciente. Con el tiempo limitado, deben organizarse para decodificar solo la información relevante.

Una vez identificado el perfil correcto, estabilizan al paciente ensamblando una caja con el medicamento adecuado.

Finalmente, completan la receta médica llenando las palabras faltantes, usando pistas proporcionadas en la proyección, aplicando los conocimientos adquiridos durante el curso.

Sala 2

En la segunda sala, los participantes se enfrentan a otro paciente, pero esta vez tienen la capacidad de “viajar en el tiempo”.

Explorando el apartamento del paciente, descubren hábitos de vida que lo llevaron a la crisis.

Después de recolectar pistas, deben colaborar para responder preguntas de opción múltiple en sus teléfonos y así prescribir un plan de tratamiento basado en la historia del paciente.

Sala 3

En la sala final, cada médico se coloca bajo una luz que corresponde al color de su personaje. Se activa un video de felicitación que celebra su éxito al salvar a ambos pacientes. Después del video, interactúan con una línea de tiempo que muestra la evolución de los tratamientos para la diabetes a lo largo de los años. Como toque final, los participantes reciben una foto grupal impresa antes de salir de la experiencia.

Interfaz de control

La “función” era monitoreada en vivo con cámaras de seguridad y una interfaz gráfica hecha en TouchDesigner que permitía controlar el estado de cada sala.

Prototipo

Para presentar el proyecto al cliente e iterar rápidamente se hizo un demo interactivo en Unreal Engine.

Mi rol

Algunas de mis responsabilidades clave fueron:

• Armar y liderar el equipo de programación.
• Proponer, definir y ejecutar las soluciones técnicas para implementar las ideas creativas del proyecto.
• Desarrollar la UI que permitía controlar el juego en tiempo real, permitiendo a los operadores detrás de escena activar eventos y gestionar el avance de cada grupo de participantes.
• Diseñar la arquitectura del proyecto en TouchDesigner, distribuyendo la carga de procesamiento entre varios computadores para asegurar un rendimiento óptimo durante la experiencia. Un agradecimiento especial a Matthew Ragan por su curso sobre arquitecturas modulares el cual fue fundamental.
• Diseñar y programar la integración y comunicación entre los distintos sistemas: computadores, celulares, m5sticks, sistemas de sonido, iluminación, proyecciones, máquina de humo y arduinos.
• Desarrollar el proyecto en Unreal Engine utilizado en la sala 2.

Además, trabajé en estrecha colaboración con los otros programadores para integrar eficazmente el contenido audiovisual de las salas, desarrollado en TouchDesigner.

Equipo

Empresas

Diseño y programación - Pi

Producción y construcción - Prokart

Sonido e iluminación - Dedaluzproducciones

Equipo de programación

• Benjamín Benavides
• Paola Olea, Tolch: desarrollo audiovisual de las salas en TouchDesigner y UI celulares.
• Sebastián Felbol: programación IoT (M5stick)