Realidad virtual y actuación en vivo
Utilizando tecnología interactiva como la captura de movimiento y la actuación en vivo, desarrollamos una experiencia única de realidad virtual emocional para PETA que permite a los usuarios entablar un diálogo en tiempo real con un animal virtual y observar el mundo desde su perspectiva.
Un nuevo caso de uso en VR
Concebimos la idea y el caso de uso junto con Kolle Rebbe, y logramos desarrollar una aplicación de realidad virtual inigualable e inmersiva. El propósito de esta experiencia no es sólo poner de manifiesto la sensibilidad de las personas, sino situarlas en el lugar de sus contrapartes y evocar un sentimiento emocional más profundo. Como la organización de derechos de los animales más grande del mundo, PETA ha encontrado una nueva, llamativa y convincente manera de llegar a las personas que tienen poca o ninguna participación previa en los derechos de los animales - y esta experiencia es definitivamente una que está a la altura de los ojos de los usuarios.
Mejorar el aprendizaje a través de la tecnología
La idea principal es simple: una simple conversación puede hacer maravillas. En este caso, un diálogo con un animal ofrece una plataforma de comunicación sin precedentes para PETA. Las aplicaciones de realidad virtual y en tiempo real que se utilizaron permitieron una alta calidad y, por lo tanto, los usuarios pudieron sumergirse totalmente en la perspectiva del animal.
Actuación en vivo en realidad virtual
La simplicidad se crea con el uso de una compleja configuración tecnológica: Un montaje de captura de movimiento transmite la voz, las expresiones faciales y los gestos de un actor en tiempo real al personaje modelado, en este caso un conejo, que muestra los gestos del actor. La voz del actor se transmite al mundo virtual y desencadena el diálogo con el usuario. La particularidad: los usuarios no tienen idea de que su contraparte está controlada por un actor. Esto les convence de que la conversación que están teniendo con el animal virtual es verdadera. A través de este enfoque, la aplicación ofrece un nivel excepcional de detalle y una experiencia no lineal y única.
Desarrollo de un punto de contacto único
La combinación de enfoques conceptuales y tecnológicos ofrece un punto de vista completamente nuevo para PETA que llama la atención de forma convincente sobre los derechos de los animales, al mismo tiempo que se cumplen las normas y demandas de la organización.
Framework en tiempo real en Unreal
Para lograrlo, hemos utilizado un framework en tiempo real que ha sido desarrollado en Unreal - un motor de juegos - y hemos explorado una variedad de posibles soluciones para el seguimiento de rostros y cuerpos, la animación 3D en tiempo real y el diseño de sonido binaural.
Configuración única
Esta configuración única y de alto rendimiento que se desarrolló en seis meses es lo suficientemente estable como para ser utilizada en festivales y eventos, llegando a un público más amplio.
Movimiento complejo y seguimiento facial
La experiencia fue posible gracias al uso de una multitud de componentes técnicos que plantearon nuevos desafíos al concepto y a los ingenieros creativos, así como a nuestros artistas 3D, que dedicaron una fase específicamente para exploración. Paralelo al desarrollo VR, el núcleo de esta experiencia es el seguimiento facial y corporal. El software de reconocimiento facial capturó las expresiones faciales del actor y las transmitió en tiempo real al modelo 3D: el animal virtual. Como interlocutor, el conejo representa el sufrimiento de todos los animales y expresa los principios de la organización de defensa de los derechos de los animales.
Diseño del ambiente en Unreal
Para el fondo y el entorno, se conceptualizaron, modelaron y desarrollaron cinco mundos diferentes en el Motor Unreal. Temas abstractos -como el valor de la vida, la libertad, los experimentos con animales y la manipulación de animales en la industria alimentaria- nos permitieron retratar un entorno más creíble. El usuario es guiado a través de los escenarios por la persona virtual. La inmersión se vuelve particularmente enfática gracias al diseño minimalista de la escenografía, que también se encuentra en el mundo virtual, creando así una transición absolutamente fluida entre lo real y la realidad virtual. Durante el trabajo conceptual, se omitieron deliberadamente las interfaces de usuario para reducir la artificialidad.
Perfección en el diseño 3D y la animación
La apariencia de los escenarios y del personaje se depuraron constantemente a lo largo del proyecto. El objetivo principal era generar la máxima atención al detalle, la autenticidad y el realismo profundo para mantener el diálogo entre el usuario y el personaje virtual lo más convincente y duradero posible. La aplicación debía lograr un acabado cinematográfico. El conejo se diseñó internamente desde cero y se colocó en el centro del proyecto. Uno de los principales requisitos era que el conejo pudiera reproducir el movimiento y las expresiones faciales del actor con gran detalle. Desde el esqueleto, las expresiones faciales y la mezcla de formas, hasta el más alto nivel posible de detalle de la piel, los ojos y el cabello, nuestro equipo de artistas y directores de arte en 3D pasaron más de 500 horas de trabajo y lograron crear una figura y un personaje que ha establecido estándares muy altos.
Inmersión a través del diseño de sonido para VR
Además de los componentes visuales, un diseño de sonido dinámico y binaural fue un factor extremadamente significativo para una experiencia envolvente. Esto fue realizado por el estudio de grabación alemán Wahnsinn. Se estableció un aislamiento auditivo del mundo exterior y se creó una inmersión completa en los escenarios con el uso de sonido 3D. Nuestro equipo de experimentados ingenieros de sonido dió gran importancia a la combinación de sonidos reales de animales y efectos de sonido que han sido adaptados a la tecnología y al caso de uso. Durante el desarrollo y las pruebas de usuario, los sonidos se han expandido y refinado constantemente. Por último, dado que la aplicación se experimentará durante eventos y festivales, la combinación del aislamiento acústico de la instalación con un SFX sofisticado es esencial.
VR portátil - desde un camión hasta tu smartphone
La instalación tiene un escenario único: dentro de un camión, actores y usuarios interactúan sin ni siquiera encontrarse. La perfecta interacción de todos los elementos, desde el seguimiento del actor, hasta la representación en vivo del personaje y los efectos de sonido mejorados, es lo que definirá el éxito de la aplicación. En varios eventos como re:publica y otros festivales, la instalación en vivo atraerá mucha atención y será un verdadero imán para los visitantes. Una aplicación WebVR para smartphones, adaptada a esta base, tendrá posteriormente un alcance más amplio y hará que el tema sea accesible en todo el mundo.
Resultados
La aplicación establece nuevos estándares, no sólo para la tecnología virtual o las ONG. Ofrece una herramienta única que puede ser utilizada como una plataforma de comunicación como nunca antes se había visto. La experiencia es diferente de un usuario a otro -según las reacciones individuales-, lo que explica la razón por la que las pruebas de usuario duraron una media de más de 10 minutos por usuario: un nuevo punto de referencia para la RV.
