Combining Moves by Maxon, Drones and C4D Hobbes explica cómo crearon una cara gigante y sincronización de labios para un video musical usando 200 drones voladores.

Imagínese caminando por una tranquila ciudad de Michigan una noche. Estás cerca de la estación de esquí local, pero es temporada baja, por lo que las pistas están tranquilas y vacías. De repente, escuchas el zumbido de cientos de luces voladoras que se elevan hacia el cielo y, sobre ti, una cara gigantesca de 300 pies parece estar mirándote y cantando.

¿Suena como un extraño sueño febril? Lejos de ahi. Acabas de echar un vistazo al video musical de la banda de rock experimental VWLS para el sencillo "High in Heaven". Hobbes, un estudio de diseño y animación de Detroit, asociado con Firefly Drone Shows para producir el video, que presenta 200 drones voladores con la forma de una cabeza celestial sincronizando la música de los músicos de VWLS Josh Epstein y Louie Louie.

Epstein y Louie usaron sus iPhones junto con la app Moves by Maxon, para capturar sus movimientos faciales para el video distintivo. El equipo de Hobbes incorporó esos datos de captura facial a Cinema 4D para trazar la ruta de vuelo de los drones personalizados de Firefly.

Nos comunicamos con Nick Forshee de Hobbes para obtener más información sobre el proyecto. Esto es lo que tenía que decir.

Forshee: Es gracioso. Nos pidieron que hiciéramos un espectáculo de drones para una conferencia de inteligencia artificial, y querían algún tipo de representación de la inteligencia artificial. Así que casi terminó siendo la versión beta de esta cara de dron. Pero los chicos de Firefly también estaban en la conferencia y regresaron diciendo que la cara de la IA era genial, pero asustó a todos los niños que estaban allí.

Recuerdo que pensé: "Oh, hombre, si tuviera ese tipo de impacto, deberíamos hacer algo con una cara". Lo probamos con una cara de Santa Claus e intentamos que fuera apto para niños, pero aún asustó a los niños. Nuestra cara de 300 pies de altura se basó en la semejanza de Josh, pero se convirtió en una entidad más cósmica con el tiempo.

Forshee: Ya habíamos comenzado a trabajar de forma remota con Josh y Louie antes de COVID-19, por lo que grabaron múltiples actuaciones y obtuvimos los datos de seguimiento facial fácilmente por correo electrónico. Usamos formas de pose para combinar las actuaciones. Firefly configuró todo y se adhirió a las pautas de distanciamiento social para todo eso.

Forshee: Las rutas de vuelo de los drones se animaron originalmente a mano en Cinema 4D, al igual que las otras actuaciones que hemos realizado. Pero ese puede ser un proceso bastante laborioso para un programa de tres minutos. Luego encontramos Moves by Maxon en la tienda de aplicaciones, y simplemente conectó todos los puntos. Nos dimos cuenta de que podíamos hacer un rendimiento completo conduciendo los drones con la aplicación.

Trajimos la malla a C4D de Moves by Maxon. Viene con coordenadas UV, por lo que acabamos de pintar una idea aproximada de cómo se vería nuestro diseño. Eso nos dio la sensación de que se traduciría, por lo que descubrimos que el diseño realmente funcionaba muy bien incluso en su forma aproximada.

Vea el video de behind-the-scenes aquí.

Forshee: Trazar los puntos de los 200 drones fue probablemente la parte del proyecto que llevó más tiempo. Era casi como un Lite-Brite gigante, solo que solo tenías 200 clavijas. Una vez que se compromete con una serie de puntos, debe usar eso para todo un espectáculo, moviéndose de un punto a otro para que tenga que elegir sus líneas sabiamente.

Elegimos cada línea de esa cara para representar la profundidad X, Y y Z, por lo que se convirtió en este baile de alejar los drones del contorno de la cara y agregarlos a otra área, o agregarlos a la boca. Una vez que habíamos trazado todo, nos sobraron algunos puntos, y ahí es donde pusimos los dientes. Estoy muy contento de haberlo hecho.

Forshee: Si. Se convierte en un juego de color y la espectacularidad del color. Teníamos disponible todo el espectro de colores y prácticamente cualquier intensidad. Diría que fue casi un mes de color para el show de drones. Introdujimos diferentes patrones de iluminación a medida que avanzábamos porque teníamos tres minutos para mantener la atención de la gente. Mientras tanto, estábamos realmente luchando contra la necesidad de convertir la cara en otros objetos. Sabes, si explotáramos la cabeza desde el principio, ¿qué sería lo siguiente?

Forshee: Los 200 puntos son básicamente fotogramas clave en XY y Z en cada momento dado de un espectáculo completo. Un truco que utilizamos es trabajar en una escala del mundo real. Esas son las unidades que usamos dentro de Cinema, por lo que se tradujo muy bien a los datos de los drones. Moves by Maxon te da una cara que es aproximadamente del tamaño de una cabeza humana. Así que todo lo que teníamos que hacer era convertir la interpretación final en un alambique, que tiene una muy buena opción de escalamiento. Lo hicimos volar 300 veces y luego trazamos los drones. No tuvimos que mover nada manualmente en la cara hasta que toda la cabeza explota. El resto del espectáculo fue realizado por nuestra captura.

Forshee: Es mucho trabajo manual. Colocar todos los drones en el campo lleva media hora. Cada dron descarga la ruta de vuelo completa para que pueda comunicar dónde está posicionado en la Tierra. Luego, los drones básicamente intentan hacer ciertos puntos de referencia, y son extrañamente capaces de ser súper precisos.

Forshee: Sí. Siempre estamos experimentando. Quiero decir, tan pronto como terminamos con esto, dijimos, 'Está bien, lo hicimos. Terminamos. ¡Siguiente! ”Samantha Griffith, en Hobbes, tuvo esta idea genial de usar la otra cara de Moves by Maxon, que sería una captura de cuerpo completo. Estamos pensando en hacer una coreografía de baile de figura completa con los drones.

Tenemos todas estas ideas extrañas y extravagantes con las que queremos jugar.