FYI.

This story is over 5 years old.

diseño

Haz música con los ojos con esta aplicación de seguimiento facial

La gente que vive con una discapacidad pronto tendrá una forma de crear música con los ojos, gracias al 'Eye Conductor' de Andreas Refsgaard.
Imágenes cortesía del artista

Sin manos ni ninguna otra habilidad motriz es extremadamente difícil tocar música, o incluso producirla con un software y hardware modernos. Muchos no tenemos que preocuparnos de vivir nuestra vida sin estas habilidades motrices, pero para los que tienen alguna discapacidad la composición musical puede llegar a ser frustrante. Por eso el diseñador de interacción y programador creativo Andreas Refsgaard ha creado Eye Conductor, una aplicación de producción musical que utiliza el seguimiento facial para traducir la mirada humana en notas musicales o ritmos en un secuenciador de batería, mientras que determinados movimientos faciales pueden disparar efectos y desplazamientos de octavas. Con Eye Conductor, el creador de aplicaciones danés espera poder ofrecer una nueva forma de crear música para la gente que sufre alguna discapacidad.

Publicidad

Refsgaard cuenta a The Creators Project que el origen de la aplicación se remonta a sus días en el instituto, cuando se dedicaba a cuidar a un joven que sufría distrofia muscular. Como su cuidador, Refsgaard actuaba básicamente como una extensión del cuerpo del chico, y hacía por él todas las tareas físicas que el chico no podía llevar a cabo.

“Muchas de las cosas prácticas las hacía sin pensar, como recoger cosas, ayudarle a ponerse la ropa, encender la luz, etc.”, explica Refsgaard. “Pero ayudarle a expresarse de forma creativa era muy difícil, no tiene sentido intentar tocar un instrumento o pintar un cuadro en nombre de otra persona, así que creo que esa experiencia fue muy importante, aunque fuera hace ya mucho tiempo”.

Más recientemente, Refsgaard ha estado experimentando con instalaciones de sonido interactivas y gracias a su experiencia anterior se animó a crear una herramienta para ayudar a que la gente se pueda expresar tocando música.

Refsgaard se inspiró en un proyecto titulado Eye Writer, un sistema de seguimiento de la mirada de bajo coste diseñado para el artista grafitero paralítico TEMPT1 y para el prototipo utilizó FaceOSC de Kyle McDonal, una aplicación de seguimiento del rostro.

Los usuarios de Eye Conductor pueden empezar construyendo un ritmo de batería y luego tocar el instrumento que ellos quieran sobre ese ritmo. También pueden tocar notas sueltas, acordes o añadir un arpegio sincronizado con el ritmo.

Publicidad

Se puede utilizar el movimiento de elevación de cejas para transponer todas las notas, mientras que abriendo la boca se puede añadir un efecto de delay, reverb o cualquier otro filtro sobre el instrumento que se esté tocando. Los diferentes gestos faciales pueden ajustarse y guardarse de acuerdo con las habilidades personales de cada usuario. La versión actual está pensada para utilizarse en vivo y se puede tocar en solitario o en grupo.

“Se trata todavía de un prototipo con el que pretendo mostrar las posibilidades de la tecnología, así que en el futuro espero poder ampliarlo para poder añadir más pistas e instrumentos, además de exportar las composiciones”, explica Refsgaard, y añade: “Pero por el momento es tan solo un instrumento y una herramienta para improvisar”.

“Creo que la posibilidad de que uno pueda expresarse de forma artística es algo que debería estar al alcance de todo el mundo, independientemente de sus discapacidades o problemas físicos”, dice. “Por eso quería crear una solución que funcionara en el mismo dominio que los instrumentos tradicionales, algo que le diera a la gente mucha libertad, pero sin dejar de requerir una práctica, justo como un instrumento normal”.

La mayoría de los usuarios que han probado el sistema eran mudos, pero Refsgaard asegura que viendo su cara podía decir lo mucho que habían disfrutado de la experiencia. Confiesa que puede llegar a ser un poco cansado controlar cosas con los ojos, pero a los usuarios no pareció importarles en absoluto.

Publicidad

Eye Conductor - Play music with eye movements and facial gestures de CIID IDP en Vimeo.

Aquí encontrarás otros trabajos de Andreas Refsgaard.

Traducción de Rosa Gregori.

Artículos relacionados:

Una exposición donde las personas ciegas pueden “ver” las pinturas a través del tacto

Con SoundBow puedes dibujar sonidos con la punta de los dedos

Este proyecto artístico te permite pintar con ondas cerebrales