Gaita Hero y EMTI Fervienza: evaluar el sonido

En enero de 2011 La Nueva España cubrió mi proyecto fin de carrera con un titular que todavía me hace sonreír: Gaita Hero, en un guiño evidente a Guitar Hero. El nombre no fue mío —fue periodístico—, pero la pregunta de fondo que planteaba el proyecto sí era mía, y llevo desde entonces persiguiéndola. ¿Puede un ordenador escuchar cómo tocas y decirte si has tocado bien lo que tenías que tocar?

El proyecto detrás del nombre periodístico

En 2011, en la Escuela de Ingeniería Informática de la Universidad de Oviedo, presenté un proyecto fin de carrera codirigido con Balbino Menéndez Suárez, maestro gaitero y director de la banda Camín de Fierro (Proaza, Santo Adriano y Teverga). El planteamiento era más modesto de lo que el titular sugiere: usábamos una gaita asturiana real para comprobar si un alumno tocaba bien partituras de temas sencillos. El sistema proponía una de esas partituras, el alumno la tocaba delante del micrófono, y el programa verificaba la ejecución contra la referencia escrita —con las limitaciones técnicas propias de 2011, que no permitían mucho más que temas de dificultad baja y comparaciones relativamente simples.

La Nueva España cubrió el proyecto el 4 de enero de 2011, con el ángulo del punteru de la gaita convertido en controlador, haciendo las veces de puntero de ordenador —de ahí el titular—. Quince años después, el dominio gaitahero.com sigue vivo, y en 2021 el mismo nombre periodístico reapareció en otra forma: un tema del álbum Fechu’n PLA que es, a la vez, canción y videojuego jugable, pensado como guiño directo a aquel titular de 2011 —lo cuento con más detalle en la ficha del proyecto Gaita Hero — Videojuego y tema musical, dentro de mis proyectos.

No traigo esto por nostalgia. Lo traigo porque en 2011 ya estaba planteando, con las herramientas limitadas de la época, un problema que hoy sé nombrar con precisión.

El problema real: evaluar una ejecución es un problema de MIR

Lo que Gaita Hero planteaba, incluso en su versión limitada de 2011, no es un problema de videojuegos. Es un problema de Music Information Retrieval (MIR): dado un audio de una interpretación real y una referencia simbólica —una partitura, un MIDI—, ¿cómo se extrae automáticamente en qué se ha desviado la ejecución de la referencia?

En su forma más completa, ese problema se puede descomponer en al menos tres ejes:

Gaita Hero, en 2011, no cubría estos tres ejes con esa sofisticación: con las herramientas de la época, el sistema se limitaba a comprobar si el alumno había tocado correctamente una partitura de dificultad baja, más cerca de una verificación de aciertos y fallos que de un análisis fino de tiempo, afinación y dinámica. Pero ya apuntaba en esa dirección, y cada uno de esos tres ejes exige primero resolver, para el audio de entrada, la misma tarea de fondo que ya describí en ¿Qué es la transcripción automática de música? (AMT): convertir la señal en una representación simbólica —qué nota, cuándo empieza, cuánto dura, con qué intensidad— antes de poder compararla contra nada. Sin transcripción no hay comparación posible. Evaluar una ejecución es, en el fondo, transcribir y después medir la distancia entre dos representaciones simbólicas: la tocada y la escrita.

La gaita asturiana añade dificultad propia a ese problema. Es un instrumento de bordón continuo —el roncón suena todo el tiempo, superpuesto a la melodía del punteru—, lo que la convierte de facto en un caso de polifonía aunque el músico esté tocando una sola línea melódica. Separar qué energía del espectro pertenece al bordón y cuál a la melodía no es un matiz menor: es la misma dificultad de solapamiento armónico que hace que la transcripción polifónica siga siendo, quince años después de Gaita Hero, un problema sin resolver del todo.

Quince años no son nostalgia, son una línea de investigación

Entre 2011 y hoy no he dejado ese hilo suelto. Lo que en Gaita Hero era una implementación concreta para un proyecto fin de carrera —con las limitaciones técnicas propias de 2011— se ha convertido, con los años, en la pregunta que sostiene buena parte de mi trabajo actual en informática musical y en mi investigación doctoral sobre AMT. La pregunta no ha cambiado: comparar una ejecución real contra una referencia y extraer de ahí información útil. Lo que ha cambiado es cuánto sé sobre por qué es difícil, y con qué herramientas se puede abordar hoy.

Sigo trabajando en herramientas que retoman esa idea. Ahora mismo estoy probando una plataforma propia, en pruebas reales dentro de EMTI Fervienza, que continúa conceptualmente el problema que planteé en Gaita Hero: comparar una ejecución de gaita asturiana o tin whistle contra una referencia y devolver desviaciones de tiempo, afinación y dinámica. No voy a entrar aquí en el detalle técnico de esa plataforma —está en fase de prueba y no tengo resultados consolidados que documentar todavía—; lo que sí puedo afirmar con seguridad es el marco: es un problema de MIR aplicado a evaluación de ejecución instrumental, con quince años de continuidad detrás, no una idea nueva sin raíces.

Por qué fundé EMTI Fervienza

EMTI Fervienza es la escuela de música tradicional e innovación que fundé en 2026, centrada en gaita asturiana y tin whistle. Su web pública es emtifervienza.com. No es el objeto de este artículo explicar cómo se enseña allí —esa es una decisión pedagógica que vive en la propia web de la escuela, no en este cuaderno técnico—. Lo que sí pertenece a labs.tever.es es la parte de investigación: Fervienza es también el marco donde pruebo, con alumnos reales y en condiciones reales, si las ideas que vengo desarrollando desde Gaita Hero sirven para algo más que un proyecto académico cerrado en 2011.

Esa es, para mí, la lectura correcta del hilo completo: un proyecto fin de carrera de 2011 no fue un experimento aislado que se archivó. Fue el primer intento —limitado, de su tiempo— de responder una pregunta de investigación en MIR que sigo trabajando quince años después, ahora con un marco propio donde ponerla a prueba.

Bibliografía

Las referencias en las que se apoya este artículo y por dónde seguir leyendo:

• La Nueva España (2011). Cobertura de «Gaita Hero». 4 de enero de 2011.
• Gaita Hero. gaitahero.com.
• EMTI Fervienza. emtifervienza.com.
• Benetos, E., Dixon, S., Duan, Z., & Ewert, S. (2019). Automatic Music Transcription: An Overview. IEEE Signal Processing Magazine, 36(1), 20–30.