Ensayu · Llaboratoriu DIY
Gaita Hero y EMTI Fervienza: evaluar el soníu
En 2011 diseñé un sistema pa verificar partitures de gaita. Sigo tirando del mesmu filu: comparar una execución escontra una referencia ye un problema de MIR.
En xineru de 2011 La Nueva España cubrió’l mio proyeutu fin de carrera con un titular que entá me fai sonrir: Gaita Hero, nun guiñu evidente a Guitar Hero. El nome nun foi mío —foi periodísticu—, pero la entruga de fondu que plantegaba’l proyeutu sí yera mía, y llevo dende entós persiguiéndola. ¿Pue un ordenador escuchar cómo toques y dicite si tocasti bien lo que teníes que tocar?
El proyeutu darrera del nome periodísticu
En 2011, na Escuela d’Inxeniería Informática de la Universidá d’Uviéu, presenté un proyeutu fin de carrera codirixíu con Balbino Menéndez Suárez, maestru gaiteru y direutor de la banda Camín de Fierro (Proaza, Santo Adriano y Teverga). El plantegamientu yera más modestu de lo que’l titular suxer: usábamos una gaita asturiana real pa comprobar si un alumnu tocaba bien partitures de temes cencielles. El sistema proponía una d’eses partitures, l’alumnu tocábala delantre del micrófonu, y el programa verificaba la execución escontra la referencia escrita —coles llimitaciones téuniques propies de 2011, que nun permitíen muncho más que temes de dificultá baxa y comparances relativamente cenciellas.
La Nueva España cubrió’l proyeutu’l 4 de xineru de 2011, col ángulu del punteru de la gaita convertíu en controlador, faciendo les vegaes de punteru d’ordenador —d’ehí el titular—. Quince años dempués, el dominiu gaitahero.com sigue vivu, y en 2021 el mesmu nome periodísticu reapaeció n’otra forma: un tema del álbum Fechu’n PLA que ye, al empar, canción y videoxuegu xugable, pensáu como guiñu direutu a aquel titular de 2011 —cuéntolo con más detalle na ficha del proyeutu Gaita Hero — Videoxuegu y tema musical, dientro de los mios proyeutos.
Nun traigo esto por nostalxa. Tráigolo porque en 2011 yá taba plantegando, coles ferramientes llimitaes de la dómina, un problema que güei sé nomar con precisión.
El problema real: evaluar una execución ye un problema de MIR
Lo que Gaita Hero plantegaba, mesmo na so versión llimitada de 2011, nun ye un problema de videoxuegos. Ye un problema de Music Information Retrieval (MIR): dau un audiu d’una interpretación real y una referencia simbólica —una partitura, un MIDI—, ¿cómo s’estrai automáticamente en qué se desvió la execución de la referencia?
Na so forma más completa, esi problema pue descomponese en polo menos tres exes:
| Exe | Qué mide | Por qué ye difícil |
|---|---|---|
| Tiempu | Si l’ataque de cada nota llega enantes, dempués o a tiempu respeuto a la referencia | El tempu humanu fluctúa; nun hai una rexella rítmica perfeuta escontra la que comparar |
| Afinamientu | Si l’altor tocáu concuerda col esperáu | Instrumentos como la gaita nun siempre siguen el temperamentu igual de 12 notes |
| Dinámica | Si la intensidá de cada nota ye la buscada | La intensidá percibida depende del timbre y del rexistru, non namás de l’amplitú de la señal |
Gaita Hero, en 2011, nun cubría estos tres exes con esa sofisticación: coles ferramientes de la dómina, el sistema llimitábase a comprobar si l’alumnu había tocáu correutamente una partitura de dificultá baxa, más cerca d’una verificación d’aciertos y fallos que d’un análisis fin de tiempu, afinamientu y dinámica. Pero yá apuntaba nesa direición, y caún d’esos tres exes esixe primero resolver, pal audiu d’entrada, la mesma xera de fondu que yá describí en ¿Qué ye la trescripción automática de música? (AMT): convertir la señal nuna representación simbólica —qué nota, cuándo entama, cuánto dura, con qué intensidá— enantes de poder comparala contra nada. Ensin trescripción nun hai comparanza posible. Evaluar una execución ye, nel fondu, trescribir y dempués midir la distancia ente dos representaciones simbóliques: la tocada y la escrita.
La gaita asturiana amiesta dificultá propia a esi problema. Ye un instrumentu de bordón continuu —el roncón suena tol tiempu, superpuestu a la melodía del punteru—, lo que la convierte de fechu nun casu de polifonía anque’l músicu tea tocando una sola llinia melódica. Dixebrar qué enerxía del espectru pertenez al bordón y cuál a la melodía nun ye un matiz menor: ye la mesma dificultá de solapamientu harmónicu que fai que la trescripción polifónica siga siendo, quince años dempués de Gaita Hero, un problema ensin resolver deltodo.
Quince años nun son nostalxa, son una llinia d’investigación
Ente 2011 y güei nun dexé esi filu suelto. Lo que en Gaita Hero yera una implementación concreta pa un proyeutu fin de carrera —coles llimitaciones téuniques propies de 2011— convirtióse, colos años, na entruga que sostién bona parte del mio trabayu actual n’ informática musical y na mio investigación doctoral sobre AMT. La entruga nun camudó: comparar una execución real escontra una referencia y estrayer d’ehí información útil. Lo que camudó ye cuánto sé de por qué ye difícil, y con qué ferramientes se pue abordar güei.
Sigo trabayando en ferramientes que retomen esa idea. Agora mesmo toi probando una plataforma propia, en pruebes reales dientro d’EMTI Fervienza, que continúa conceptualmente’l problema que plantegué en Gaita Hero: comparar una execución de gaita asturiana o tin whistle escontra una referencia y devolver desviaciones de tiempu, afinamientu y dinámica. Nun voi entrar equí nel detalle téunicu d’esa plataforma —ta en fase de prueba y nun tengo resultaos consolidaos que documentar entá—; lo que sí puedo afirmar con seguranza ye’l marcu: ye un problema de MIR aplicáu a evaluación d’execución instrumental, con quince años de continuidá darrera, non una idea nueva ensin raigaños.
Por qué fundé EMTI Fervienza
EMTI Fervienza ye la escuela de música tradicional ya innovación que fundé en 2026, centrada en gaita asturiana y tin whistle. La so web pública ye emtifervienza.com. Nun ye l’oxetu d’esti artículu esplicar cómo s’enseña ellí —esa ye una decisión pedagóxica que vive na propia web de la escuela, non nesti cuadernu téunicu—. Lo que sí pertenez a labs.tever.es ye la parte d’investigación: Fervienza ye tamién el marcu ónde pruebo, con alumnos reales y en condiciones reales, si les idees que vengo desenvolviendo dende Gaita Hero valen pa daqué más qu’un proyeutu académicu zarráu en 2011.
Esa ye, pa min, la llectura correuta del filu completu: un proyeutu fin de carrera de 2011 nun foi un esperimentu aisláu qu’archivóse. Foi’l primer intentu —llimitáu, del so tiempu— de responder una entruga d’investigación en MIR que sigo trabayando quince años dempués, agora con un marcu propiu ónde ponela a prueba.
Bibliografía
Les referencies nes que s’apoya esti artículu y per ónde siguir lleendo:
- La Nueva España (2011). Cobertura de «Gaita Hero». 4 de xineru de 2011.
- Gaita Hero. gaitahero.com.
- EMTI Fervienza. emtifervienza.com.
- Benetos, E., Dixon, S., Duan, Z., & Ewert, S. (2019). Automatic Music Transcription: An Overview. IEEE Signal Processing Magazine, 36(1), 20–30.