CUERPO SONORO

Abstract

Cuerpo Sonoro es una instalación de arte interactivo que transforma el movimiento del cuer- po humano en música en tiempo real. El trabajo parte de la premisa de que el cuerpo puede ser un instrumento musical sin mediación técnica visible: cualquier persona que se situe frente al sistema produce sonido de forma inmediata, sin instrucciones previas y sin conocimientos musicales. El sistema captura la pose del intérprete mediante una cámara RGB estándar y el modelo de estimación de pose MediaPipe Pose, que devuelve 33 puntos de referencia anatómicos por fo- tograma. A partir de esos puntos, un módulo de extracción calcula 17 descriptores cinemáticos organizados en tres zonas corporales: el cuerpo inferior incluyendo piernas, pies y cadera, el cuerpo superior incluye brazos y la cabeza. Estos descriptores se traducen en mensajes MIDI con expresión polifónica (MPE) que controlan el sintetizador Surge XT en tiempo real. El sistema implementa dos modos de mapeo intercambiables con identidades sonoras delibera- damente distintas: el modo clásico, que mapea directamente la posición de la mano a una nota de la escala de Do mayor sobre una capa armónica de triadas; y el modo rhythmical, percusivo y rítmico, que utiliza la pentatónica Hiraj¿shi sobre una rejilla de semicorcheas, silenciándose por completo cuando el cuerpo del intérprete está quieto. Ambos modos son seleccionables sin modificar el código fuente, mediante argumento de línea de órdenes o fichero de configuración. Los resultados del banco de pruebas confirman que el sistema cumple el requisito de latencia extremo a extremo inferior a 80 ms en el 99 ¿ 100 % de los fotogramas con los modelos Lite y Full de MediaPipe, con una cadencia sostenida de 30 FPS y una latencia media de 34 ms. La suite de pruebas automatizadas cubre 244 casos sin dependencias de hardware. El proyecto incluye además una demostración web desplegada en cuerposonoro.art, accesible desde cualquier navegador con cámara.