Un piano que captura los datos de la interpretación en vivo

foto-resumen

Por Nicole Estvanik Taylor Sentada en el piano de cola en el Killian Hall del MIT el otoño pasado, la estudiante de primer año Jacqueline Wang tocó la animada apertura de la "Sonata en si bemol mayor, K.333" de Mozart. Cuando terminó, Mi-Eun Kim, pianista y profesora de la Sección de Artes Musicales y Teatrales (MTA) del MIT, le pidió que se trasladara a la parte trasera de la sala. Kim tocó un iPad. De repente, la sonata que acababa de tocar volvió a brotar del piano: sus teclas se hundían y subían tal como lo habían hecho con los dedos de Wang sobre ellas, la resonancia de sus cuerdas llenaba la habitación. Wang estaba de pie entre una fila de asientos vacíos con una expresión ligeramente desconcertada, contemplando una repetición de su propia actuación. "Eso fue un poco extraño", admitió Wang cuando concluyó la reproducción, y luego agregó pensativo: "Suena diferente de lo que imagino que estoy tocando". Esta inusual lección tuvo lugar durante una residencia de casi tres semanas en el MIT del Steinway Spirio | R, un piano integrado con tecnología para la captura y reproducción de actuaciones en directo. "La residencia ofreció a los estudiantes, profesores, personal y visitantes del campus la oportunidad de interactuar con esta nueva tecnología a través de una serie de talleres que se centraron en temas como el análisis histórico del diseño de pianos, un examen del hardware y el software utilizados por el Spirio | y una guía paso a paso de cómo usar las funciones", explica Keeril Makan, director de Música y Artes Teatrales del MIT y decano asociado de la Facultad de Humanidades, Artes y Ciencias Sociales. Wang fue una de las varias participantes de la residencia que tuvo la experiencia extracorpórea de escucharse tocar a sí misma desde un punto de vista diferente, mientras observaba cómo los datos de su actuación se desplazaban por una pantalla: rectángulos codificados por colores que indicaban la velocidad y la duración de cada nota, una línea ondulante que trazaba su uso del pedal de sordina. Wang incluso fue capaz de editar su propia interpretación, como descubrió cuando Kim sugirió que su uso rítmico del pedal podría ser superfluo. Usando la interfaz del iPad para borrar el pedaleo por completo, escucharon la reproducción nuevamente, las notas adquirieron una nueva claridad. "¿Ves? No lo necesitamos", confirmó Kim con una sonrisa. "Cuando se inaugure el nuevo edificio de música del MIT (W18) en la primavera de 2025, esperamos que incluya este tipo de tecnología avanzada. Agregaría valor no solo a la cohorte de Wang de 19 estudiantes de piano en el Programa Emerson/Harris, que proporciona a un total de 71 académicos y becarios apoyo para la instrucción a nivel de conservatorio en música clásica, jazz y música del mundo. Pero también podría ofrecer oportunidades educativas a una franja mucho más amplia de la comunidad del MIT", dice Makan. "La música es la quinta asignatura secundaria más popular en el MIT; 1.700 estudiantes se inscriben en clases de música y artes teatrales cada semestre, y el Instituto está repleto de vocalistas, compositores, instrumentistas y estudiantes de historia de la música". Según Kim, el Spirio permite obtener información más allá de lo que los músicos podrían aprender de una grabación convencional; Al escuchar la reproducción directamente desde el instrumento, se revelan dimensiones sonoras que un MP3 no puede capturar. "Los sistemas de altavoces lo trituran todo: los agudos y los graves, todos suenan igual. Pero la música de piano solo es muy dinámica. Se supone que se experimenta en una habitación", dice. Durante el Spirio | R, los estudiantes descubrieron que podían revisar su forma de tocar a media velocidad, ajustar el volumen de ciertas notas para enfatizar una melodía, transponer una pieza a otra tonalidad o superponer su interpretación, pregrabando una mano, por ejemplo, y luego acompañándola en vivo con la otra. "Ayuda al estudiante a ser parte del proceso de aprendizaje y enseñanza", dice Kim. "Si hay una brecha entre lo que imaginaron y lo que escuchan y luego vienen a mí y me dicen: '¿Cómo soluciono esto?', definitivamente están más comprometidos. Es una representación honesta de su forma de tocar, y los estudiantes que se sientan honrados por ella se convertirán en mejores pianistas". Para Wang, reflexionando sobre su lección con Kim, la sesión introdujo un elemento que nunca había experimentado desde que comenzó sus estudios de piano a los 5 años. "La visualización de cuánto tiempo se tocó cada tecla y con qué velocidad me dio una demostración más precisa de las ideas de voz y uniformidad", dice Wang. "Tocar el piano suele depender únicamente de los oídos, pero esto se combina con la experiencia auditiva, una experiencia visual y estadísticas, lo que me ayudó a obtener una visión más holística de mi forma de tocar". Como estudiante de primer año de pregrado que estaba considerando una especialización en el Curso 6 (ingeniería eléctrica y ciencias de la computación, o EECS), Wang también quedó fascinado al ver a Patrick Elisha, un representante del distribuidor Steinway M. Steinert & Sons, desmontar la acción del piano para señalar los sensores ópticos que miden la velocidad de cada golpe de martillo a 1.020 niveles de sensibilidad. muestreado 800 veces por segundo. "Me sorprendió la precisión de los sensores láser y los inductores", dice Wang. "Acabo de comenzar a tomar cursos de nivel introductorio en EECS y me estoy encontrando con estos conceptos, y esto ciertamente me entusiasmó más para aprender más sobre estos dispositivos eléctricos y sus aplicaciones. También me intrigó que el sistema eléctrico se añadiera al piano sin interferir con la estructura mecánica, de modo que cuando tocábamos el Spirio, nuestra experiencia con el tacto y el control de los dedos era como la de tocar un Steinway normal". Otro becario de Emerson/Harris, Víctor Quintas-Martínez, candidato a doctorado en economía que reanudó sus estudios de piano caducados durante la pandemia de Covid-19, visitó Killian Hall durante la residencia para ensayar un cuarteto de piano de Fauré con un violonchelista, un violista y un violinista. "Hicimos una serie de ciertos pasajes y grabamos la parte de piano. Luego escuché las cuerdas tocar con la grabación desde el fondo de la sala. Eso me dio una idea de lo que necesitaba ajustar en términos de volumen, textura, pedal, etc., para lograr un mejor equilibrio. Normalmente, cuando estás tocando, debido a que estás sentado detrás de las cuerdas y cerca del piano, tu percepción del equilibrio puede estar algo distorsionada", señala. Kim cita otro grupo demográfico del campus maduro para explorar este tipo de instrumentos como el Spirio | A pesar de que el instrumento es el equipo de Maestría en Tecnología Musical del Instituto Tecnológico de Massachusetts (MIT, por sus siglas en inglés), junto con otros miembros del Instituto cuyo trabajo se cruza con la gran cantidad de datos que captura el instrumento. Entre ellos se encuentra Praneeth Namburi, científico investigador del Laboratorio de Inmersión del MIT.nano. Por lo general, Namburi centra su experiencia en neurociencia en la biomecánica de la danza y el movimiento experto. Durante dos días durante la residencia MTA/Spirio, utilizó los sensores del Laboratorio de Inmersión, junto con los del Spirio, para analizar cómo los pianistas utilizan sus cuerpos. "Utilizamos la captura de movimiento que puede ayudarnos a contrastar las trayectorias de movimiento de expertos como Mi-Eun de las de los estudiantes, lo que podría ayudar en la educación musical", cuenta Namburi, "placas de fuerza que pueden dar información científica sobre cómo se organiza el tiempo de movimiento, y ultrasonido para visualizar los tejidos del antebrazo durante la interpretación, lo que potencialmente puede ayudarnos a comprender las lesiones relacionadas con la música". "El encuentro entre la MTA y el MIT.nano fue algo único para el MIT", cree Kim. "Esto no solo es muy útil para el mundo de la música, sino que también es muy emocionante para los investigadores del movimiento, porque tocar el piano es una de las actividades más complejas que los humanos hacemos con nuestras manos". En opinión de Kim, esa complejidad humana por excelencia se complementa con este tipo de posibilidades técnicas. "Algunas personas podrían pensar que va a reemplazar al pianista", dice. "Pero al final es una herramienta. No reemplaza todas las cosas que intervienen en el aprendizaje de la música. Creo que va a ser un tercer socio invaluable: el estudiante, el maestro y el Spirio, o el músico, el investigador y el Spirio. Va a jugar un papel integral en muchos esfuerzos musicales".