Der MIT Music Expertise and Computation (MTC) Graduiertenprogramm – im Herbst 2024 als Zusammenarbeit zwischen den ins Leben gerufen Abteilung für Musik- und Theaterkunst im Fakultät für Geistes-, Kunst- und Sozialwissenschaften (SHASS) und die Fakultät für Ingenieurwissenschaften (SoE) – präsentierte am 13. Mai sein erstes MIT Music Expertise Analysis Showcase. Die Veranstaltung fand vor einem Stehplatzhaus in der Thomas Tull Live performance Corridor des Edward and Joyce Linde Music Constructing statt und bot vielfältige und fesselnde Forschungspräsentationen und Musikdarbietungen.
An der feierlichen Veranstaltung nahmen neben mehreren Doktoranden und Dozenten auch die ersten fünf MTC-Studierenden teil (die alle zuvor MIT-Studenten waren). Jeder Wissenschaftler präsentierte inspirierende Beispiele kunstvoller Ingenieurskunst, die die breitere und aufstrebende Musiktechnologieszene am MIT widerspiegelten.
Die 90-minütige Veranstaltung zeigte ein breites Spektrum an Forschungsprojekten, darunter eine Echtzeitvisualisierung dessen, was ein KI-Co-Improvisationsagent gerade auf einem Klavier spielen wird; eine Klangkunstinstallation, die auf lauter Netzwerkkommunikation basiert; ein Hip-Hop-Tanzkreis, in dem durch Tanzen Musik entsteht; und die Verwendung von Elektroenzephalogramm-Signalen (EEG), um die Musikmelodien zu identifizieren, die sich unser Gehirn vorstellt.
„Ein neuer Raum für Erkundungen und Erkenntnisse“
Der Showcase conflict ein Wechselspiel aus technischer Präsentation und Reside-Auftritt und begann mit Bemerkungen des SHASS-Dekans und Professors für Philosophie Agustín Rayo, der SOE-Dekanin und Professorin für Chemieingenieurwesen Paula Hammond und des MTC-Direktors und Professors für Musikpraxis Eran Egozy.
Rayo begann: „Das Ziel dieses Programms ist einfach: Das MIT soll in der Theorie und Anwendung der Musiktechnologie weltweit führend sein.“ Er fügte hinzu: „Es geht nicht nur darum, Musik mit Technologie zu machen; es geht auch darum, interdisziplinär zusammenzuarbeiten, um die Zukunft des Ausdrucks in einer KI-gesteuerten Welt besser zu gestalten und dabei das MIT von seiner besten Seite widerzuspiegeln.“
Rayo wies darauf hin, dass das Graduiertenprogramm teilweise durch die Eröffnung des Edward and Joyce Linde Music Constructing im Jahr 2025 ermöglicht wurde, das neue Klassenzimmer, Studios, Proberäume und ein spezielles Labor für Musiktechnologie bereitstellte. Er dankte auch dem MIT Schwarzman Faculty of Computing für seine Unterstützung des Graduiertenprogramms.
Hammond folgte: „Wie die Anwesenden in diesem Raum bereits wissen, haben Musik und Technik einige gemeinsame Wurzeln. Beide basieren auf mathematischer Präzision und basieren auf definierten Strukturen, Rhythmen und Frequenzen. Beide erfordern harte Arbeit und technisches Know-how, gepaart mit Inspiration und Vorstellungskraft, um etwas völlig Neues zu schaffen. Angesichts dieser Übereinstimmungen ist es keine Überraschung, dass so viele Lehrkräfte, Studenten und Mitarbeiter am MIT auch versierte Musiker und Künstler sind.“
Sie fuhr fort: „Unser Musikprogramm ist ein Juwel. Nur am MIT konnten wir die besten Technologen und die besten Musiker zusammenbringen, um einzigartige Möglichkeiten der Zusammenarbeit zu schaffen. Hier haben wir Lehrkräfte und Studenten zusammengebracht, die sich stark mit Musik und Technik identifizieren, um einen neuen Raum für Erkundungen und Erkenntnisse zu schaffen. Es ist ein starkes Beispiel für die kollaborative Kultur, die das Institut ausmacht.“
Egozy nannte die Veranstaltung eine „harmonische Mischung aus Konzert und Symposium“ und erinnerte sich: „Es ist ein wenig umwerfend zu sehen, was unsere Studenten in nur einem kurzen und rasanten Jahr erreicht haben. Während wir ursprünglich über die Kompromisse zwischen einem einjährigen und einem zweijährigen Masterstudiengang debattierten, denke ich, dass diese Kohorte uns wirklich gezeigt hat, dass wir in einem konzentrierten Zeitraum große Fortschritte bei den Lern- und Forschungsfähigkeiten machen können.“
Studentische Forschung ausgestellt
Eine dieser Studentinnen ist Claire Southard ’25, SM ’26, die ein maschinelles Lernmodell entwickelt hat, mit dem in EEG-Signalen versteckte Musiknoten identifiziert werden können.
Southard erklärt: „Jedes Jahr werden bei Musikern Bewegungsstörungen wie Parkinson oder Dystonie diagnostiziert oder sie erleiden Verletzungen, die sie daran hindern, ihre Hände und ihren Körper so zu kontrollieren, wie es zum Spielen ihrer Instrumente erforderlich ist. Aus diesem Grund sind zu viele Musiker gezwungen, mit dem aufzuhören, was sie lieben. Meine Arbeit erforscht eine Strategie, um solchen Musikern zu helfen, wieder aufzutreten, indem sie die Musik, die sie zu spielen versuchen, direkt aus ihrer Gehirnaktivität übersetzt – und dabei die Notwendigkeit einer motorischen Kontrolle völlig umgeht. Um dies zu erreichen, habe ich Modelle für maschinelles Lernen trainiert.“ Vorhersagen der Musik, die sich eine Individual vorstellt, anhand ihrer mithilfe des EEG gemessenen Gehirnaktivität, und es wurde festgestellt, dass viele der vorhergesagten Stücke erkennbare Darstellungen dessen sind, was sich der Benutzer vorgestellt hat. Durch die Entwicklung eines Techniques, das es Musikern ermöglicht, Musik unabhängig von ihren körperlichen Fähigkeiten zu erstellen, hoffe ich, dass diese Arbeit dazu beiträgt, die Zukunft der Musikaufführung näher an die Realität heranzuführen.“
Bevor Southard zu MTC kam, conflict sie sich zunächst nicht der Breite, des Umfangs und des Umfangs dessen bewusst, was das Programm für die weitere Verfolgung und Verwirklichung ihrer Interessen bieten könnte. „Das MIT Music Expertise and Computation Graduate Program hat mir so viel über die Möglichkeiten an der Schnittstelle von MINT und Kunst beigebracht“, sagt sie. „Als ich das Programm zum ersten Mal startete, conflict ich mir ehrlich gesagt nicht sicher, was als ‚Musiktechnologie‘ gilt. Durch Kurse, Recherchen und Gespräche mit Dozenten, Gastrednern und Kollegen habe ich gelernt, dass das Fachgebiet weitaus umfassender und faszinierender ist, als ich es mir bisher hätte vorstellen können.“
Sie fährt fort: „Da ich einen Hintergrund in Neuro- und Informatik habe, habe ich viele meiner Bachelor-Projekte ausschließlich auf Geräten durchgeführt. Aber dieses Programm ermöglichte es mir, mehr praktische Erfahrungen zu sammeln, von der Durchführung von Audioaufnahmen bis hin zum Bau elektronischer Musikinstrumente von Grund auf.“
Ein weiterer MTC-Absolvent und studentischer Redner bei der SHASS Superior Diploma Ceremony 2026, Mariano Salcedo ’25, SM ’26, präsentierte eine benutzerdefinierte Webanwendung, mit der jeder einzigartige visuelle Darstellungen erstellen kann, die durch Echtzeit-Streaming von Musik gesteuert werden. Um diesen Effekt zu erzielen, entwickelte Salcedo Algorithmen, die das komplexe visuelle Verhalten selbstorganisierter Systeme als Mittel für ein ästhetisch synergetisches Ziel nutzen.
In seiner Rede zur Superior Diploma Ceremony drückte Salcedo seine Dankbarkeit und Bewunderung für die leidenschaftlichen Menschen aus, die er nicht nur am MTC, sondern am MIT insgesamt getroffen hat. In einer angemessen mitfühlenden Artwork meinte er einfühlsam: „Ich denke, in Zeiten wie dieser rufen wir uns dazu auf, eine Vorreiterrolle in der menschlichen und humanzentrierten Technologie einzunehmen. Das heißt, wir fragen nicht nur, was wir bauen können, sondern wir fragen auch, wen es betrifft, wen nicht? Wem nützt es?“
Musiktechnologie floriert am MIT
Außerordentliche Professorin Anna Huang SM ’08 von MTA und der Fakultät für Elektrotechnik und Informatik (EECS, über SCC), Absolventin der MIT Media Labeine der weltweit führenden Forscherinnen auf dem Gebiet des kollaborativen Musizierens zwischen Mensch und KI, brachte die Ansichten von Southard und Salcedo in ihrer Keynote-Präsentation „Auf der Suche nach Resonanz in der Mensch-KI-Interaktion“ zum Ausdruck. In ihrer fesselnden und sehr gesprächigen Ansprache betonte sie, wie wichtig es ist, den menschlichen Musiker bei allem, was im Zusammenhang mit KI getan wird, in den Mittelpunkt zu stellen und sich gleichzeitig darum zu bemühen, bei jeder Gelegenheit alle Musikrichtungen der Welt in den Diskurs einzubeziehen.
Mit vielen ihrer Familienangehörigen im Publikum dachte Huang: „Ich habe das Privileg, sowohl am MIT Music als auch am EECS zu sein – einem interdisziplinären, gemeinsamen Raum. Was bedeutet es in diesem Zusammenhang, Musiktechnologie zu entwickeln? Wir sind von äußerst talentierten Musikern umgeben, deshalb verfolgen wir diesen Co-Design-Ansatz: Wir arbeiten mit diesen Musikern, wir gehen ins Studio und jede Woche probieren wir etwas aus. Und die Technologie wächst mit dem kreativen Prozess. Wir versuchen immer, beides voranzutreiben, und.“ Es ist immer am Rande. Es ist sehr, sehr lohnend. Hier fühle ich mich am wohlsten.“
Huang erklärte auch, wie diese Praxis den Grundstein für ein neues Studienfach in Musiktechnologie legt, das sie im Herbst gemeinsam mit der kürzlich ernannten Professorin für Theaterkunst Grisha Coleman unterrichten wird. Die Klasse 21M.369/569 (Tuning Consideration: Inventive Practices in Motion, Sound, and AI) schlägt vor, dass das Studium von Klang- und Bewegungspraktiken Aufschluss darüber geben kann, wie wir Computersysteme aufbauen und uns vorstellen, wobei der Schwerpunkt insbesondere auf unserer Beziehung zu KI liegt. Mithilfe von Movement-Seize-Technologien, kritischem Interaktionsdesign, generativer Modellierung und Algorithmen für Interpretierbarkeit und Lernen durch menschliches Suggestions werden Studierende in eine Reihe musikalischer Praktiken der Improvisation und Somatik eingeführt.
Alles in allem ist die Zukunft des MIT Music Expertise and Computation Graduate Program vielversprechend. Laut Egozy hat das MTC aus über 100 Bewerbern zehn Masterstudierende für das Studienjahr 2026–27 zugelassen. Im Gegensatz zum diesjährigen Kurs werden zu den Studierenden im nächsten Jahr nicht nur neue MIT-Absolventen gehören, sondern auch neue Gesichter auf dem Campus.
„Die Ausweitung des Swimming pools auf Absolventen anderer Schulen und Institutionen wird eine außerordentliche Fülle an Perspektiven und Erfahrungen in das Programm einbringen. Darüber hinaus laden alle drei gemeinsamen Fakultäten von MTA und EECS – darunter Mark Rau, Paris Smaragdis SM ’97, PhD ’01 und Huang – über EECS neue Doktoranden im Bereich Musiktechnologie in ihre Labore ein“, sagt Egozy.
MTC verkörpert seine Mission und erweist sich als lebendiges, multidisziplinäres Programm, das viele Arten von Studenten mit unterschiedlichen Karrierezielen und unterschiedlichem Hintergrund anzieht.
„Trotz ihrer Vielfalt haben unsere Studenten alle eine zentrale Gemeinsamkeit“, sagt Egozy, „nicht nur die gemeinsame Liebe zur Musik, sondern auch den tiefen Wunsch, diese Leidenschaft durch Technologie auf sehr warmherzige, humanitäre Weise zu steigern.“
Liste der Projekte
Rachel Loh, Quanta-Stipendiatin für Musiktechnologie und -berechnung: „Visualisierung des internen Zustands von Musikmodellen für die Reside-Mensch-KI-Improvisation“
Noble Harasha, Quanta Fellow für Musiktechnologie und Informatik: „Modellierung von Subjektivität und kollektiver Sinneswahrnehmung als verrauschte, analoge Kommunikation in rückkopplungsgesteuerten Netzwerken“
Z Chen, Quanta Fellow für Musiktechnologie und Laptop: „Generative Musik als Katalysator für soziale Choreografie“
Nithya Shikarpur: „The Transferring Drone: Eine Reside-Improvisation im Kontext der Hindustani-Musik mit der menschlichen Stimme, generativen Modellen und Loops“
Mariano Salcedo, Alex Rigopulos (1992) Fellow für Musiktechnologie und Laptop: „Neuronale zelluläre Automaten für interaktive Musikvisualisierung“
Claire Southard, John Piscitello Fellow für Musiktechnologie und Computerberechnung: „Neuronale Dekodierung imaginierter Musik“
Stephen Brade, Suwan Kim, Valerie Chen: „Wal, Cello (dort?): Ein musikalischer Dialog zwischen Cello und einem auf Walgesängen trainierten Echtzeit-Diffusionsmodell“