Teil 2: Musik und Mathematik

Ein Musikstück wird mit mathematischer Genauigkeit in der Partitur beschrieben, die Zeichen sind klar definiert. Aber Musik ist vor allem eine Kunst und vermittelt menschliche Empfindungen. Wie ist es möglich, diese Gefühle bei einer so strengen Notation auszudrücken? Wie kann ein Interpret ein Stück zum Leben erwecken?  Ein Mensch spielt nicht alle Noten eines Akkords gleichzeitig und hält auch kein strenges Tempo ein; einige Noten beginnen etwas früher oder werden später losgelassen, einige werden lauter oder schneller gespielt als andere. Diese Nuancen ermöglichen es dem Musiker, sich auszudrücken und der Darbietung Gefühle einzuprägen. Ein Musiker ist keine Maschine, die die Partitur perfekt reproduziert, und diese "Unvollkommenheiten" oder Abweichungen sind es, die Musik lebendig machen.

Eine Maschine könnte das nie ... oder doch? Das Exponat „Con espressione“ lässt Sie den Unterschied zwischen einer mechanischen Reproduktion eines Stückes und einer "menschlicheren" Interpretation erforschen, die von einer KI erzeugt wird, um das Musikerverhalten nachzubilden. Sie nehmen die Rolle eines Musikdirigenten ein, der das Gesamttempo und die Lautstärke einer Klaviervorstellung kontrolliert.

Über einen Kamerasensor wird die Hand des Besuchers im Raum verfolgt. Die vertikale Position bestimmt die Lautstärke der Musik, und die horizontale bestimmt das Tempo . Zunächst wird dies durch direkte Anpassung der Lautstärke und des Tempos des gesamten Stücks entsprechend der Position der Hand erreicht, aber dennoch fühlt sich die Musik automatisch und seelenlos an. Das liegt daran, dass Sie mit Ihren Handbewegungen nur das Gesamttempo und die Lautstärke kontrollieren können, nicht aber die feinen Details einer Aufführung (wie z.B. das Spielen der einzelnen Noten oder die Betonung der Melodielinie). Ein Schieberegler ermöglicht es Ihnen, die künstliche Intelligenz zu aktivieren. Je nach Wert hat die Maschine mehr Freiheit, kleine Abweichungen von den vorgeschriebenen Parametern zu wählen.

Die Maschine passt das Tempo und die Lautstärke so an, dass sie sich leicht von dem unterscheidet, was Sie dirigieren, um die Musik lebendiger und weniger "mechanisch" zu machen. Außerdem werden Änderungen in der dynamischen Spreizung, im Mikro-Timing und in der Artikulation eingeführt.

• Die Lautheit ist die Lautstärke jeder einzelnen Note. Die Erhöhung der Lautheit ist die offensichtlichste Art und Weise, eine Note zu betonen.
• Die Dynamikspreizung bezieht sich auf Lautheitsunterschiede zwischen gleichzeitig gespielten Noten – wichtig zur Hervorhebung einer Melodielinie und um den Gesamtklang" eines Akkords zu verändern.
• Das musikalische Tempo ist definiert als die Geschwindigkeit, mit der musikalische Ereignisse oder Beats gespielt werden. Die Interpreten ändern das Tempo ständig.
• Microtiming : Wenn ein Akkord aus mehreren Noten besteht, die zusammen gespielt werden sollen, kann man eine Note um einige Millisekunden vorrücken, so dass nicht alle Noten perfekt synchronisiert sind. Dies gibt dem Stück Wärme und Ausdruck.
• Artikulation : Die Noten können etwas länger oder kürzer gespielt werden als in der Partitur beschrieben, wodurch sie zusammengebunden oder getrennt werden können, was dazu beiträgt, einige Noten unter den anderen zu betonen oder zu zerstreuen. In der Musiksprache wird dies mit den Begriffen Legato und Staccato beschrieben.

    Jeder Ausführende hat seine eigenen Erfahrungen, sein eigenes Verständnis eines Stückes und seine eigenen Ausdrucksabsichten, und diese in einer Aufführung zu vermitteln, erfordert die Kontrolle über die musikalischen Parameter auf vielen Ebenen - von präzisen Details auf Notenebene wie Artikulation oder Mikro-Timing bis hin zum hohen, langfristigen Tempo und der Gestaltung seiner Dynamik.

Dem Computerprogramm hinter dieser Ausstellung wurde vielen realen Aufführungen von Musikstücken „gefüttert“, um zu analysieren und zu lernen, wie diese Parameter bei realen Interpretationen durch menschliche Pianisten verwendet werden. Computer können bereits sehr gut die niedrigen, detaillierten Entscheidungen lernen, haben aber immer noch Probleme, Gesamtform und dramatische Struktur der Musik für die erforderliche Form auf hohem Niveau zu verstehen. Die Ausstellung zeigt einen Kompromiss: Sie steuern die Lautstärke und Tempo mit der Hand auf hohem Niveau, und der Computer fügt seine Details und Abweichungen hinzu. Auf diese Weise ist die resultierende Darbietung das Produkt einer echten Zusammenarbeit zwischen Ihnen und dem Computer (KI).