Yamaha: KI übersetzt die Bewegungen eines Tänzers in Klavier-Musik

Künstliche Intelligenz begegnet uns heutzutage in sehr vielen Anwendungsbereichen und es wird täglich mehr. Der Instrumenten-Hersteller Yamaha hat nun eine neue Form der KI gezeigt, welche die Bewegungen des Tänzers Kaiji Moriyama in Noten übersetzt, die auf einem Flügel abgespielt werden. Der Hersteller versucht damit den Ausdruck des Tanzes mit der Musik zusammenzubringen.

Die Technik wurde bereits auf einem Konzert in Tokio eingesetzt, bei dem er zusammen mit dem Scharoun Ensemble der Berliner Philharmoniker auftritt und dabei durch seinen Tanz das Piano „spielt“.

Das von Yamaha entwickelte System übersetzt die Bewegungen in Musik, die Sinn ergibt und nicht nur eine wirre Aneinanderreihung von Noten ist. Dabei werden dem Tänzer vier verschiedene Sensor-Typen am Rücken, den Handgelenken und den Füßen angebracht, die die Bewegungen aufnehmen und an das System senden.

Die KI ist dann in der Lage in Echtzeit Melodien zu erstellen und bedient sich dabei einer MIDI-Datenbank. Das Ergebnis wird an ein Yamaha Disklavier-Piano gesendet, welches die Tastenanschläge selbstständig durchführen kann.

Wenn ihr euch das dazugehörige Video mal anschaut, könnte man den Eindruck bekommen, dass der Tänzer wenig Einfluss auf die abgespielte Musik hat. Laut Moriyama ist dem nicht so, denn je nachdem wie er sich selbst ausbalanciert und die Körperbewegung angepasst hatte, änderte sich auch die Musik.

Wenn man die Sache weiter denkt, könnte eine solche Technologie dafür sorgen, dass Tänzer-Gruppen ganze Orchester spielen könnten.