Wenn das Gehirn Klavier spielt…

Musik, Kinect, Sensoren, Gehirn, Kunst, Gehirnwellen, Internationale Akademie für Musik und Kunst, AIMART, Neuronensensor Musik, Kinect, Sensoren, Gehirn, Kunst, Gehirnwellen, Internationale Akademie für Musik und Kunst, AIMART, Neuronensensor
An der Internationalen Akademie für Musik und Kunst (AIMART) in Rom wird nicht nur traditioneller Musikunterricht erteilt, sondern auch nach neuen Formen der Klangerzeugung geforscht - und zwar mithilfe von Gehirnströmen. Forscher und Musikologen arbeiten an einer Technologie, die Gedanken direkt in Musik übersetzt - ganz ohne Notenblatt oder Computer.

Sensoren zeichnen Klavierspiel auf

Der Pianist Francesco Prode illustriert, wie weit die Forschung bislang vorangekommen ist. Beim Klavierspielen trägt er einen Neuronensensor, der seine Gehirnströme misst und an den Computer übermittelt. Gleichzeitig vollzieht der Pianist Bewegungen, die von einem Kinect-System erkannt werden, ganz wie bei einem Videospiel. Auf diese Weise aktiviert Prode die Wiederholung von Klangfragmenten, die der Computer während des Klavierspiels aufzeichnet.

Interaktion mit der Musik

Francesco Prode: "Wir können in Echtzeit auf das Klangmaterial, das ich live spiele, einwirken. Es wird in Echtzeit aufgezeichnet und kann von mir durch eine Handbewegung vor dem Sensor aktiviert werden. So kann ich bei jedem Schritt eine andere Polyphonie erstellen und jedes Mal ein anderes Ergebnis der Komposition erzeugen."

Der Pianist interagiert mit der von ihm gespielten und aufgezeichneten Musik. Dabei entsteht keine bloße Klangreproduktion, sondern das Gespielte wird von einer Software und der Gehirnaktivität des Pianisten entsprechend verändert. Die Software analysiert anhand der Hirnströme Aufmerksamkeit, Bewusstseinszustand und andere Parameter. Nicht die Noten werden verändert, sondern die Geschwindigkeit, die Intonation und das Timbre des Klavierklangs, je nach Emotionslage. Auf dieser Weise entsteht ein sich kontinuierlich wandelnder Mehrklang. Schaltzentrale ist der Sensor auf dem Kopf des Pianisten.

Riccardo Santoboni: "Dieser Sensor kann jede Aktivität, die das Gehirn auf irgendeine Weise dem jeweiligen Wachheits-, Müdigkeits- und Aufmerksamkeitszustand gemäß erzeugt, aufspüren. Anhand der Hirnaktivität lässt sich der Gemütszustand des Pianisten erkennen. Auf dem Computer sehen wir neuronale Aktivität des Pianisten Francesco Prode genau in diesem Moment, sowie die Software, die speziell geschaffen wurde, um den vom Klavier erzeugten Klang des Pianisten anhand der Emotionen zu bearbeiten."

Neue Musik erschaffen

Die italienischen Forscher wollen noch einen Schritt weiter gehen und nicht nur bereits existierende Musik mit Hilfe von Gefühlen verändern, sondern eine völlige neue Musik erschaffen. Ziel ist die Entwicklung einer Software, die bestimmte Hirnströme mit verschiedenen Instrumenten, Ausdruck und Timbre assoziiert. Auf diese Weise entsteht eine neue Melodie, nicht rein mechanisch, sondern der kreativen Schöpferkraft des Komponisten entsprechend. Er selbst bestimmt die Parameter, legt fest, welche Stimmung mit welchem Instrument assoziiert wird.

Riccardo Santoboni: "Das Ziel ist sehr ehrgeizig. In der Tat gibt es heute die Mittel, um dieses Ziel zu erreichen. Dies untergräbt auf gewisse Weise die Idee, dass ein Komponist oder Künstler auf ein mechanisches Medium angewiesen ist. Im Grunde wechseln wir von übertragenden Werkzeugen zur unmittelbaren Umsetzung des musikalischen Gedankens." Andere Forscher in der Welt arbeiten ebenfalls an der Umsetzung von Hirnströmen in Musik. Eine völlig neue Herangehensweise. Denken, fühlen, komponieren.

Dieses Video empfehlen
Kommentieren4
Jetzt einen Kommentar schreiben
 
Unser weltweit einmaliger Sensor, der Ihre Hirnströme wirklich haargenau in diese unübertroffen schöne Musik verwandelt, wird von einem zuverlässigen Miniaturfusionsreaktor angetrieben. Eben echte Vorschulogenarbeit meine Damen und Herren! Wenn Sie innerhalb der nächsten 20 Jahre bestellen, bekommen Sie - von uns - für nur 39,95€ (+4,90€ VK) einen zweiten Sensor völlig umsonst dazu!
 
@HattenWirAllesSchon!: Und wenn Sie jetzt exklusiv bestellen, bekommen Sie zusätzlich bei Migräne völlig kostenlos eine Aspirin eine Flasche Wasser oben drauf. Das Wars aber noch nicht. Um ein Bluescreen oder Fatal Error zu erzeugen erhalten sie auch noch ein Musikbuch mit allen Mitteln um am heimischen Rechner dies zu erzeugen... Und das nicht für 100 Euro nicht 60 Euro sondern für unschlagbare 44,95 Euro. Bestellen Sie jetzt!
 
... und ich dachte der spielt ohne Hände, nur mit Gehirn. Aber anstatt dessen macht er ja nur zusätzlichen krach nebenbei, indem er vor der Kinect rumwedelt :-( insgesammt ziemlich enttäuschend
 
0:30 - "ganz ohne Notenblatt oder Computer" .... 0:43 " und an den Computer übermittelt" ... 0:56 "die der Computer aufzeichnet" dabei schaut er immer wieder auf das Notenblatt und spielt auf einem handelsüblichen Klavier. Genau wie Trash schon sagte - echt traurig
Kommentar abgeben Netiquette beachten!