Projektbericht

Sonifikation

Wie klingt ein Korallenriff? Können die Klänge sogar zu Musik werden? Sonifikation ist die Darstellung von Daten als Klänge. Dieser Ansatz wird von Maria Kallionpää, Axel Berndt und Hans-Peter Gasselseder weitergedacht und aus den Daten sogar Kompositionen erstellt.

Projektbeteiligte

Maria Elina Kallionpää Axel Berndt
Mag. rer. nat., Dipl.-Psy. Hans-Peter Gasselseder

Projektstatus

Stücke in Aufführung

Sonifikation als Kompositionstechnik und Mittel des künstlerischen Ausdrucks

Daten hörbar machen - Darum geht es bei Sonifikation. Aus diesen Klängen können dann sogar Kompositionen werden! Dazu entstand ein Forschungsprojekt und ein wissenschaftlicher Artikel, der in Vorträgen und Aufführungen nun eine Bühne findet. Das Forschungsprojekt zu Sonifikation wurde ursprünglich im Dezember 2023 auf der XXV Generative Art Conference - GA2023 in Rom veröffentlicht und anschließend auf den IRCAM-Jubiläumsworkshops im März 2024. In Vorträgen der Projektbeteiligten Axel Berndt, Maria Kallionpää und Hans-Peter Gasselseder werden verschiedene Daten in Rythmen und Tonhöhen diskutiert sowie ein Partikelsimulationsmodell vorgestellt. Interesse geweckt? Es wird auch weitere Vorträge zu diesem Thema geben, siehe unten.

  • Abstract zum wissenschaftlichen Artikel über Sonifikation

    Trotz der sich ständig erweiternden Vielfalt der technischen Mittel, die Komponisten zur Verfügung stehen, ist das Wesen des Komponierens seit Jahrhunderten im Wesentlichen gleich geblieben: Die Schlüsselfrage ist, wie man eine künstlerisch innovative Kernidee eines Musikstücks formt und die idealsten Instrumente dafür findet. Unsere Forschung befasst sich mit der Frage, wie Komponisten ihre individuelle Stimme entwickeln und die Werkzeuge und Techniken finden und auswählen, die ihren künstlerischen Zielen am besten dienen. Es sind verschiedene Softwarelösungen aufgetaucht, die es ermöglichen, eine breitere Palette von Klängen als musikalisches „Rohmaterial“ zu verwenden. Anstatt vorkomponierte Musik zu verwenden, die auf den vom Komponisten organisierten Rhythmen und Tonhöhen basiert, werden wir uns darauf konzentrieren, wie man andere Arten von Daten in „Noten“ oder, genauer gesagt, in „Klangereignisse“ umwandelt und wie man sie auf künstlerisch sinnvolle Weise verwendet, was zu eigenständigen musikalischen Kompositionen führt.

    Den gesamten Artikel findest du hier: https://generativeart.com/GA2023/papersDOC/OK/24_Kallionpaa_Berndt_Gasselseder.pdf

The Reef

Uraufführung des Stücks “The Reef” mit Visuals von Künstler Andrew Veloux in San Francisco

Im Rahmen des Forschungsprojektes sind mehrere Kompositionen entstanden - Darunter auch "The Reef".

Die Partitur verbindet den Klang des Ozeans mit Daten-Sonifikation. Für das Stück benötigt man zwei Klaviere und Videotechnik. The Reef basiert auf einem Sample, aufgenommen im Mu Koh Lanta National Marine Park - Thailand. Ein Schwimmer bewegt sich auf ein Korallenriff zu - so entsteht eine spektrale Zusammensetzung. Auch der dramatische Bogen der Komposition leitet sich aus der Struktur des Samples ab.

Nach dem Kompositionsprozess wurde eine MIDI-Version als Referenz für das zugehörige Video verwendet. Die abstrakten visuellen Elemente folgen dabei sehr genau der Musik: Die Struktur der musikalischen Komposition wird nicht nur durch die Musik selbst, sondern auch durch das Timing der ursprünglichen Aufnahme beeinflusst.

Zusammen mit der entstandenen Real-Time-Videokunst zeichnet die Musik von „The Reef“ ein Bild der allmählichen Schädigung der Korallenriffe durch Umweltverschmutzung. Mit Hilfe computergestützter Analysen wurden jedoch auch die lebendigen Farben solcher Ökosysteme in Musik umgesetzt, um einen Hoffnungsschimmer mitzugeben. Vielleicht ist es noch nicht zu spät, etwas zu ändern?

Uraufführrung von "The Reef" in San Francisco

In Zusammenarbeit mit der New Arts Collaboration in den USA wurde "The Reef" von Pianistin Luo Ting uraufgeführt. Im Hintergrund ist das Videokunstwerk von Andrew Veloux zu sehen, welcher zu Beginn des Videos interviewt wird.

die nächsten Vor- und Beiträge zu dem Thema

27. November 2024

All Around Audio Symposium

Vortrag an der FH. Sankt Pölten, Österreich