Durch das Anzeigen des Inhalts von Vimeo akzeptieren Sie die Datenschutzbestimmungen des Anbieters.

Vimeo vertrauen und Inhalt immer anzeigen

Anzeigen

Vimeo

Wie können wir als Gehörlose Musik verstehen? Diese Frage beschäftigt mich sehr. Derzeit kann man überall Musik mit Hilfe von Technik visualisieren. Mit Programmen wie „Audiosurf“ werden Töne in Farben umgewandelt. Können wir so Musik virtuell auf einem Bildschirm verstehen? Wir Gehörlose sind visuelle Menschen und haben trotzdem wenig Erfahrung mit Musik. Mit Visualisierungen auf dem Bildschirm wirkt Musik interessant und schön und sie wird für mich greifbarer. Trotzdem fehlt immer etwas, um mich wirklich mit der Musik zu verbinden.

Aus diesem Grund entschied ich mich, für mein Musical Interface mit Vibration zu arbeiten. Stefan Hermann empfiehl uns, SoundWaver zu benutzen. Zum ersten Mal verwendete ich SoundWaver, um die Musik aus der Nähe zu fühlen. Es wird auf den Tisch gestellt und vibriert zur Musik; auf dem Tisch ist es mit den Armen und Händen spürbar. Mich hat begeistert, wie ich die unterschiedlichen Töne als „Fühlmusik“ wahrnehmen konnte. Aber die Musik kann man nur mit Hilfe von Technik in Vibration verwandelt werden. Einige Wochen lang experimentierte ich mit meinem neuen SoundWaver. Mein Ziel ist es, für Menschen, die taub sind, Musik in Entspannung zu verwandeln. Deshalb wollte ich mu.do.se bauen. Jeder kann mit mu.do.se beispielsweise im Zug oder im Café benutzen, ohne dass sich andere dadurch gestört fühlen.

Copyright

©Jolanta Paliszewska

Wie kann man Musik spürbar machen? Dieser Frage sollte im Rahmen des Kurses nachgegangen werden. Zunächst überlegte ich, welche Körperstelle am besten geeignet ist, um Vibrationen zu spüren. Nach mehrmaligem Testen stellte ich fest, dass man den Rhythmus der „Vibrationsmusik“ am besten am Rücken wahrnimmt. Die Tonquelle für das Experiment muss relativ eindeutig und klar sein. Eine genaue Differenzierung zwischen Musik und Geräuschen ist nur mit großer Konzentration möglich. Techno oder Elektro beispielsweise sind gute Musikarten, um die Geräusche in Vibrationen zu verwandeln.

Ich habe in die mu.do.se 8 Vibrationsmotoren und ein Force Sensor Resistor eingebaut. mu.do.se wird automatisch ausgeschaltet, wenn man keinen Druck darauf ausübt.

Ein weiteres Ziel von mu.do.se ist es, die Haltung zu verbessern. Viele Anfänger haben Probleme, die Körpermitte stabil zu halten.  Das Interface emuliert ein USB-Midi-Gerät, das über ein Midi-Instrument angesteuert werden kann, sofern dabei Midi-Daten mit dem Programm Ableton Live ausgegeben werden. Damit soll man die Geräusche eines Videospiels, Musik oder eines Filmes als Vibrationen wahrnehmen können. Bei Videos mit viel Musik kann man das Gerät gut nutzen und bekommt einen guten Eindruck von der gewählten Musik. Als Problem gestaltete sich vor allem das Teensy-Board, da es leider nicht zur Verfügung stand. Ich musste das Gerät mu.do.se nur mit Midi-Dateien über Ableton Live benutzen. 

Ich habe mu.do.se als lateinische Abkürzung für Musik - Musical, sentire - fühlen, Rücken - dorsum gewählt.

int vibrationPin[] = {3,4,5,6,9,10,22,23};
int fsrAnalogPin = 0; //FSR is connected to analog 0
int fsrReading; // the analog reading from the FSR resistor 

void OnNoteOn(byte channel, byte note, byte velocity){
    for(int i = 0; i < 8; i++) {
    digitalWrite(vibrationPin[i], HIGH);
    }
}

void OnNoteOff(byte channel, byte note, byte velocity){
    for(int i = 0 ; i < 8; i++) {
    digitalWrite(vibrationPin[i], LOW);
    }
} 

void setup(){
    for(int i =0; i < 8; i++ ){
    pinMode(vibrationPin[i], OUTPUT);
    Serial.begin(9600);
    }
    usbMIDI.setHandleNoteOff(OnNoteOff);
    usbMIDI.setHandleNoteOn(OnNoteOn);
}

void loop() {
 fsrReading = analogRead(fsrAnalogPin);
 Serial.print("Analog reading = ");
 Serial.println(fsrReading);

    if(fsrReading > 200) { 
        usbMIDI.read();

        }else{
            for(int i = 0 ; i < 8; i++) {
            digitalWrite(vibrationPin[i], LOW);
        }
    }
}

Um meinen Freunden und meiner Familie die Funktion von mu.do.se zu verdeutlichen, habe ich einen Prototypen gezeigt. Sie haben meinen Prototyp ausprobiert. Das Feedback war größtenteils positiv.  Ich bin mit dem Ergebnis sehr zufrieden und werde mu.do.se weiterhin benutzen. Ich würde es gerne weiterentwickeln und weiter damit experimentieren. Dies ist vielleicht ein Ziel für das Hauptstudium. Mit meinem Projekt habe ich mich nur auf taube Menschen fokussiert. Im Nachhinein hätte ich gern mit tauben und hörenden Menschen experimentiert – vielleicht hätte mir das interessante neue Perspektiven gegeben. Großartig finde ich, dass ich durch den Kurs die Musikwelt kennenlernen darf, die so völlig neu für mich ist. Es hat mir unglaublich Spaß gemacht, Sachen zu programmieren und zu bauen. Dabei habe ich viel falsch gemacht und umso mehr gelernt. Im Kurs habe ich sehr mit Thomas Miebach ausgetauscht, denn wir sind in der gleichen Situation. Auf jeden Fall möchte ich mich weiter mit dem Thema Physical Computing beschäftigen. Ich bedanke mich sehr bei Stefan Hermann, der sich sehr viel Mühe gegeben hat, Musik visuell zu erklären. Vielen Dank auch an meine Mutter, die mir viel beim Nähen geholfen hat.