Übersicht - Methodik 11.05.06 Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze.

Präsentation zum Thema: "Übersicht - Methodik 11.05.06 Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze."—  Präsentation transkript:

0 DIPLOMARBEIT in Informatik Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze Rainer Schmoll Aufgabensteller: Prof. Dr. Jürgen Schmidhuber Betreuer: Dipl.-Inf. Georg Fette, Dipl.-Inf. Christian Osendorfer

1 Übersicht - Methodik Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

2 Übersicht - Gliederung
Datenrepräsentation Grundlagen zu neuronalen Netzen Datenbeschaffung Ergebnisse Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

3 1. Datenrepräsentation Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

4 Ereignis-Parameter beim EVL-Format
Ereignistyp Länge Deltazeit Notenwert Lautstärke „is_first_beat_event“ Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

5 Interpretation.evl - Notentext.evl = Unterschiede.evl
EDL-Berechnung Interpretation.evl - Notentext.evl = Unterschiede.evl betroffene EVL-Parameter: Länge Deltazeit Lautstärke Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

6 2. Grundlagen neuronaler Netze
Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

7 Schematische Netzarchitektur
Neuron Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

8 Netztraining mit Backpropagation
Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

9 Rekurrente Netze mit LSTM
Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

10 3. Datenbeschaffung Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

11 von einem Pianisten eingespielt
3. Datenbeschaffung CD-Aufnahmen Internet-Recherche MIDI-Datei von einem Pianisten eingespielt von Hand erstellt Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

12 Einspielen der Stücke 6 Walzer mit Klaus Ritzkowsky
Fragmente von 5 Walzern mit Hans-Jörg Paliege Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

13 Musikalische Analyse Variations-Klassen:
1. Motorisch bedingte oder unterbewusste Variationen 2. Notenbezogene Anschlagdynamik 3. Gesamtdynamik 4. Temposchwankungen Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

14 Digitalisierung des Notentextes
Original nach OCR Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

15 Rückwärtsrechnung des Notentextes
Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

16 Rückwärtsrechnung des Notentextes
nötige Änderungen: 1. Marker setzen 2. Quantisieren 3. Lautstärken Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

17 4. Ergebnisse Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

18 Überanpassungstest Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

19 Live-Berechnung mit Kindermelodien
10 monophone Melodien z.B. Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

20 Spieltechnik eines Pianisten
Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

21 Spieltechnik eines Pianisten
Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

22 Wiederholungen lernen
J Unmittelbare Wiederholung im Eingabestrom L Wiederholung von Eingabewerten L Phrasenwiederholungen in einem Musikstück Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

23 Netztraining mit Klavierstücken
Typischer Fehlerverlauf Ergebnis z.B. gelernte Interpretation Notentext Interpretation Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

24 Phrasen lernen Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

25 gelernte Interpretation
Phrasen lernen gelernte Interpretation Notentext Interpretation Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

26 Ausblick Tests mit weniger komplexen Daten Mehr Trainingsdaten
Erweiterungen der Datenrepräsentation Andere Musikstile Direkter Vergleich zu anderen Lernverfahren Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

27 Ende Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze

28 Diskussion Studien zur Imitation von Interpretationen klassischer Klavier-Musik durch neuronale Netze