musik klassifikation - tu clausthal · 2017-07-17 · musicovery. title: musical classification...
TRANSCRIPT
![Page 1: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/1.jpg)
Musik Klassifikation
Hayyan Helal; 450 100
![Page 2: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/2.jpg)
Struktur
1. Problemstellung: Musik einordnen.
2. Musikalischer Hintergrund.
3. Verfahren: neuronale Netzwerke.
4. Ergebnisse: Beispiele.
![Page 3: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/3.jpg)
1. Problemstellung
Musik elektronisch gespeichert.
Große Anzahl von Dateien.
Musik für eine bestimmte Party.
Musik für eine bestimmte Person.
Musik für eine bestimmte Stimmung.
![Page 4: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/4.jpg)
Lösung: Lieder klassifizieren nach …
Genre: Jazz, Klassisch, Rap, ... .
Ruhig gegen aufregend.
Passioniert gegen froh.
Style: Arabisch, Spanisch, …
usw…
![Page 5: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/5.jpg)
2. Musikalischer Hintergrund
![Page 6: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/6.jpg)
Physikalisch (1)
Frequenz (Note)
Volumen (Stärke)
Klangfarbe (Instrument)
Länge (Ganze, Halbe, …)
![Page 7: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/7.jpg)
Physikalisch (2)
![Page 8: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/8.jpg)
Kombinationen
Horizontal: Tonleiter (Dur, Moll, …)
Vertikal: Harmonie (Intervalle, …)
Rhythmus: Volumen, Länge.
Tafel …
![Page 9: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/9.jpg)
Elementary Theory of Form (Gestalt)
Relation zwischen dem einen Abschnitt und dem
ganzen Stück.
Relation zwischen den verschiedenen
Abschnitten miteinander.
Beispiel: Rap Musik kann durch zwei nacheinander
folgende Abschnitte, die jeweils ein bestimmtes Rhythmus
haben, sofort erkannt werden.
![Page 10: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/10.jpg)
3. Verfahren
![Page 11: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/11.jpg)
Klassifizieren formal
𝑓: 𝑋 → 𝑌 : eine Funktion
𝑋: Was zu klassifizieren ist (Lieder).
𝑌: Kategorien (Genres, Styles, …).
![Page 12: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/12.jpg)
Audio zu Wellen
Audio-Datei analysieren und physikalische Wellen
bestimmen.
![Page 13: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/13.jpg)
Von Lied zu Klasse.
1. Ebene: die physikalische Ebene.
2. Ebene: Ebene der Kombinationen.
3. Ebene: Ebene der Gestalt.
4. Ebene: Ebene der Verbesserung durch
Feedback.
![Page 14: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/14.jpg)
Neuronale Netzwerke 1
Input: Lieder.
Output: Style oder Genre (Klasse).
![Page 15: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/15.jpg)
1.1. Ebene (Bestimmte Programme)
Input: Physikalische Wellen.
Output: Noten, Volumen.
![Page 16: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/16.jpg)
1.2. Ebene (Neuronale Netzwerke)
Input: Physikalische Wellen.
Output: Instrument.
Tafel …
![Page 17: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/17.jpg)
2.1. Ebene (Bestimmte Programme)
Input: Volumina.
Output: Rhythmus.
![Page 18: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/18.jpg)
2.2. Ebene (Bestimmte Programme)
Input: Noten.
Output: Harmonien, Tonleiter.
![Page 19: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/19.jpg)
3.1. Ebene (Neuronale Netzwerke)
Abschnitte bestimmen (meistens Rhythmus und Tonleiter verändert -> Neuer Abschnitt).
Input: Rhythmus, Tonleiter, Instrumente, Harmonien von Abschnitt i.
Output: Klasse des Abschnittes i.
Beispiel: Gitarre Solo in E Dur.
Beispiel: Jazz Abschnitt.
![Page 20: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/20.jpg)
3.2. Ebene (Neuronale Netzwerke)
Input: Klassen der Abschnitte.
Output: Klasse des Liedes.
![Page 21: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/21.jpg)
4. Ebene (Feedback)
Ergebnis von den 1.-3. Ebenen: n% für Klasse k.
Nochmal nach bestimmten Eigenschaften suchen:
falls gefunden: m% für Klasse k, mit m > n.
falls nicht gefunden: Klasse k` versuchen.
Beispiel: 60% für Rock -> Gitarre? -> Ja: 70% für Rock.
![Page 22: Musik Klassifikation - TU Clausthal · 2017-07-17 · Musicovery. Title: Musical Classification Author: hian marima Created Date: 7/16/2017 9:48:04 AM](https://reader033.vdocuments.pub/reader033/viewer/2022060310/5f0ab0587e708231d42cda43/html5/thumbnails/22.jpg)
Ergebnis
Music Square
Musicovery