Musikgenre-Erkennung mit Stimmung, BPM und Tonart

Für klar unterschiedliche Genres (Klassik vs Metal vs Hip-Hop) trifft die Top-1 in 85-95% der Fälle. Für eng verwandte Stile (Jazz vs Blues, House vs Techno) liegt Top-1 bei ~55-70%, aber die richtige Antwort ist in etwa 80% der Fälle in den Top-3. Das Tool zeigt absichtlich Top-Matches mit Punkten statt eines einzigen Urteils.

Diese Genres überlappen musikalisch (12-bar-Progression, Blue Notes, Swing-Feel), und sogar erfahrene Hörer sind sich bei Grenztracks uneinig. Das Modell liegt meist richtig für klar identifizierbaren Jazz oder Blues, bei Jazz-Blues-Fusion zeigt die Top-3 beide an und die Prozente liegen nah beieinander. Diese Nähe ist selbst nützliche Information.

Ja. Das zugrundeliegende Modell erkennt musikalische Struktur, nicht Sprache. K-Pop, J-Pop, russischer Rap, arabischer Pop, lateinamerikanische Musik und Weltmusik liefern alle sinnvolle Ergebnisse.

Das Musikmodell wird beim ersten Klick auf "Track analysieren" heruntergeladen. Anschließend wird es vom Browser für sechs Monate gecacht, sodass spätere Analysen auf dem gleichen Gerät sofort starten.

LAION CLAP (Contrastive Language-Audio Pretraining), der größte Open-Source-Musikklassifikator unter der Apache 2.0-Lizenz. Die Text-Embeddings für jedes Label werden zur Build-Zeit vorberechnet, sodass der Browser nur den Audio-Encoder lädt.

Nach der ersten Analyse wird das Modell vom Service Worker gecacht, die Seite funktioniert offline. Nachfolgende Analysen laufen vollständig auf deinem Gerät.