Musikgenre-Erkennung mit Stimmung, BPM und Tonart

Weil Genres keine Einteilung der Musik in Schubladen sind und ein Werkzeug, das eines nennte, das Gegenteil vortäuschen würde. Die Grenzen haben Hörer, Kritiker und Plattenläden über Jahrzehnte gezogen, sie überlappen stark, und sehr viele wirkliche Stücke liegen ehrlich zwischen zweien — ein Lied kann tatsächlich Indierock und Dreampop zugleich sein, und der Streit darüber ist keine Frage, die der Klang entscheiden kann. Deshalb ist das Ergebnis eine gereihte Menge mit einer Vertrauenszahl bei jedem, und interessant zu lesen ist die Form, nicht die erste Zeile: drei Genres mit ähnlichen Werten bedeuten ein Stück, das weit ausleiht; eines bei achtzig und der Rest weit darunter bedeutet etwas, das fest in einer Tradition sitzt.

Diese Genres überlappen musikalisch (12-bar-Progression, Blue Notes, Swing-Feel), und sogar erfahrene Hörer sind sich bei Grenztracks uneinig. Das Modell liegt meist richtig für klar identifizierbaren Jazz oder Blues, bei Jazz-Blues-Fusion zeigt die Top-3 beide an und die Prozente liegen nah beieinander. Diese Nähe ist selbst nützliche Information.

Ja. Das zugrundeliegende Modell erkennt musikalische Struktur, nicht Sprache. K-Pop, J-Pop, russischer Rap, arabischer Pop, lateinamerikanische Musik und Weltmusik liefern alle sinnvolle Ergebnisse.

Das Musikmodell wird beim ersten Klick auf "Track analysieren" heruntergeladen. Anschließend wird es vom Browser für sechs Monate gecacht, sodass spätere Analysen auf dem gleichen Gerät sofort starten.

LAION CLAP (Contrastive Language-Audio Pretraining), der größte Open-Source-Musikklassifikator unter der Apache 2.0-Lizenz. Die Text-Embeddings für jedes Label werden zur Build-Zeit vorberechnet, sodass der Browser nur den Audio-Encoder lädt.