Quais instrumentos tocam numa música

A precisão foi medida no conjunto rotulado OpenMIC-2018 e varia por instrumento. Violão, piano, sintetizador e bateria são identificados com segurança: nos dados reservados essas respostas acertam entre 87 % e 97 % das vezes. Violino, violoncelo, saxofone e órgão são mais fracos. Vocal, pratos, acordeão e xilofone são mal separados, então nunca entram na resposta principal e aparecem como “talvez”.

O modelo não distingue o baixo das outras partes graves de forma confiável: nos dados reservados ele “ouvia” baixo em quase toda faixa, ou seja, adivinhava em vez de detectar. Mostrar isso é pior do que não mostrar, por isso o baixo foi excluído. Pelo mesmo motivo trompete, trombone, flauta e clarinete não são separados, e banjo, bandolim e cavaquinho costumam cair em “violão”.

São dois limiares. Um instrumento chega a “com segurança” apenas se, nos dados reservados, com uma pontuação dessas ele realmente estava presente pelo menos 8 vezes em 10. “Talvez” é o limiar baixo, cerca de 6 ou 7 em 10, e não convém confiar nele sem escutar.

Esta ferramenta identifica, não separa. Para extrair faixas isoladas existe o separador de stems; para transcrição em notas, Audio to Notes.

O modelo ouve em janelas de 10 segundos, então o mapa tem resolução de cerca de 5 a 10 segundos. É o nível de estrofe e refrão, não o da nota. Para precisão de nota use o Audio to Notes.

O mesmo modelo analisa uma janela deslizante de dez segundos e atualiza a lista mais ou menos a cada segundo e meio. Serve bem para ensaios e aulas. Para melhores resultados desligue a supressão de ruído do navegador.

Não há limite rígido. Gravações longas são amostradas com uma grade uniforme de janelas, limitada em número para que a análise continue rápida.