Які інструменти звучать у пісні

Точність вимірюється на позначеному наборі даних OpenMIC-2018 і залежить від інструменту. Гітара, фортепіано, синтезатор та ударні визначаються впевнено — на відкладених даних відповідь правильна в 87–97% випадків. Скрипка, віолончель, саксофон та орган гірші. Вокал, тарілки, акордеон і ксилофон із маримбою розпізнаються погано, тому ніколи не потрапляють до основної відповіді — лише до «можливо».

Модель не може надійно відрізнити бас від інших низькочастотних партій: на відкладеній вибірці вона «чула» бас майже в кожному треку, тобто вгадувала, а не розпізнавала. Показувати це гірше, ніж не показувати нічого, тому бас виключено. З тієї ж причини труба, тромбон, флейта та кларнет не розрізняються, а банджо, мандоліна та укулеле зазвичай потрапляють під гітару.

Це два різні пороги. Інструмент отримує статус «підтверджено» лише тоді, коли на відкладеній вибірці оцінка такого рівня справді означала присутність інструменту щонайменше 8 разів із 10. «Можливо» — нижча планка, приблизно 6–7 разів із 10 — не покладайтеся на неї без прослуховування.

Цей інструмент визначає, а не розділяє. Щоб витягнути окремі доріжки, скористайтеся спліттером стемів; для транскрипції на рівні нот — Audio to Notes.

Модель слухає вікнами по 10 секунд, тому карта має роздільну здатність 5–10 секунд. Це рівень куплета й приспіву, а не рівень нот. Для точності до ноти використовуйте Audio to Notes.

Та сама модель аналізує плинне десятисекундне вікно й оновлює список приблизно раз на півтори секунди. Підходить для репетицій і занять. Для кращих результатів вимкніть придушення шуму в браузері.

Жорсткого обмеження немає. Довгі записи аналізуються рівномірною сіткою вікон із обмеженою кількістю, щоб аналіз залишався швидким.