Транскрибатор аудіо в ноти — мелодія та нотний запис

Один інструмент за раз, зіграний чисто, з ясно розділеними нотами: сольне фортепіано, перебір на гітарі, заспівана мелодія без акомпанементу. Мережа побудована, щоб знаходити, де починається кожна нота і яка її висота, і все, що розмиває ці дві речі, коштує точності: реверберація змазує межу між нотою і наступною, повний склад кладе чотири інструменти в один частотний діапазон заразом, а сильний перевантаж додає обертони, які читаються як зайві ноти. Два інструменти разом — чесна межа: у результаті будуть обидва впереміш, і зрозуміти, яка лінія чия, буде нічим. Якщо партії є окремо, розділіть заздалегідь; якщо ні — чекайте ескізу, а не партитури.

Ми виміряли її на еталонних записах із відомими нотами, а не оцінювали приблизно. Один інструмент або голос: 65–80% нот правильно. Щільний мікс кількох інструментів: 10–40%, і виділена мелодична лінія там є ескізом, а не точним мотивом — для пісень вкладка «Акорди» надійніша за нотоголовки.

MIDI — це універсальний формат для музичних нот. Його можна відкрити в будь-якому DAW (GarageBand, Ableton, FL Studio) або нотному редакторі (MuseScore, Sibelius).

Так. Якщо в пісні співають, мелодію голосу знаходить окрема нейромережа просто в повному записі: на більшості комп’ютерів це відбувається саме після розшифрування, в інших випадках — кнопкою «Уточнити мелодію». Звірте її на слух: швидкі розспіви можуть вийти спрощеними. В інструментальній пісні мелодія буде приблизною — частина нот може виявитися з акомпанементу. Усі розпізнані ноти — під перемикачем «Всі ноти», гармонія — на вкладці «Акорди»; найточніше розпізнається один інструмент або голос без музики.

Так. Вставте текст пісні в блок «Акорди над текстом» під результатом — рядок на рядок пісні — і позначте «Показати слова на нотному стані»: склади стануть під ноти мелодії, акорди — над нотним станом, і в такому вигляді аркуш піде в PDF і MusicXML. Слова за співом цей інструмент сам не розпізнає; якщо тексту немає під рукою, його можна отримати в інструменті «Розпізнавання тексту пісні з аудіо».

MIDI-файл і піанороль, плюс згенеровану нотацію, на яку можна подивитися. Корисне тут MIDI: він тримає ноти як події, а не як картинку, тому його прийме будь-що музичне — нотний редактор, щоб вичистити й надрукувати; DAW, щоб віддати партію іншому інструментові; телефонний застосунок, щоб сповільнити. Нотація — це відмальовка тих самих даних, і ставитися до неї варто як до підмоги для читання, а не як до готової партитури: перетворення виконання на читабельний ритм потребує рішень, які машина ухвалює погано — нота, зіграна трохи пізніше, стає паузою і пунктирною фігурою. Імпортуйте MIDI в нотну програму і квантуйте там: саме там ці рішення належать вам.

Так. Відкрийте вкладку «Акорди», щоб побачити прогресію акордів у часі, перейти до будь-якого акорду, скопіювати або завантажити її. Найкраще працює на чистих записах одного інструмента.

Так. Після розшифрування натисніть «Для фортепіано»: права рука отримає мелодію, ліва — бас і акорди за знайденою гармонією, на двох нотних станах. Кожна рука бере не ширше октави, але ноти розпізнано приблизно — звірте на слух; деталі оригінального аранжування спрощено. Якщо в записі немає голосу (мінусовка), мелодією стане провідний інструмент. Партію можна завантажити в PDF, MIDI або MusicXML.

Запис розпізнається повністю, а без Преміум відкрита його перша половина; короткий запис відкритий повністю. Решту видно на піаноролі замкненою: Преміум відкриває її одразу, без повторного розпізнавання, разом з акордами, перекладенням для фортепіано та експортом усього запису.