Зворотне поліфонічне розпізнавання акордів

Наразі поліфонічна транскрипція музики не є вирішеною проблемою.

Як щодо оберненої невеликої частини проблеми. Чи є якісь спектральні характеристики (від STFT), які можна використовувати для усунення деяких музичних акордів з простору ймовірностей? (наприклад, цей фрагмент звуку, швидше за все, не містить жодного акорду C # або будь-якого зменшеного мінорного акорду, або це одна нота, а не акорд тощо).

Припустимо, звуковий фрагмент є більш-менш нерухомим (тимчасова атака вилучена тощо), і що, можливо, є підтексти для більшості або всіх окремих нот. (І це питання не стосується перевернутих акордів.)

Проблема транскрипції поліфонічної музики привернула величезну увагу в дослідницькій спільноті в останні роки, і я б хотів сказати, що для поліфоній на одному інструменті (фортепіано, гітара тощо) результати дуже хороші. Ось кілька робіт / авторів, які глибоко розглядали цю проблему. Деррі Фіцджеральд багато зробив у цьому районі, багато його роботи з NMF над розділенням джерел дають точні транскрипції. Анссі Клапурі ще конкретніше розглянув проблему виявлення акордів у багато інструментальних поліфоніях. І нарешті, хоча і не опублікована, Mikel Gainza розробила дуже точні алгоритми транскрипції акордів для комерційної музики, які незабаром будуть випущені в гітарному програмному продукті Riffstation. Публікації в посиланнях тут повинні дати вам гарне уявлення про те, як лежить поліфон транскрипції музики поліфонічного на даний момент.

Чи є якісь спектральні характеристики (від STFT) ... це єдина нота, а не акорд тощо)

Ну, для цього STFT буде містити лише фундаментальну частотну складову та інші частоти, близькі до гармонік її (не точно, проте через негармонічність ). Знайдіть піки в спектрі і подивіться, чи більш високі частоти близькі до цілих кратних присутніх найнижчої частоти. Якщо присутні негармонічні частоти, то це не один тон.

(А як щодо інструментів з відсутніми основоположними або принципово негармонічними речами, як дзвони? Що з двома інструментами, ідеально гармонізуючими граючи на октаві один від одного, тому їх частки здебільшого співпадають один з одним? Ви хочете виявити це як одну ноту чи дві ноти?)