Spectrum
Базовая идея - декодирование небольшого количества параметров управляющих системой из получаемого спектра. Берем базовый синтез аудио с 4 параметрами (frequency, filter, resonance, volume)
-
Выставляем всевозможные значения параметров и смотрим получающийся спектр. Сохраняем в датасет строку - параметры-спектр. Собираем несколько датасетов
-
Создаем нейросеть с парой слоев, на входе 64 параметра (спектр), на выходе 4 (настройки синтезатора)
-
Обучаем модель в MLFlow
-
Получаем 6 различных характеров звучания