Комментарии 5
Всё хорошо, но получившийся визуализатор спектра не является спектрограммой, хотя определение в самом начале верное.
Похоже, перед FFT вы забыли массив умножить на оконную функцию.
Можно ли добавить AI для анализа паттернов в спектрограмме? Т.Е ML-модель для классификации типов звуков (речь/музыка/шум) в реальном времени, сможет потом добавлять автоматические сабы.
P.S. Татьяна, шикарный разбор! учитывая, что действительно мало кто пишет на данную тему в открытом доступе
Здравствуйте! Да, ML-модель вполне возможно добавить, однако нужно будет сделать сбор частот за промежуток времени (сейчас частоты анализируются каждую 0,1 сек). Вероятно, понадобится завести отдельный класс, где будут храниться несколько массивов частот за какой-то интервал времени. Благодарю за отзыв!
Ну, react и mobx тут видимо для привлечения внимания, ибо их роль тут, прямо скажем, стремится к нулю, гораздо интереснее работа с web audio api. Кстати, в итоге действительно получилась не то чтобы спектрограмма, а скорее еë срез в реальном времени, а-ля АЧХ
Собрать звуковую спектрограмму на React и MobX