Можно ли программно узнать какие звуки записал микрофон?

Добрый день! Имеется система видеонаблюдения. Если к ней добавить направленный микрофон, можно потом по записи звука, какой либо программой определить, что это был за звук? (например подъехала машина, собака залаяла, дрон пролетел или самолет)
  • Вопрос задан
  • 655 просмотров
Пригласить эксперта
Ответы на вопрос 2
@kisaa
Элементарно - берёте нейросеть, обучаете на подготовленной выборке, тестируете, пользуетесь.
Ответ написан
Как baseline я бы попробовал такое решение:
- записываем звук как кучу коротких чанков (там, 0.5 сек. например)
- строим спектрограммы на этих чанках (будет матрица вида N * k, где k - число частот, N - длина записи)
- усредняем спекторграммы по оси "длины записи" (получим вектора размера k)
- обучаем на этих чанках и происвоенных им лейблах классификатор (возможно - k-nearest neighbours? Во всяком случае задача в таком виде кажется похожей на решаемую им)

Потом бы (при наличии большой выборки) извращался над более сложными решениями - например, как в моём комментарии к ответу kisaa - и сравнивал бы качество классификации (на кроссвалидации, конечно :-) ).
Ответ написан
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через TM ID
Похожие вопросы