Алгоритм визуально считывает звук сколебаний предметов

Алгоритм визуально считывает звук сколебаний предметов

В одном из опытов ученые смогли подробно вернуть обращение посредством колебаний пакета картофельных чипсов, снятого на расстоянии в 4,5 метра через звуконепроницаемое стекло. В других опытах звуковые сигналы были выявлены на записях с алюминиевой фольгой, поверхностью стакана воды а также с страницами комнатного растения!

«В то время, когда звук попадает на объект, он заставляет объект вибрировать», — говорит Эйб Дэвис, аспирант MIT. — Эта вибрация формирует тонкий визуальный сигнал, что в большинстве случаев незаметен невооруженным глазом. Люди просто не знают, что в том месте по большому счету имеется какая-то информация.

Метод пропускает последовательные кадры видео через батарею графических фильтров, каковые употребляются для измерения колебаний в нескольких разных направлениях — горизонтальных, вертикальных, и диагональных — и через пара различных шкал.

Восстановление аудио из видео требует, дабы частота кадров в секунду на видео была выше, чем частота звукового сигнала. В некоторых собственных опытах ученые применяли скоростную камеру, которая снимает от 2000 до 6000 кадров в секунду. Это значительно стремительнее 60 кадров в секунду, на каковые способны камеры некоторых смартфонов, но существенно ниже частоты кадров лучших опытных скоростных камер, каковые могут похвалиться частотой в 100 000 кадров в секунду.

В других опытах употреблялась простая цифровая камера, и ученым удалось вывести данные о высокочастотных колебаниях кроме того из видео, записанного в стандартной частоте 60 кадров в секунду. Само собой разумеется, такая реконструкция звука не была столь же верной, как это было с скоростной камерой, но она, однако, достаточно хороша, дабы выяснить, к примеру, пол оратора.

Исследователи сохраняют надежду, что их разработка будет иметь широкое использование в судебной экспертизе.

A headset that reads your brainwaves | Tan Le


Темы которые будут Вам интересны:

Читайте также: