科学家学会了如何提取的声音信号从视觉信息 Bashny.Net

一组研究人员在麻省理工学院、微软、Adobe已经开发了一种算法，可以重建音频信号通过分析振动的物体所描绘的视频。

特别是，科学家在他们的实验能够恢复的声音产生的薯片袋袋，基于视频通过隔音玻璃从相距15英尺。 在其他的实验中，工程师重新音频信号的铝箔，水的表面的玻璃和从植物的叶子.



研究人员之一，安倍晋三Davis说："时的声音击的对象，它会导致对象的振动。 该运动的这种振动创建了一个非常微妙的视觉信号，通常肉眼看不到的。 人们甚至不知道这些信息是在那里。"

恢复音频视频需要的数量帧视频捕获的每第二高于频率的声音信号。 在他们的实验中，研究人员使用的高速照相机拍摄的2,000至6 000名框架。 这是速度远远超过60架每秒一些智能手机，但是很好下面的框率的商业高速相机用100000框架。



在其他实验中他们使用了一个普通的数字照相机。 特别设计的传感器最多的摄像机已经帮助把信息高频震动甚至从视频记录在一个标准的60框架。 虽然这audiokonstrukte并不理想，因为它是与高速摄影机，它仍然是良好的，足以确定性别的扬声器在房间里。

资料来源：nauka24news.ru/