Legyen szó látásproblémákat kijavító képernyőről vagy éppen fotózáshoz asszisztáló drónról, a Massachusetts Institute of Technology, közismertebb nevén az MIT kutatói számos területen igyekeznek a technológiai fejlődés lehetőségét konkrét megoldásokká konvertálni. A most bemutatott projekt első hallásra kémfilmekbe illő kuriózumnak tűnik, ám a tervek szerint a későbbiekben több más területen is bevethető lesz a filmfelvétel képkockáiból hangot előállító algoritmus.

A zenélő fikusz

Az egyetem kutatói az Adobe és a Microsoft szakembereivel karöltve azon dolgoznak, hogy a lehető legpontosabban tudják reprodukálni egy tárgy környezetében előforduló hanghatásokat pusztán a dologról készült képi felvétel segítségével. A tárgyak a hanghullámok hatására általában szabad szemmel nem látható rezgést, mozgást produkálnak, amelyet a képkockák elemzésével fel tudnak használni arra, hogy visszafejtsék, milyen hanghatások okozták mindezt.

Az alább látható videóban részletesen is bemutatják az eredményeket, melyek között említést érdemel a daloló szobanövény. Ennek közelében lejátszottak egy gyerekdalt, amelyet aztán némi torzulással, de tökéletesen beazonosítható módon tudtak visszaadni a videofelvétel alapján.

A tétet később tovább emelték. Elvégeztek egy kísérletet egy – kapaszkodjanak meg! – csipszes zacskóval is, amelynek rezdüléseit ráadásul a szobán kívülről, hangszigetelt üvegen keresztül rögzítették. A teszt során ebben az esetben folyamatos beszéd volt a megfejtendő hanghatás. Itt azért már lényegesen nagyobb volt a nem kívánt zaj, de még ez is jórészt felismerhető maradt, némi utómunkával pedig szinte biztos, hogy közel tökéletes minőségre lehetne javítani.

Kémek és lehetőségek

Természetesen a lehetséges felhasználási területek közül elsőre a titkosszolgálati munka, a kémfilmekbe illő lehallgatási akciók jutnak az ember eszébe, ám a kutatók kiemelték, hogy ennél jóval szélesebb körben tudják elképzelni a gyakorlati hasznosítást. Példaként említették a távoli anyagelemzés lehetőségét: mivel a különböző összetételű tárgyak másként reagálnak ugyanarra a hanghullámra, így a fenti technika akár erre is felhasználható lehet. Plusz nagyon remélik, hogy a projekt önmagában arra sarkall majd másokat, hogy eddig elképzelhetetlen eljárásokat, termékeket, szolgáltatásokat fejlesszenek a mozgóképből hangot kreáló eljárásra építve.