Computer-Simulated Realistic Sounds

Onderzoekers van MIT hebben een systeem ontwikkeld dat geluiden kan simuleren die zo perfect zijn dat ze zelfs menselijke luisteraars kunnen misleiden. Dit zijn effecten gecreëerd door een algoritme dat de akoestische eigenschappen van een geluid voorspelt, simpelweg door stille videoclips te analyseren.

Door video's te onderzoeken van drumsticks die verschillende objecten en materialen raken, zoals bladeren, hout, water of plastic, creëert het algoritme een realistische simulatie, in staat om de luisteraars te misleiden. Bekijk de onderstaande video:

Om een dergelijk resultaat te bereiken, paste promovendus Andrew Owens en zijn team een techniek genaamd "deep learning" toe, waardoor computers zelf patronen kunnen identificeren uit enorme hoeveelheden data. Gedurende enkele maanden analyseerden computers gegevens van ongeveer 1000 video's en 46000 geluiden van drumsticks die verschillende soorten materialen en objecten raakten, krabden en porde. De keuze voor de drumstick kwam door zijn vermogen om consistente geluiden te produceren.

De gesimuleerde geluiden waren vaak zo goed dat wanneer mensen twee versies van dezelfde video kregen te zien - één met gesimuleerd geluid en één met het echte geluid - ze er niet in slaagden om het echte geluid correct te onderscheiden. Onderzoekers geloven dat dit een belangrijke stap is, niet alleen op het gebied van simulatietechnologieën, maar ook voor robotica. “Een robot zou naar een trottoir kunnen kijken en instinctief weten dat het cement hard is en het gras zacht, en dus weten wat er zou gebeuren als ze op een van beide zouden stappen” zei Owens. “Het kunnen voorspellen van geluid is een belangrijke eerste stap naar het kunnen voorspellen van de gevolgen van fysieke interacties met de wereld.”

Bron: Gizmodo