Helaas!Onderzoekers van MIT, Microsoft en Adobe laten zien hoe zij geluid konden reconstrueren door de videobeelden van alledaagse objecten als zakken chips te gebruiken om te kijken welke trillingen die lieten zien.
Geluid reconstrueren door camerabeelden van zak chips
Reacties (13)
hmm In welke film deden ze dat nou ook?
nou ja niet helemaal hetzelfde, mensen in een ruimte waren aan het praten, en daardoor was een bekertje water aan het trillen. die trillingen gebruikten ze weer om de mensen af te luisteren.
nou ja niet helemaal hetzelfde, mensen in een ruimte waren aan het praten, en daardoor was een bekertje water aan het trillen. die trillingen gebruikten ze weer om de mensen af te luisteren.
Eagle Eye is de film die je zoekt 
OT: Prachtige ontwikkeling. Ik vraag me af hoelang het zal duren voordat deze technologie beschikbaar word in de vorm van apps op smartphones. De camera is het belangrijkste punt neem ik aan. Verder is het gewoon software.
OT: Prachtige ontwikkeling. Ik vraag me af hoelang het zal duren voordat deze technologie beschikbaar word in de vorm van apps op smartphones. De camera is het belangrijkste punt neem ik aan. Verder is het gewoon software.
:strip_exif()/u/455094/crop66f54d38962d1_cropped.webp?f=community){kind=small}
Om trillingen in de lucht van het openen van een zak chips te kunnen waarnemen heb je waarschijnlijk een (mega) highspeed camera nodig. Dat is vooralsnog een hardware beperking in Smartphones; het is mijn inziens dus niet puur en alleen software.
Maar ik neem aan dat je ook onder de indruk bent met wat ze kunnen halen uit 60fps DSLR footage?
Ik sta hier echt van versteld. Zeker nu de resoluties van camera's omhoog gaan.
Zou je tijdens een feest een camera in het plafond kunnen hangen en dan door op de glazen van de gasten op tafel ieder gesprek kunnen reproduceren?
Ik sta hier echt van versteld. Zeker nu de resoluties van camera's omhoog gaan.
Zou je tijdens een feest een camera in het plafond kunnen hangen en dan door op de glazen van de gasten op tafel ieder gesprek kunnen reproduceren?
Oh, ik ben zeker onder de indruk, dat zeg ik ook niet. Ik reageerde enkel op de stelling dat het nog even kan duren voordat dit bruikbaar geïmplementeerd kan worden op smartphones.
Ik denk dat je met jouw stelling over de glazen water op tafel iets te voorbarig bent. Trillingen doen zich anders voor op verschillende materialen. Het filmpje geeft weinig inhoudelijke informatie weg (het artikel van MIT ook niet), maar ik verwacht dat ze voor de verschillende materialen waarmee trillingen waargenomen worden, ook verschillende algoritmes nodig hebben. Het trillen van een kamerplant is natuurlijk veel zichtbaarder dan het trillen van water in een glas. Daarbij is het ook van belang wat voor glas/beker er gebruikt wordt, en mijn inziens dus ook verschillende algoritmes per materiaal.
Nogmaals, dit zijn aannames, maar de onderzoekers hebben ook nog geen informatie vrijgegeven omtrent deze ontwikkeling.
Ik denk dat je met jouw stelling over de glazen water op tafel iets te voorbarig bent. Trillingen doen zich anders voor op verschillende materialen. Het filmpje geeft weinig inhoudelijke informatie weg (het artikel van MIT ook niet), maar ik verwacht dat ze voor de verschillende materialen waarmee trillingen waargenomen worden, ook verschillende algoritmes nodig hebben. Het trillen van een kamerplant is natuurlijk veel zichtbaarder dan het trillen van water in een glas. Daarbij is het ook van belang wat voor glas/beker er gebruikt wordt, en mijn inziens dus ook verschillende algoritmes per materiaal.
Nogmaals, dit zijn aannames, maar de onderzoekers hebben ook nog geen informatie vrijgegeven omtrent deze ontwikkeling.
Maar de omstandigheden zullen wel perfect moeten zijn hiervoor; geen trillende handen; geen andere omgevingsgeluiden, geen andere luchtdrukverschillen (zoals bijvoorbeeld een openslaande deur, of iemand die voorbij loopt). Maar wel indrukwekkend wat met tegenwoordig kan.
Ik denk dat dat wel meevalt:
Trillende handen kan je er uit filteren omdat het gehele beeld deze trilling bevat.
Luchtdrukverschillen, wind etc. kun je er uit filteren; dat zijn hele lage frequenties (onhoorbaar).
Trillende handen kan je er uit filteren omdat het gehele beeld deze trilling bevat.
Luchtdrukverschillen, wind etc. kun je er uit filteren; dat zijn hele lage frequenties (onhoorbaar).
Zo Google, wanneer gaan jullie deze partij kopen? 
He-le-maal nieuw is het niet. Een gesprek afluisteren door een laser op een raam te richten, en de reflecties van de laster(en daarmee het trillen van het raam) te meten is al 40 (jawel, bijna veertig) jaar oud. Om het uit een video te halen is wel knap idd.
De crux is hier vooral de high speed video en zolang als de opnamefrequentie van gangbare videoapparatuur, bv smartphones, ver weg blijft van spraakfrequenties is dit vooral een academisch verhaal.
Misschien is het je nog niet opgevallen maar tweakers zet tegenwoordig artikelen met video's twee keer op de frontpage. 1x als artikel met embedded video en 1x als aparte video link. Geen idee waarom ze dat een goed idee vinden, maar dat is al sinds de redesign van de website het geval. Wat mij wel stoort is dat ze aan beide een Reacties sectie toevoegen waardoor de discussie rond het onderwerp ineens gesplits wordt tussen mensen die het artikel lezen en de mensen die alleen maar naar de video kijken.
Persoonlijk zou ik liever zien dat de video links gewoon doorlinken naar de video op de artikelpagina, maar misschien is dat technisch lastig voor elkaar te krijgen.
Persoonlijk zou ik liever zien dat de video links gewoon doorlinken naar de video op de artikelpagina, maar misschien is dat technisch lastig voor elkaar te krijgen.
:strip_icc():strip_exif()/u/136848/rsz_pure2.jpg?f=community){kind=small}
Dat wist ik al, en ben het met je eens. Maar dan staat het altijd direct netjes boven elkaar vermeld en niet 12+ uur later
Op dit item kan niet meer gereageerd worden.