Onderzoekers vinden methode om timelapsevideo van internetfoto's te maken

Wetenschappers van Google en de universiteit van Washington hebben een algoritme ontwikkeld waarmee op basis van een groot aantal publiek beschikbare foto's een timelapsevideo gemaakt kan worden. De makers beloven de code opensource te maken.

De software van de onderzoekers maakt gebruik van foto's waarvan de locatie in de exif-metadata is opgenomen. Het ontwikkelde algoritme sorteert afbeeldingen van bijvoorbeeld toeristische trekpleisters eerst op datum en vervolgens op de hoek waarmee de desbetreffende foto is geschoten. Na een aantal filters om de belichting te corrigeren en stabilisatie toe te passen construeert de software een timelapsevideo waarin een bepaalde locatie over langere tijd te bekijken is.

Google stelt dat het bij het onderzoek heeft geput uit een voorraad van 86 miljoen foto's. Deze zouden alle zijn voorzien van een creative commons-licentie, die hergebruik toestaat. Inmiddels hebben de onderzoekers meer dan tienduizend timelapsevideo's met het algoritme gecreëerd op basis van foto's van circa drieduizend locaties. De makers beloven dat de code van het algoritme op termijn vrij beschikbaar komt.

Helaas!
De video die je probeert te bekijken is niet langer beschikbaar op Tweakers.net.

Lees meer

IT-banen

Reacties (34)

Ask! 18 mei 2015 15:52

Kan iemand me vertellen wat hier de moeilijkheid zit?

Ik zie het als:
1. Een video heeft sowieso al frames.
2. Skip steeds een aantal frames en pik dan weer een frame op.
3. Plak deze aan elkaar en je hebt een timelapse?

Waarschijnlijk zie ik het compleet verkeerd, maar ik ben zeer geïnteresseerd in de technologie hier achter

[Reactie gewijzigd door Ask! op 23 juli 2024 09:26]

Verwijderd @Ask! • 18 mei 2015 15:55

de paper in het artikel beschrijft de uitdagingen: http://grail.cs.washingto...lapseMiningSIGGRAPH15.pdf

joopykoopy @Ask! • 18 mei 2015 15:54

Dit zijn foto's die jij en ik maken en op het internet hebben gezet. Zoek ze op, haal je punten er uit, en zorg dat de veranderingen duidelijk worden. Maar zoals je ziet veranderd het camerapunt niet, dit is omdat er een 3D model van gemaakt is.

bbob @joopykoopy • 18 mei 2015 17:55

Wat ik vooral zie is de lage resolutie. Nu is dat ook logisch de ene maakt een foto met die resolutie de ander met andere resolutie en men zal ook een deel van de ene foto gebruiken voor de timelaps. Gevolg zal een leuke timelaps op lage resolutie zijn. De video komt ook niet echt hoger dan 360p

Mijzelf @Ask! • 18 mei 2015 15:54

Deze foto's zijn allemaal uit een verschillende hoek, met verschillend perspectief, verschillende lens, belichting, ... genomen.

Boy @Ask! • 18 mei 2015 15:54

Ik denk (als ik het goed begrepen heb) dat de foto's allemaal verschillende bronnen hebben. Hij bekijkt welke hoek en positie, shift de foto zo dat het het klopt met de overlapping en zo een timelapse maakt...

als dit zo is, ben ik erg onder de indruk!

Anima-t3d @Ask! • 18 mei 2015 15:54

Ik zie het als:
1. Een video heeft sowieso al frames.
2. Skip steeds een aantal frames en pik dan weer een frame op.
3. Plak deze aan elkaar en je hebt een timelapse?

Hier is het gemaakt met reeds op het internet beschikbare data (afbeeldingen, geen video's). Waarmee een timelapse gemaakt wordt. Zie het als toeristen die historici worden. Verschillende personen dragen zo bij aan het wetenschappelijk archiveren van een gebied.

ivan797 @Ask! • 18 mei 2015 15:55

Als ik het goed begrijp is de moeilijkheidsgraad het kiezen van de juiste foto's, dit omdat elke foto meer / minder is ingezoomd dit maakt het lastig om het object te herkennen en deze centraal te houden
[edit] ik heb het totaal verkeerd begrepen. dit door de intro in het filmpje.

het gaat er alleen om dat onregelheden er worden uitgehaald zoals bv vogels in beeld of een wolk

[Reactie gewijzigd door ivan797 op 23 juli 2024 09:26]

kutagh @Ask! • 18 mei 2015 16:00

Hier wordt er een timelapse gemaakt op basis van een verzameling foto's uit verschillende bronnen. Om een voorbeeld te nemen: Vandaag ga jij naar de Tweakers HQ en schiet een foto van de ingang. Volgend maand ga ik ook daar naartoe en neem een nieuwe foto van de ingang. Dit wordt elk maand herhaald door een ander tweaker en na zoveel tijd wordt automatisch door Google een timelapse gegenereerd uit onze foto's.

WillySis @Ask! • 18 mei 2015 16:25

Met deze techniek kan je van allerhande (vakantie)kiekjes een mooi historisch beeld opbouwen. De film is geen time-lapse uit een kort filmpje van een paar minuten, maar een time-lapse van vele jaren. Voor de gewone man leuk om naar te kijken, maar voor wetenschappers levert dit een schat aan informatie.
Denk aan het smelten van gletsjers, zeespiegelstijging, invloed van luchtvervuiling enz. Dingen die wetenschappers graag (ook van het verleden) willen weten, maar te weinig hebben vastgelegd. Nu kan iedereen een steentje (plaatje) bijdragen aan de wetenschap.

velenski @Ask! • 18 mei 2015 16:59

De moeilijkheid zit in het feit dat de foto's uit verschillende bronnen komen van dezelfde locaties.
Het algoritme zoekt het internet af naar deze foto's.

Dit heeft vergaande implicaties voor surveillance omdat het nu mogelijk maakt om zeg maar in het verleden te zoeken uit diverse hoeken en locaties om bijvoorbeeld een time-frame te gebruiken naar verdachten in een misdrijf.

In films zag je dit al, maar dit was scifi tot nu.

Dit gaat dus nu ook met video gebeuren.

Dit is wel degelijk een doorbraak waar ze op zitten te wachten, tot nu toe waren ze afhankelijk van knippen plakken van beelden die onbetrouwbaar waren.
Nu is het kwestie van het algoritme zijn werk laten doen en laten zoeken naar criteria.

Ik heb hier eens een korte documentaire over gezien bij een vriend thuis en die voorspelde toen al dat dit eraan zat te komen, maar wie geloofde dat nu, of andere dachten weer, dat bestaat allang,
Helaas geven we veiligheidsdiensten teveel eer, zoveel techniek hebben ze niet, en ontwikkelen doen ze al evenmin tegenwoordig.

Dus voor wie op privacy gesteld is, dan heb je een probleem

iAR 18 mei 2015 15:57

Dit is inderdaad wel erg gaaf.
Ik vraag me dan wel af hoe de hoek berekend wordt. Ik kan me niet herinneren dat er compasgegevens in foto's worden opgeslagen, of heb ik dat mis?

Van plekken waar veel toeristen foto's van zijn kun je straks dus echt complete beelden van zien.

drakiesoft @iAR • 18 mei 2015 16:02

Van plekken waar veel toeristen foto's van zijn kun je straks dus echt complete beelden van zien.

Volgens mij is dat wat anders. Vergelijkbaar met photosynth.

iAR @drakiesoft • 18 mei 2015 16:51

Ik bedoelde meer dat er minder gaten in de tijd zitten (completer beeld). Niet zo zeer een groot beeld, zoals inderdaad met photosynth kan.

@ATS: ik kan de video hier niet bekijken maar dat zul je inderdaad krijgen. Minder toeristische plekken hebben helemaal een incompleet beeld.

ATS @iAR • 18 mei 2015 16:24

Als je de tijdlijn onder de beelden bekijkt, dan zie je ook de toeristenseizoenen terug in de video's. Dat kan nog wel eens een bias geven denk ik dan, omdat je van een bepaalde plek bijvoorbeeld voornamelijk winterfoto's of juist zomerfoto's hebt.

biglia 18 mei 2015 15:50

Dat is wel heel knap. Interessant om een timelapsevideo van je terugtrekkende haarlijn te maken.

wautah91 @biglia • 18 mei 2015 16:12

Dat kan al met Picasa!

http://petapixel.com/2010...vies-with-googles-picasa/

WillySis @wautah91 • 18 mei 2015 16:31

In picasa moet je wel zelf de foto's op een tijdlijn zetten. Hier heeft men het over een zoekmachine die het hele internet afzoekt naar plaatjes. Ik vermoed dat er uit de exif tags de locatie en datum (en tijd) wordt gehaald. Daarna wordt ook het camerastandpunt en nog wat andere zaken (kleur) gecorrigeerd en de boel wordt netjes achterelkaar gezet.
Om hetzelfde met Picasa te bereiken ben je jaren bezig.

DennusB @biglia • 18 mei 2015 15:52

conradm 18 mei 2015 17:05

Als het met tijd kan kan het waarschijnlijk ook met andere dimensies, volgens mij moet het met vergelijkbare alogaritmes een door wandelbaar model van bijvoorbeeld de Eiffeltoren te maken

revertive @conradm • 18 mei 2015 23:35

Ligt het aan mij of beschijf je hier streetview van Google? Doormiddel van foto's een 'bewandelbare omgeving' creëren.

Of bedoelde je dat ze met deze techniek een streetview variant kunnen maken die voorkomt uit foto's van het internet? Want dat zou wel mooi zijn streetview met door gebruikers aangeleverde foto's waardoor je er niet alleen doorheen kan lopen maar ook door de 'tijd' heen kan lopen om te kijken wat er veranderd is.

conradm @revertive • 20 mei 2015 10:39

Ja, streetview is erg grof, op deze manier zou je een veel gedetailleerdere virtuele omgeving kunnen maken.

alexboon 18 mei 2015 15:54

Paper 5min doorgenomen en best indrukwekkend en is ook nog open source. ("Code and more results will be published soon.")

Directe link naar paper: klik

Particlebox 18 mei 2015 15:56

Wel mooi om te zien hoe alles veranderd. Op deze manier kan er mooi een timelapse van jaren gemaakt worden zonder constant een camera ergens op te richten. Ik vraag me nog wel af hoe ze dat hebben gedaan met foto's die qua hoek nét iets afwijken, worden deze goed gezet of op één of andere manier geïnterpeteerd?

Grappig om te zien ook hoe de seizoenen verlopen in bepaalde gebieden of hoe een gebouw gebouwd wordt. Het lijkt wel een soort van geschiedenis van het landschap wat je terug kan halen en achter elkaar kan bezichtigen.

Verwijderd @Particlebox • 18 mei 2015 17:19

En nu iedereen nog de datum en tijd goed hebben gezet in zijn camera. Hoe vaak ik niet een verkeerde datum/tijd tegenkom in de Exif-data.

Triogap 18 mei 2015 16:04

Heb al een app op mijn telefoon met de naam Project Tripod. Die werkt door de community te vragen in de loop van de tijd foto's van zaken te maken. En maakt hier dan ook time lapses van.