Cookies op Tweakers

Tweakers maakt gebruik van cookies, onder andere om de website te analyseren, het gebruiksgemak te vergroten en advertenties te tonen. Door gebruik te maken van deze website, of door op 'Ga verder' te klikken, geef je toestemming voor het gebruik van cookies. Wil je meer informatie over cookies en hoe ze worden gebruikt, bekijk dan ons cookiebeleid.

Meer informatie

Door , , 34 reacties

Wetenschappers van Google en de universiteit van Washington hebben een algoritme ontwikkeld waarmee op basis van een groot aantal publiek beschikbare foto's een timelapsevideo gemaakt kan worden. De makers beloven de code opensource te maken.

De software van de onderzoekers maakt gebruik van foto's waarvan de locatie in de exif-metadata is opgenomen. Het ontwikkelde algoritme sorteert afbeeldingen van bijvoorbeeld toeristische trekpleisters eerst op datum en vervolgens op de hoek waarmee de desbetreffende foto is geschoten. Na een aantal filters om de belichting te corrigeren en stabilisatie toe te passen construeert de software een timelapsevideo waarin een bepaalde locatie over langere tijd te bekijken is.

Google stelt dat het bij het onderzoek heeft geput uit een voorraad van 86 miljoen foto's. Deze zouden alle zijn voorzien van een creative commons-licentie, die hergebruik toestaat. Inmiddels hebben de onderzoekers meer dan tienduizend timelapsevideo's met het algoritme gecreëerd op basis van foto's van circa drieduizend locaties. De makers beloven dat de code van het algoritme op termijn vrij beschikbaar komt.

Moderatie-faq Wijzig weergave

Reacties (34)

Kan iemand me vertellen wat hier de moeilijkheid zit?

Ik zie het als:
1. Een video heeft sowieso al frames.
2. Skip steeds een aantal frames en pik dan weer een frame op.
3. Plak deze aan elkaar en je hebt een timelapse?

Waarschijnlijk zie ik het compleet verkeerd, maar ik ben zeer geïnteresseerd in de technologie hier achter :)

[Reactie gewijzigd door Ask! op 18 mei 2015 15:53]

de paper in het artikel beschrijft de uitdagingen: http://grail.cs.washingto...lapseMiningSIGGRAPH15.pdf
Dit zijn foto's die jij en ik maken en op het internet hebben gezet. Zoek ze op, haal je punten er uit, en zorg dat de veranderingen duidelijk worden. Maar zoals je ziet veranderd het camerapunt niet, dit is omdat er een 3D model van gemaakt is.
Wat ik vooral zie is de lage resolutie. Nu is dat ook logisch de ene maakt een foto met die resolutie de ander met andere resolutie en men zal ook een deel van de ene foto gebruiken voor de timelaps. Gevolg zal een leuke timelaps op lage resolutie zijn. De video komt ook niet echt hoger dan 360p
Deze foto's zijn allemaal uit een verschillende hoek, met verschillend perspectief, verschillende lens, belichting, ... genomen.
Ik denk (als ik het goed begrepen heb) dat de foto's allemaal verschillende bronnen hebben. Hij bekijkt welke hoek en positie, shift de foto zo dat het het klopt met de overlapping en zo een timelapse maakt...

als dit zo is, ben ik erg onder de indruk!
Ik zie het als:
1. Een video heeft sowieso al frames.
2. Skip steeds een aantal frames en pik dan weer een frame op.
3. Plak deze aan elkaar en je hebt een timelapse?
Hier is het gemaakt met reeds op het internet beschikbare data (afbeeldingen, geen video's). Waarmee een timelapse gemaakt wordt. Zie het als toeristen die historici worden. Verschillende personen dragen zo bij aan het wetenschappelijk archiveren van een gebied.
Als ik het goed begrijp is de moeilijkheidsgraad het kiezen van de juiste foto's, dit omdat elke foto meer / minder is ingezoomd dit maakt het lastig om het object te herkennen en deze centraal te houden
[edit] ik heb het totaal verkeerd begrepen. dit door de intro in het filmpje.

het gaat er alleen om dat onregelheden er worden uitgehaald zoals bv vogels in beeld of een wolk

[Reactie gewijzigd door ivan797 op 18 mei 2015 15:57]

Hier wordt er een timelapse gemaakt op basis van een verzameling foto's uit verschillende bronnen. Om een voorbeeld te nemen: Vandaag ga jij naar de Tweakers HQ en schiet een foto van de ingang. Volgend maand ga ik ook daar naartoe en neem een nieuwe foto van de ingang. Dit wordt elk maand herhaald door een ander tweaker en na zoveel tijd wordt automatisch door Google een timelapse gegenereerd uit onze foto's.
Met deze techniek kan je van allerhande (vakantie)kiekjes een mooi historisch beeld opbouwen. De film is geen time-lapse uit een kort filmpje van een paar minuten, maar een time-lapse van vele jaren. Voor de gewone man leuk om naar te kijken, maar voor wetenschappers levert dit een schat aan informatie.
Denk aan het smelten van gletsjers, zeespiegelstijging, invloed van luchtvervuiling enz. Dingen die wetenschappers graag (ook van het verleden) willen weten, maar te weinig hebben vastgelegd. Nu kan iedereen een steentje (plaatje) bijdragen aan de wetenschap.
De moeilijkheid zit in het feit dat de foto's uit verschillende bronnen komen van dezelfde locaties.
Het algoritme zoekt het internet af naar deze foto's.

Dit heeft vergaande implicaties voor surveillance omdat het nu mogelijk maakt om zeg maar in het verleden te zoeken uit diverse hoeken en locaties om bijvoorbeeld een time-frame te gebruiken naar verdachten in een misdrijf.

In films zag je dit al, maar dit was scifi tot nu.

Dit gaat dus nu ook met video gebeuren.

Dit is wel degelijk een doorbraak waar ze op zitten te wachten, tot nu toe waren ze afhankelijk van knippen plakken van beelden die onbetrouwbaar waren.
Nu is het kwestie van het algoritme zijn werk laten doen en laten zoeken naar criteria.

Ik heb hier eens een korte documentaire over gezien bij een vriend thuis en die voorspelde toen al dat dit eraan zat te komen, maar wie geloofde dat nu, of andere dachten weer, dat bestaat allang,
Helaas geven we veiligheidsdiensten teveel eer, zoveel techniek hebben ze niet, en ontwikkelen doen ze al evenmin tegenwoordig.

Dus voor wie op privacy gesteld is, dan heb je een probleem :)
Dit is inderdaad wel erg gaaf.
Ik vraag me dan wel af hoe de hoek berekend wordt. Ik kan me niet herinneren dat er compasgegevens in foto's worden opgeslagen, of heb ik dat mis?

Van plekken waar veel toeristen foto's van zijn kun je straks dus echt complete beelden van zien.
Van plekken waar veel toeristen foto's van zijn kun je straks dus echt complete beelden van zien.
Volgens mij is dat wat anders. Vergelijkbaar met photosynth.
Ik bedoelde meer dat er minder gaten in de tijd zitten (completer beeld). Niet zo zeer een groot beeld, zoals inderdaad met photosynth kan.

@ATS: ik kan de video hier niet bekijken maar dat zul je inderdaad krijgen. Minder toeristische plekken hebben helemaal een incompleet beeld.
Als je de tijdlijn onder de beelden bekijkt, dan zie je ook de toeristenseizoenen terug in de video's. Dat kan nog wel eens een bias geven denk ik dan, omdat je van een bepaalde plek bijvoorbeeld voornamelijk winterfoto's of juist zomerfoto's hebt.
Dat is wel heel knap. Interessant om een timelapsevideo van je terugtrekkende haarlijn te maken.
In picasa moet je wel zelf de foto's op een tijdlijn zetten. Hier heeft men het over een zoekmachine die het hele internet afzoekt naar plaatjes. Ik vermoed dat er uit de exif tags de locatie en datum (en tijd) wordt gehaald. Daarna wordt ook het camerastandpunt en nog wat andere zaken (kleur) gecorrigeerd en de boel wordt netjes achterelkaar gezet.
Om hetzelfde met Picasa te bereiken ben je jaren bezig.
Als het met tijd kan kan het waarschijnlijk ook met andere dimensies, volgens mij moet het met vergelijkbare alogaritmes een door wandelbaar model van bijvoorbeeld de Eiffeltoren te maken
Ligt het aan mij of beschijf je hier streetview van Google? Doormiddel van foto's een 'bewandelbare omgeving' creëren.

Of bedoelde je dat ze met deze techniek een streetview variant kunnen maken die voorkomt uit foto's van het internet? Want dat zou wel mooi zijn streetview met door gebruikers aangeleverde foto's waardoor je er niet alleen doorheen kan lopen maar ook door de 'tijd' heen kan lopen om te kijken wat er veranderd is.
Ja, streetview is erg grof, op deze manier zou je een veel gedetailleerdere virtuele omgeving kunnen maken.
Paper 5min doorgenomen en best indrukwekkend en is ook nog open source. ("Code and more results will be published soon.")

Directe link naar paper: klik
Wel mooi om te zien hoe alles veranderd. Op deze manier kan er mooi een timelapse van jaren gemaakt worden zonder constant een camera ergens op te richten. Ik vraag me nog wel af hoe ze dat hebben gedaan met foto's die qua hoek nét iets afwijken, worden deze goed gezet of op één of andere manier geïnterpeteerd?

Grappig om te zien ook hoe de seizoenen verlopen in bepaalde gebieden of hoe een gebouw gebouwd wordt. Het lijkt wel een soort van geschiedenis van het landschap wat je terug kan halen en achter elkaar kan bezichtigen.
En nu iedereen nog de datum en tijd goed hebben gezet in zijn camera. Hoe vaak ik niet een verkeerde datum/tijd tegenkom in de Exif-data.
Heb al een app op mijn telefoon met de naam Project Tripod. Die werkt door de community te vragen in de loop van de tijd foto's van zaken te maken. En maakt hier dan ook time lapses van.
Is die stem ook met timelaps gegenereerd?
Het lijkt me een computer stem. Zie je helaas steeds meer bij Youtube videos.
Helaas is dit een menselijke stem. Een computerstem had aanzienlijk verstaanbaarder geweest.

[Reactie gewijzigd door Neut72 op 19 mei 2015 08:43]

Erg cool gedaan!
Daajm google blijft me verbazen!
Gewoon het idee al om al die fotos (toch van ongeveer hetzelfde perspectief) te browsen van eenzelfde plaats!
Klinkt als een creative friday project...

Op dit item kan niet meer gereageerd worden.



Apple iOS 10 Google Pixel Apple iPhone 7 Sony PlayStation VR AMD Radeon RX 480 4GB Battlefield 1 Google Android Nougat Watch Dogs 2

© 1998 - 2016 de Persgroep Online Services B.V. Tweakers vormt samen met o.a. Autotrack en Carsom.nl de Persgroep Online Services B.V. Hosting door True