Microsoft integreert Hyperlapse-videoalgoritme in mobiele app

Microsoft Research heeft het Hyperlapse-algoritme, waarmee schokkerige actievideo's 'gladgestreken' kunnen worden, in een video-app voor Windows Phone geïntegreerd. Onduidelijk is nog of de functionaliteit binnenkort al beschikbaar zal komen voor compatibele toestellen.

De Hyperlapse-technologie werd door de onderzoeksafdeling van Microsoft in augustus vorig jaar voor de eerste maal gedemonstreerd. De gebruikte algoritmen maken het mogelijk om versnelde actiebeelden van bijvoorbeeld een GoPro-helmcamera minder schokkerig te maken. Voor het 'gladstrijken' van de beelden worden drie stappen gebruikt: eerst worden de beelden via een 3d-model gereconstrueerd, waarna een soepel lopend pad wordt gegenereerd. In de laatste stap worden nieuwe frames gegenereerd.

Microsoft Research lijkt vorderingen gemaakt te hebben met het verbeteren van zijn algoritmen: WindowsBlogItalia meldt dat Microsoft een bèta-app voor Windows Phone heeft ontwikkeld waarin de Hyperlapse-technologie is opgenomen. Een video laat zien dat de mobiele app op basis van geschoten actiebeelden probeert een minder schokkerige timelapse-video te genereren.

Niet alleen Microsoft heeft technologie ontwikkeld om schokkerige video's soepel te krijgen: Instagram biedt onder dezelfde naam soortgelijke algoritmen in zijn iOS-applicatie aan. Of en wanneer Microsoft de Hyperlapse-app voor Windows Phone-toestellen zal uitbrengen is nog niet duidelijk. Mogelijk zal daar bij de aankomende Build-conferentie eind april daar meer duidelijkheid over komen.

Reacties (15)

[Zenety]

Wat een ongelofelijk onduidelijke video. Hij scrolled maar wat door dat hyperspeed heen en heb werkelijk geen idee wat er gebeurd.

Vond deze een stuk duidelijker: https://www.youtube.com/watch?v=ImB6seuIGfQ

[-Tim-]

Bij allebei de filmpjes heb ik geen idee waar hyperlapse nou precies goed voor is. Dat laat dit filmpje echter weer goed zien. (Oh shit staat ook al indirect in het artikel)

[Reactie gewijzigd door -Tim- op 28 juli 2024 19:38]

[Verwijderd]

Lijkt het nu of worden de beelden helemaal vervormd? Alsof je aan de paddo's zit. Vooral de stenen van die berg lijken te verplaatsen. Of zou dat door de gebruikte video compressie komen?

[Verwijderd]

Dat komt omdat de techniek zo werkt dat er een bewegende 3D wereld verzonnen wordt waar de gemaakte videobeelden als een texture op komen te liggen. En verder in de tijd worden de textures bijgewerkt aan de hand van het beschikbare videomateriaal. De textures in tijd en ruimte blenden in elkaar over om een natuurlijk effect te geven.

De techniek is zo ontworpen om het resultaat zo natuurlijk mogelijk te laten worden, maar soms, zoals in het filmpje in de bergen, kun je nog duidelijk zien dat het een computer gegenereerd beeld is met fotografische textures.

[dipje2]

Jaah, maar dat filmpje laat eindelijk het resultaat zien. Namelijk wat het probleem is en hoe het 'opgelost' er uit hoort te zien. Ik snap nu pas wat het hoort te doen.

Het filmpje in het artikel, maar ook het filmpje wat Zenety linkte maakte het mij nog niet duidelijk.

Ik dacht inderdaad 'maar er zijn toch al goede stabilizers'. Maar in dit filmpje laten ze duidelijk zien dat stabilizen / deshake op normale snelheid er nog steeds niet uitziet als je het 8x of 10x zo snel gaat afspelen.

Ik vraag me nog steeds af wat er gebeurd als je een video-stabilizer over het 10x-zo-snel filmpje heen gooit, maar het resultaat van dit filmpje (wat niet direct deze beta app is maar meer de research group 'work in progress') is wel indrukwekkend.

[.oisyn]

Juist, dat is het perfecte voorbeeld idd! Dat bergbeklimfilmpje ziet er echt strak uit, hij glijdt echt over de bergen heen.

Waar het dus om gaat is dat camera shakes enorm storend worden op het moment dat je een filmpje versneld afspeelt (en dat wil je dan weer typisch doen bij footage van head- of vehiclemounted camera's van een lang afgelegde afstand, waarbij een 1:1 afspeling eigenlijk gewoon heel saai is). In plaats van bijvoorbeeld domweg elk tiende beeldje op te nemen in de output video die 10x versneld is afgedraaid, wordt informatie van alle beeldjes meegenomen om een idee te krijgen van hoe de omgeving eruit ziet, en vervolgens wordt er gecompenseerd naar een hele smoothe camera beweging.

Deze techniek lijkt me overigens ook prima inzetbaar als image stabilizer op normale snelheid, door een slow motion camera te gebruiken en dat vervolgens met dit algoritme versneld af te spelen

[Reactie gewijzigd door .oisyn op 28 juli 2024 19:38]

[geertdo]

waarmee schokkerige actievideo's 'gladgestreken'

Zoals ik het begrijp gaat het daar voor een deel om. Het gaat ook om de versnelling. Hyperlaps is vergelijkbaar met timelaps maar dan tevens rekening houden met beweging.
Op versnelling 1X is het inderdaad alleen 'gladstrijken'

Edit: hun voorbeeld van augustus 2014 https://youtu.be/SOpwHaQnRSY

[Reactie gewijzigd door geertdo op 28 juli 2024 19:38]

[downcom]

Ik dacht dat ze een jaartje geleden dit ook een een soort 3d maps hadden gegoten maar kan daar niks meer over vinden!

[Reactie gewijzigd door downcom op 28 juli 2024 19:38]

[LOTG]

Ja ik heb ook geen idee wat ik er nu van moet vinden. Die andere filmpjes zijn inderdaad veel beter, je ziet tenminste wat ze doen.

Het gerelateerde bericht is laat veel beter het effect zien.

[roches]

Ik zou deze software graag op Windows (7 of 10) zien, omdat ik veel met video bezig ben!

van mij mogen ze het bij windows 10 leveren, graag in de net nieuwe build, dan kan ik het vast uitproberen....

[MClaeys]

Als men het uitbrengt als universal app (en dat verwacht ik eigenlijk wel) dan komt deze nog wel in de appstore op Windows 8 of 10.

[gwie]

Deze functie is echt een verbetering voor timelapsefilmpjes waarin de camera beweegt. Jammer dat Android tot nu toe buiten de boot valt.

[Anoniem: 541413]

Met de komst van Windows 10 zal Android steeds meer buiten de boot vallen (imo).

[Zenety]

Gebaseerd op? Van de WP/Android en iOS is WP nog degene die het minst ontwikkeld is. Word natuurlijk enorm verbeterd met de komt van WP10 inderdaad. Maar ook android en iOS blijven zich ontwikkelen.

[Anoniem: 541413]

Gebaseerd op mijn mening beste man.