Flexibele smartphone gebruikt duizenden fisheye-lenzen voor 3d-weergave

Wetenschappers hebben een buigbare smartphone ontwikkeld die over een oledscherm beschikt waarover een laag met duizenden fisheye-lenzen is gelegd. Hierdoor kan de smartphone dieptebeelden met motion parallax tonen zonder dat een 3d-bril nodig is.

De wetenschappers van het Human Media Lab van de Canadese Queen’s University in Ontario hebben hun smartphone HoloFlex genoemd. De smartphone rendert beelden in blokken met een breedte van 12 pixels en elk daarvan geeft een beeld van de 3d-scène weer, zoals te zien is vanuit een bepaald gezichtspunt. De rendering gebeurt door de Adreno 430-gpu op basis van een raytracingalgoritme dat een hexagonale rangschikking van 160x104 virtuele camera's met visoogobjectieven simuleert.

Over het scherm is een lightfield-laag gelegd, bestaande uit 16.640 microlenzen. Deze kleine doorzichtige halve bolletjes zijn hexagonaal in een opstelling van 160x104 gerangschikt, overeenkomend met de rendering. Elk bolletje heeft een radius van 0,375mm en is omgeven door een zwart 'masker' om pixelblokken van elkaar te kunnen scheiden, staat in het onderzoeksdocument.

De laag met lenzen distribueren het licht van elke virtuele camera horizontaal en verticaal richting de ogen van de gebruiker, waarbij de 3d-scène opgebouwd wordt. Verscheidene gebruikers kunnen de beelden daarbij met stereoscopische diepte en bewegingsparallax ervaren zonder dat ze een 3d-bril hoeven te dragen, waarbij de kijkhoeken maximaal 35 graden zijn. De techniek lijkt een geavanceerde fisheye-versie van de eenvoudige lenticulaire techniek zoals die voor 3d-prentkaarten gebruikt wordt.

Daarnaast reageert de smartphone op verbuigingen. De 3d-elementen kunnen over de x- en y-as verschoven worden via het touchscreen, maar dankzij inertiesensoren in de smartphone zijn objecten in de z-dimensie te bewegen door het toestel te buigen. De onderzoekers tonen in een video als voorbeeld het aanpassen van 3d-objecten en het spelen van een level van Angry Birds, waarbij de vogel afgevuurd wordt na het buigen van het prototype.

Dat prototype bestaat uit een smartphone met Snapdragon 810-soc en 2GB ram. Het flexibele oledscherm heeft een resolutie van 1920x1080 pixels en 403dpi. Achter het scherm is de 2"-'buigingssensor' van FlexPoint verwerkt die verbonden is met een RFduino-chip, die op zijn beurt via bluetooth met Android communiceert.

Helaas!
De video die je probeert te bekijken is niet langer beschikbaar op Tweakers.net.

Reacties (39)

[Menesis]

Ik heb zo'n scherm een paar jaar geleden mogen aanschouwen op de TU Delft, rond de 25 inch, met de "prijs van een Audi". Een nadeel of in elk geval challenge was (en is!) dat je het 3D object ook van alle kanten tegelijk moet renderen. Als je dacht dat stereoscopic 3D (a la oculus/vive) veel resources gebruikt omdat het 2 views tegelijk rendert, dan is dat kattepis vergeleken bij wat je hiervoor nodig hebt (bij gelijke kwaliteit that is. Bij dit prototype zijn er zo weinig pixels en zo lage refreshrate dat het renderen vanuit meerdere standpunten tegelijk nog geen probleem vormt).

In dit geval gaat het dan geloof ik om 12 invalshoeken. Dus vanaf 12 hoeken tegelijk het beeld renderen. Of misschien 12x12 = 144...
Ach ja, zo blijven NVIDIA en ATI lekker aan het werk

[Reactie gewijzigd door Menesis op 24 juli 2024 08:01]

[koelpasta]

Een nadeel of in elk geval challenge was (en is!) dat je het 3D object ook van alle kanten tegelijk moet renderen.

Moah, ik denk dat dat wel op te lossen is met een camera die gezichten o.i.d. herkent. Daarmee kun je bepalen welk gebied je moet renderen.

[wvbe]

Dan kun je ook beter en scherm met een hoge inkijkhoek gebruiken in plaats van fisheye lenzen. De vervolgvraag is dan ook; (waarom) is dit er niet al? Misschien een fisheye in de camera voor gezichtsherkenning?

[poor Leno]

Lijkt wel hetzelfde trucje dat je vroeger had met nep-horloges en stickers enzo

[greyhair]

Klopt, zie tekst:

... de eenvoudige lenticulaire techniek zoals die voor 3d-kaarten gebruikt wordt.

[poor Leno]

Ah, bedoelden ze dat ermee haha, die had ik niet door

[Finraziel]

De term '3d-kaarten' is een beetje ongelukkig gekozen, hier op tweakers denk je dan al snel aan een GPU... Het kostte mij ook heel even voor ik doorhad wat er bedoeld werd.

[bl0m5t3r]

Het is nu aangepast naar "prentkaarten", wat al enige onduidelijkheid weghaalt. Echter is volgens mij het juiste woord "wenskaarten".

[djwice]

Of lenticulair lineaal:
https://youtu.be/ufio61oW2Ew

Wie had dat vroeger niet op de basisschool

Bij wenskaart denk ik eerder aan nieuwjaarskaarten en beterschapskaarten.

[Reactie gewijzigd door djwice op 24 juli 2024 08:01]

[Cerberus_tm]

Briefkaarten?

[Iblies]

Die stickers bestaan vandaag de dag nog steeds. Je kunt posters aanschaffen die zijn ingelijst en zowel thuis als op je werk als decoratie neerzetten.Leuk om te zien, maar het went snel.

Als concept is het niet echt nieuw,
maar als ze er nieuw leven in kunnen blazen en oa software-ontwikkelaars mee kunnen krijgen kan het interessant worden. Nintendo is een partij die me te binnen schiet en die op grote schaal software aan kan koppelen.


Helaas zijn technici en marketing twee aparte takken van sport.

[odiw]

Toen ik zag dacht ik hetzelfde! ik mis die na maak flipo's in mijn zak chips die dit ook hadden

[Chris.nl]

De resolutie valt me wat tegen. Zijn er misschien honderdduizenden nodig voor een scherpe resolutie, of zou daarmee het 3D gehalte weer afvlakken? Al met al wel een interessant prototype, ben benieuwd of we hier meer van gaan horen.

[Lisadr]

Eerste smartphones hadden resoluties van rond de 176 x 220 pixels en inmiddels zijn er telefoons met een resolutie van 2160 x 3840 pixels.

Geeft het 2 jaar en voldoende budget en je krijgt een betere product.

[Umbrah]

Hoewel het scherm 1920*1080 is, worden er voor elk lensje meerdere pixels gebruikt, waardoor je effectief naar 160*104 aan het kijken bent. Desalniettemin ziet het er érg indrukwekkend uit: het 2D filmpje alleen al laat zien dat het erg natuurlijk overkomt, en het 3D effect is prachtig. Echter zou je naar 1920*1080 lensjes willen gaan ("holopixels") zul je ook het aantal pixels wat die lensjes van input voorzien moeten gaan verhogen... om een mobiel device nu 19200*10800 te laten aansturen lijkt me wat absurd, naast natuurlijk de hoge DPI op het onderliggende medium.

De techniek echter heeft voor mij wel degelijk meerwaarde, hoewel een mobieltje mogelijk niet de beste formfactor is (flexibele OLED's zijn niet zo bijzonder, het bijzondere is het 12-aspecten lenticulaire 3D beeld: zonder bril, en afhankelijk van hoe je er naar kijkt). Bepaalde content kan hierdoor meer "wow" worden. Een reclamebord langs de snelweg met een vorm van diepte lijkt me echter veel pakkender... en daar maakt de resolutie dan ineens minder uit. Hoewel de buig bediening voor zoiets... holografisch wel weer erg tof en natuurlijk is.

Ze zullen waarschijnlijk om de resolutie op te hogen met andere manieren van parralax barrières moeten komen, zoals lensen die minder pixels nodig hebben maar wel aanstuurbaar zijn gekoppeld aan face tracking... dat soort zaken.

[PPie]

Een reclamebord langs de snelweg met een vorm van diepte lijkt me echter veel pakkender.

Hmm, gaan er nog meer ongelukken en files komen als er bepaalde soorten reclames op staan...

[koelpasta]

het 2D filmpje alleen al laat zien dat het erg natuurlijk overkomt,

Hoe gaat een 2D filmje je laten zien dat een 3D effect natuurlijk overkomt?...

[micla]

Omdat het meebeweegt. Als je veel met 3D werkt herken je dat, zelfs op een 2D filmpje. Ik herken het ook en kan er prima een 3D beeld in zien.

[koelpasta]

Daaraan kan je zien dat er een 3D effect is, maar niet hoe goed ie is.

[Patrick_Wolf]

Het begin van mobiele hologrammen, wat cool. Benieuwd hoe deze techniek zich gaat ontwikkelen.

[Neko Koneko]

Hoe is dit een hologram?

[Settler11]

Ook al ben ik het met je eens, maar er staat wel 'HoloFlex, A Flexible Holographic Smartphone' in de video.

[RickDB]

Beetje net zoals de "hoveboards" maar dit is inderdaad een 3d weergave scherm en geen holografische projectie.

[koelpasta]

Mooi gezegd heet dit een autostereoscopisch scherm.

[Anoniem: 463321]

Die naam klopt dan ook niet. Maar holographic, hollogram klinkt en verkoopt nu eenmaal beter.

[Bertjuhh86]

Zo te zien kost het wel erg veel render capaciteit

[Anoniem: 758629]

Een goed begin van iets nieuws, dit is hoe ik het zie.
Wij als consument kunnen er op dit moment nog niet zoveel mee natuurlijk en is het meer ''leuk om te zien'', het is vooral nu afwachten waar dit ons heen brengt.

[Jeroenneman]

Die fisheye lenzen kunnen me geen zak schelen.

Maar dat prototype met een flexibel scherm én up to date hardware?

Hebben!

[Mizgala28]

En vertel, wat heb je op gimmick na aan buigbare schermen?

[nieuwveen]

lijkt mij dat dit een stuk beter zit in je broekzak

[Jeroenneman]

Hopelijk meer valbestending, omdat het scherm meegeeft, ipv stug is.

Devices die je kunt opklappen, zoals een tablet die je kunt opvouwen tot een telefoon, of andersom (hiervoor moet de buigingshoek wel extreem zijn).

Edit:

En natuurlijk geen gebogen iPhones, Galaxy Note of andere phablets, want je kunt ze gewoon weer terugbuigen!

[Reactie gewijzigd door Jeroenneman op 24 juli 2024 08:01]

[ToolkiT]

Filmpje gezien? door te buigen kan je input op de Z-as geven (touchscreen is 2D voor X en Y-as)

En zoals al gezegd flex schermen zijn minder fragiel..

Wat me wel opvalt is dat de resolution van dit scherm nogal anno 1985 is..

[Lamer_Deluxe]

Dat klopt, het is bijna precies de resolutie van de Atari Lynx uit 1989 (160 x 102) .
Misschien kunnen ze er wat Lynx spellen naar porten met holografisch 3D effect

[RebelwaClue]

Geen zorgen als je hem in je broekzak hebt zitten dat hij permanent verbogen is. Het vallen kan ook minder ernstig zijn omdat de impact ook geabsorbeerd wordt door het kunnen verbuigen.

[RebelwaClue]

https://www.youtube.com/watch?v=d2jav7UdQtE

[glashio]

Een 3ds ziet er 3d imposantter uit

[Anoniem: 324173]

Star wars

[Metro2002]

Waarom niet gewoon hologrammen gebruiken? Die techniek bestaat al eeuwen.