Onderzoekers bouwen 3d-teleconferencingsysteem met Kinect

Het Canadese Human Media Lab heeft een 3d-teleconferencingsysteem ontwikkeld waarbij Kinect-hardware en 3d-projectoren hologrammen mogelijk maken. Ook kan de anatomie van het menselijk lichaam bestudeerd worden.

Het 3d-teleconferencingsysteem, dat door de Human Media Lab-onderzoekers aan de Canadese Queen's University TeleHuman is genoemd, gebruikt zes Kinect-camera's die bovenop een cylindervormige behuizing zijn geplaatst. Deze maken het mogelijk om 3d-beelden van een TeleHuman-gebruiker te maken terwijl de persoon rond de cylinder loopt. Een 3d-projector creëert aan de hand van de diepte-informatie een hologram in de 1,8 meter hoge cylinder waardoor een 3d-illusie ontstaat.

Naast het 3d-teleconferencingsysteem hebben de onderzoekers ook een 3d-applicatie ontwikkeld om de anatomie van het menselijk lichaam te kunnen bestuderen. In de zogenaamde BodiPod kan de 3d-projectie van het menselijk lichaam via handgebaren en spraak gemanipuleerd worden. Zo kunnen met handbewegingen verschillende lagen van het anatomisch model worden verwijderd, terwijl met spraakcommando's bepaalde organen uitvergroot kunnen worden.

Het is niet de eerste keer dat Microsofts Kinect-camera's wordt ingezet om holografische projectie mogelijk te maken; onder andere studenten van MIT ontwikkelden een systeem waarbij 3d-beelden met een snelheid van vijftien beelden per seconde getoond kunnen worden. Ook Microsoft zelf is bezig met holografie waarbij 3d-beelden met behulp van aanraking worden bestuurd .

Helaas!
De video die je probeert te bekijken is niet langer beschikbaar op Tweakers.net.

Reacties (16)

[mvleus]

Filmpje blijft hangen op 00:13? (dit is geen poging tot First Post, trust me)

[einstein]

Klopt, hier hetzelfde. 13 seconden en daar stopt het.
Het bronmateriaal komt overigens van longtailvideo.com en niet van Tweakers.net zelf.

[Dimitri R]

De videoserver had last van een ochtendhumeur maar nieuwe clip loopt nu wel.

[pleuris]

Hier ook

[K_VL]

Youtube: http://www.youtube.com/wa...er_embedded&v=wa5I-D5_sM0

[michelv5]

Mooie ontwikkeling van kinect, het is wel erg leuk om te zien dat deze techniek niet alleen gebruikt wordt bij het gamen. Ben benieuwd wat deze techniek met 3D beelden en hologrammen ons nog in de toekomst gaat brengen.

[vgroenewold]

Mooi ja, goedkoop in theorie ook. Eigenlijk wel grappig dat de Kinect alleen een beetje succesvol is in het lab, goedkope sensors voor wetenschappers.

[esak]

Volgens mij gaat het meer om de software die er achter zit en waar Microsoft miljoenen in heeft geïnvesteerd. Wetenschapper die gebruik maken van de Kinect sensor gebruiken "simpelweg" de Kinect SDK wat alles een stuk gemakkelijker maakt dan de ruwe output van zo een sensor gebruiken.

[BoringDay]

Microsoft heeft Kinect gewoon opgekocht.
De makers was een ander partij .... de techniek is dus ook niet geheel nieuw.

Anyway het bied goedkope oplossingen voor realtime opnames voor 3D omgevingen.
Denk bijv. aan 3DObjecten waarbij bone-structures automatisch vast gelegd kan worden ... dat scheelt uren en uren aan werk.
Of het opbouwen van omgevingen.

Echter wacht ik op video/foto camera's voor betaalbare prijs die objecten kan onderscheiden dan krijg je echt hele leuke mogelijkheden op gebied van filmen/animeren.

[BoringDay]

Er bestaat al capture software voor de kinect die een 3d model van je omgeving en personages kan maken en bewegingen kan vast leggen. Dit kan je vervolgens weer importeren in 3d animatie software.

http://www.youtube.com/watch?v=gZNkfFaBTIA
http://motioncapturedata....inect-motion-capture.html

[Reactie gewijzigd door BoringDay op 22 juli 2024 22:14]

[Verwijderd]

http://www.hml.queensu.ca/files/TeleHuman.m4v

Hier kun je het filmpje wel zien en ook zonder irritante reclame die er door tweakers.net is voor gezet.

Ik vraag me toch het nut van dit soort projecten af. Het is leuk als je biologie studeert of voor andere wetenschappelijke doeleinden, maar thuis heb je er geen moer aan.

Ik dacht eerst misschien leuk voor teleconferencing, maar daarvoor moet je een setup hebben die je helemaal rond om filmt wat natuurlijk maar 1 kant op kan werken met zo'n setup.

Leuk voor het concept maar, en de eindconclusie van het filmpje dat de vorm van het display belangrijk is, is leuk maar onzinnig. Tenzij je een display hebt in een bank vorm, en een auto en whatever object je ook wilt.

Hm misschien leuk in een showroom voor auto's

[nst6ldr]

Hm misschien leuk in een showroom voor auto's

Ik ben bang dat dat ook niet helemaal lukt, als ik de werking goed begrijp is het een cilindervormig scherm met een beamer aan de binnenkant, wat camera's en de software die het juiste perspectief van het 3D beeld op de juiste invalshoek van het scherm projecteert. Het komt er dus op neer dat dit slechts voor een enkele toeschouwer werkt, hooguit twee als deze zich precies tegenover elkaar bevinden. Als meerdere kijkers er bij gaan staan krijg je overlappend beeld en veranderd de 3D illusie al snel in een 'gewoon' cilindervormig scherm.

[Reactie gewijzigd door nst6ldr op 22 juli 2024 22:14]

[Verwijderd]

Ik zie het anders, kinect wordt gebruikt op een zuil om de omgeving te scannen. Dit wordt vertaald naar een zuil (buiging beeld). Iedereen die dus naar de zuil kijkt ziet zijn eigen invalshoek. Dit is dus full-3d van een persoon.

Ik zou het concept omdraaien. Als je op de vier hoeken van een kamer sensoren hangt welke het beeld naar een zuil vertalen zou het een stuk makkelijker zijn. Als je dit 3D beeld combineert met enkele afbeeldingen van de persoon zou de edge een stuk strakker gerenderd kunnen worden.

Ik bedenk onmiddelijk hoeveel aan vliegreizen bespaard kan worden met dit soort technieken. Hoewel sommige culturen persoonlijk contact nog altijd meer waarderen en noodzakelijk achten kan dit toch een flinke besparing opleveren. Dit soort techniek kan gebruikt worden voor virtuele conferenties

Andere toepassing zijn een aanvulling op deze:

http://www.youtube.com/watch?v=MNCy_meuwzY

[Teijgetje]

Prachtige displaytechniek!!

Daar kan vast veel moois uit komen, eenmaal iets verder ontwikkeld nog.
Maar verbazend wat al mogelijk is door min of meer commercieële produkten te combineren.

Zoals ik het begrijp;
Dit is een 3D opname geprojecteerd in het centrum van een 360 graden scherm waardoor het beeld van alle kanten te bekijken is, zoals je er van die kant tegenaan zou kijken in het echt. Daarom kun je eromheen lopen.
Dit maakt het verschil met het traditionele hologram, een 3Dprojectie op een plat vlak. Daar verschilt jouw beeld nav jouw positie tov het plaatje dat meerdere lagen bevat. En daarom heb je bv vaak een bril nodig om 3D tv te kijken, zodat je die verschillende beelden verschillend ziet en jouw computer(hersens) het beeld tot één driedimensionale kan maken.


De camera`s zijn volgens mij bedoelt om een enkele persoon in 3D op te nemen.
Het beeld lijkt me echter niet gerenderd naar jouw positie tov de zuil en gewoon binnen die zuil geprojecteerd. (de camera heeft een andere kijkhoek dan de persoon die het uitlegt, maar vanaf ongeveer gelijke kijkhoek(+30 graden) is het dus wel degelijk te zien en tijdens eromheenlopen verspringt/draait de image niet mee maar is statisch.)
Ik denk dan ook dat je, als je met een groep om zo`n zuil heenstaat, gewoon het beeld hebt dat je normaal zou hebben; achterkant als je achter staat, zijkant als je links of rechts staat, etc.

Om als toepassingsvoorbeeld de auto er weer bij te slepen (die al afgeschreven werd ), biologie is natuurlijk maar één van de toepassingen.
Je zou denk ik prima een auto zo kunnen displayen en met handbewegingen de systemen kunnen laten zien in die auto. Je hebt wel een zuil nodig waar de auto in past om een 1:1 beeld te kunnen projecteren. (Afgezien van technische problemen bij een zo wijde display.)
Alleen als iedereen gaat zwaaien wordt het wel moeilijker voor de computer om dat te verwerken, het zal dan denk ik een wachtrij maken en alle bewegingen na elkaar uitvoeren, net als nu als je bv 300x op print drukt....

Ben benieuwd naar het vervolg.

[Reactie gewijzigd door Teijgetje op 22 juli 2024 22:14]

[Foxl]

Maar hoe worden de beelden die in de buis worden geprojecteerd gefilmd? Dat kan niet met eenzelfde setup lijkt me, omdat je daarmee niet compleet rondom het onderwerp kunt filmen.

[Verwijderd]

is dat net zo iets als deze techniek http://youtu.be/TGbrFmPBV0Y of is dat een enkele 3d projector ? vond dit echt een creepy filmpje