HP Reverb G2 Omnicept-headset heeft sensoren die emoties en hartslag meten

HP brengt volgend jaar de Reverb G2 Omnicept Edition uit. Dat is een VR-headset met camera's en sensoren, die gezichtsuitdrukkingen en de hartslag van de gebruiker meten. Ontwikkelaars kunnen dat volgens HP inzetten om betere VR-ervaringen te maken.

De Omnicept Edition is gebaseerd op de bestaande HP Reverb G2, die in samenwerking met Valve en Microsoft is ontwikkeld en is uitgerust met twee lcd's van 2160x2160 pixels per oog. Het nieuwe model heeft aan de binnenkant sensoren en vier camera's. Die meten de hartslag, kijken naar gezichtsuitdrukking en leggen oogbewegingen vast. De bril analyseert ook de pupilgrootte van de gebruiker.

HP presenteert ook een Omnicept-ontwikkelplatform voor VR-ervaringen waarbij de data van de extra sensoren wordt gebruikt. Ontwikkelaars die dit commercieel willen gebruiken, moeten 2 procent van de omzet afstaan. Het platform werkt op Windows en met SteamVR.

Volgens HP werkt de Omnicept-software met machinelearning om realtime de data te analyseren. HP stelt dat dit gebruikt kan worden voor zakelijke toepassingen. Zo zou bijvoorbeeld de cognitieve belasting tijdens een bepaalde werkzaamheid gemeten kunnen worden.

De extra sensordata zou ook voor VR-games en -ervaringen van pas kunnen komen. Geavanceerde oogtracking maakt foveated rendering mogelijk, waarbij alleen het gedeelte van het scherm waar de gebruiker op focust in hoge kwaliteit gerenderd hoeft te worden. HP brengt de bril volgend jaar uit voor een nog onbekende prijs.

Reacties (34)

[ourplayground]

Betekend dit dat emoties die gelezen worden ook in games gebruikt kunnen worden om in multiplayer games de emotie van de persoon te kunnen zien in game?

[Tummie555]

Daar is het wel voor bedoeld. En om spellen te laten "reageren" op de data/emoties van de speler. Voor nu worden vooral zakelijke toepassingen bedacht (lees: trainen/opleiden).

Nog kleine kanttekening voor iedereen die telkens VR in adem met Facebook login en privacyzorgen noemt, de data die HP verzameld wordt volledig volgens GDPR (AVG) verwerkt en opgeslagen.

P.s. hier willen ze naar toe. Dit filmpje is echter nog vreemder, want dit werkt puur met algoritmes, maar je begrijpt het idee. https://youtu.be/OK_BIQPiCEk

[Reactie gewijzigd door Tummie555 op 24 juli 2024 21:44]

[Horatius]

Nog kleine kanttekening voor iedereen die telkens VR in adem met Facebook login en privacyzorgen noemt, de data die HP verzameld wordt volledig volgens GDPR (AVG) verwerkt en opgeslagen.

Oftewel ze houden zich aan de wet?

Facebook verzamelt, verwerkt en slaat hun data ook via de GDPR op, anders zou daar nu de politie op de stoep staan omdat ze de wet overtreden.

Het zou bizar zijn als ze dat niet zouden doen want dan kan je dat gelijkt rapporteren bij de AP. Dus nee dat is geen kleine kanttekening dat is gewoon de wet.

Kleine kanttekening, HP doet ook niet aan witwassen.

[ikt]

Als er een SDK voor is, kan een game-developer ervoor kiezen om dat erin te zetten. Kan leuk zijn voor VRChat of iets dergelijks

[shufflez]

Tada! https://developers.hp.com/xr/omnicept

[SuperDre]

Dat is dus wel de bedoeling, ook dat die dus je character lipsync kan laten doen door de camera die je mond tracked.

[er0mess]

Het nieuwe model heeft aan de binnenkant sensoren en vier camera's. Die meten de hartslag, kijken naar gezichtsuitdrukking en leggen oogbewegingen vast.

Ik vind het raar dat gezichtsuitdrukking wordt genoemd. Eerder ooguitdrukking aangezien de headset, en sensoren, alleen dat deel bedekken en niet het hele gezicht.

[JohnnieWbl]

Zoals te zien is op de foto's van de HMD en in het schematisch overzicht van de sensoren gebruik de Omnicept een "Face Cam" voor het onderste gedeelte van het gezicht, waaruit mondbewegingen te registreren zijn.

[er0mess]

Ik zie het.

Dan is het wat ongelukkig geschreven.

Het nieuwe model heeft aan de binnenkant sensoren en vier camera's.

Dit leest alsof de camera’s zich ook aan de binnenkant bevinden.

[Thodekroo]

Nee er zit aan de onderkant van de HMD ook een camera die op de mond gericht is.

Edit: laat maar, is hierboven al genoemd

[Reactie gewijzigd door Thodekroo op 24 juli 2024 21:44]

[SuperDre]

Er zit ook een camera op die je mond tracked. Die zit aan de voorkant onderaan.

[Verwijderd]

Ben benieuwd of je dit ook fatsoenlijk kunt gebruiken zonder de cloud.
Qua hardware lijkt me dit namelijk een prima bril!

Leuk ook, als in een game je hartslag te hoog oploopt gaat ie naar "coffee break", waarna je hartslag helemaal door het dak is

[sys64738]

Hier kun je natuurlijke geweldige dingen mee doen. In Resident Evil kun je bv kijken hoe eng je speler het vindt. Niet eng? Dan kan er nog wel een schepje bovenop. En je zou er ook het hele verhaal mee kunnen sturen.

Het is alleen wel gevoelige informatie (persoonlijker dan input met muis/keyboard of huidige VR brillen). Dus goed uitkijken wat er mee gedaan wordt. Zo lang het alleen lokaal gebruikt wordt, lijkt me dat prima maar als er apps/games komen die het naar servers gaan sturen (zelfs met goede bedoelingen) wordt het uitkijken geblazen.

[Jaïr.exe]

Hoop niet dat er dan een bug in de emotiemeting zit. Ben je al extreem bang en maakt het spel de ervaring nóg erger hahaha.

[SFDerp]

Gaaf om te zien dat HP zoveel investeert in VR.
Dit soort technieken zijn nog niet bedoeld voor het grote publiek uiteraard, maar dit geeft wel aan dat technieken zoals foveated rendering langzaam hun weg gaan vinden naar games en consumer headsets.
Top !

[SuperDre]

Ben benieuwd hoeveel duurder deze versie is, want vaak maakt eyetracking alleen al een headset zo'n 200 euro duurder, dus nog veel meer sensoren zou me niet verbazen als deze ruim de 1000 euro voorbij gaat schieten.. Daarom denk ik ook dat deze meer op de zakelijke markt gericht is dan voorlopig op consumer.

[exaltion]

Zolang er geen Facebook login nodig is vind ik het allemaal prima. Ben benieuwd hoe developers dit in games gaan toepassen.

[Alxndr]

Ik vind persoonlijk het meten van emoties en hartslag toch wel een veel grotere inbreuk op mijn privacy dan dat mijn, al meer dan een jaar niet geüpdate, Facebook data kan doen.

Ongeacht mijn precieze standpunt op wat bedrijven kunnen/mogen doen met je data, is wat ik lees/klik/deel van een hele andere orde dan mijn fysieke reactie daarop. Het klinkt leuk, een spelletje of professioneel stukje software dynamisch aanpassen op basis van je reactie (je kunt een spel dan heel precies minder of meer spannend of instructies veel begrijpelijker maken afhankelijk van je instellingen), maar hiermee maak je wel de weg vrij voor manipulatie. Als je iemands triggers kent, kun je daar heel smerig misbruik van gaan maken.

Als er voor deze technieken niet een hele keiharde opt-in ingebouwd is, zou ik hem in ieder geval nooit op mijn hoofd zetten.

edit: typos/stijlfouten

[Reactie gewijzigd door Alxndr op 24 juli 2024 21:44]

[core_dump]

Ik zie juist een grote toepassing voor deze headset in de therapeutische hoek waarbij mensen met traumas en PTSD een op maat gemaakte en interactieve therapie kunnen krijgen.

Niet alles wordt gemaakt om jouw privacy te schenden.

[RaptorGsus]

Ik ben zelf echt een te grote schijtluis, maar een horrorgame die events baseerd op de gemoedstoestand van de speler lijkt mij conceptueel echt enorm gaaf. Afhankelijk van wat er precies gemeten kan worden zou je zelfs de moeilijkheidsgraad kunnen aanpassen aan de speler zodat je niet gefrustreerd/verveeld raakt o.i.d.

Het aller-simpelste wat ik mij zo snel kan bedenken is een fitnessgame die de intensiteit aanpast op basis van je hartslag zodat je in de "vetverbrandingszone" blijft zitten. Of juist dat je hartslag niet te hoog steigt (denk aan revaliderende hartpatienten).

Daarnaast heb je natuurlijk de sociale aspecten. Je zou in-game avatars bijvoorbeeld kunnen matchen met de emotie van de speler.

[Reactie gewijzigd door RaptorGsus op 24 juli 2024 21:44]

[Bose321]

Sorry, maar waarom zou er voor deze headset een Facebook account nodig zijn?

[ourplayground]

Dit is uiteraard gerefereerd aan de rift s, die niet meer gemaakt wordt.

[Rann]

Uiteraard gerefereerd aan de Rift S, niet dus!
Dit wordt gerefereerd naar de laatste wijziging in het beleid dat voor de nieuwe Occulus accounts een verplicht facebook account aangemaakt moet worden..

[ourplayground]

Ah, nieuw nieuws voor mij, thanks!

[Clemens123]

Is niet het geval, is gewoon een verwijzing naar de Oculus headsets waar dit wel vereist is.

[exaltion]

Ik maakte een vergelijking met de Oculus headsets. Deze headset heeft voor zover ik weet geen Facebook login.

[junkchaser]

juist zijn punt ... het is niet nodig en dat is een extra positief punt tegenwoordig: geen facebook!

[Travelan]

Waarom heet dit ding Reverb? Wat heeft galm te maken met dit ding? Of vinden ze het bij de marketingafdeling gewoon een cool woord?

[SeenD]

Het idee is dat virtual reality een galm van de werkelijkheid is.

[Tummie555]

Volgens mij heet die officieel: HP Reverb G2 omnicept

[SuperDre]

Tja, waarom noemen ze de Oculus Quest, Quest, of waarom noemen de de Oculus Rift, Rift...

[PuckStar]

Rift zat wel een gedachte achter. Dit schreef de inventor Palmer Luckey: "I based it on the idea that the HMD creates a rift between the real world and the virtual world, though I have to admit that it is pretty silly."

[Tao]

"You will be assimilated".... als deze ontwikkeling steeds verder doorgaat.