HTC brengt Facial Tracker voor Vive-brillen uit die gezichtsbewegingen herkent

HTC heeft twee nieuwe trackers uitgebracht voor de Vive. De Vive Tracker 3.0 is een opvolger van de bestaande tracker, maar er komt ook een Facial tracker voor het volgen van gezichtsbewegingen.

De Facial Tracker is een nieuw accessoire voor de Vive-headset. Die komt onderaan de bril te hangen en is gericht op het gezicht. De tracker kan op die manier gezichtsuitdrukkingen en mondbewegingen volgen. HTC zegt dat het mogelijk is 38 verschillende gezichtsbewegingen te volgen rondom de lippen, kaak, tanden, tong, wangen en kin van een gebruiker. Op die manier is het bijvoorbeeld mogelijk om iemand digitale avatar realistisch te laten spreken.

De tracker heeft een een tracking rate van 60Hz en een latency van 'onder de 10 milliseconden', al specificeert HTC niet precies om hoeveel het gaat. Het apparaat maakt gebruik van twee camera's en een infraroodsensor om beelden in het donker op te nemen, en wordt aangesloten op de bril met een USB-C-connector. HTC heeft een aparte SDK uitgebracht voor het apparaat.

HTC Facial Tracker

HTC heeft daarnaast ook een nieuwe Vive Tracker uitgebracht. De Tracker 3.0 is een derde kleiner en 15 procent lichter dan zijn voorganger, en heeft een langere accuduur. De batterij moet 75 procent langer meegaan dan het eerdere model. De nieuwe tracker is compatibel met alle steamVR-headsets en heeft een field of view van 240 graden. De Facial Tracker en de nieuwe Tracker 3.0 kosten allebei 139 euro.

HTC Tracker

Door Tijs Hofmans

Nieuwscoördinator

11-03-2021 • 10:20

27

Reacties (27)

Sorteer op:

Weergave:

Goed om te vermelden is dat (zover de website het aangeeft) de Facial Tracker alleen voor de Vive PRO beschikbaar is, niet voor andere Vive modellen (Cosmos / Non-Pro Vive).

Gaaf stukje techniek, maar ik betwijfel of hier veel consumenten gebruik van gaan maken, ik zal in dit geval toch de voorkeur geven aan een andere headset (vive pro is mooi, maar al niet meer de meest comfortabele , betaalbare, of scherpe headset).
Het lijkt mij dat hierbij vooral de Prosumer en Content-Creator market wordt aangeroepen. Bedrijven die de Vive-Eye gebruiken, en extra facial tracking goed kunnen gebruiken, of mensen met een Vive-Pro die graag hun VRChat ervaring willen verruimen.
Zou mooi zijn als de Facial Tracker ook volledig los van de Vive kan werken. Zie een wereld voor VFX-artiesten daarin.
Is daar niet al lang iets voor?
Jazeker:
Voor consumenten speel dingetjes: https://www.spaceo.ca/best-face-recognition-apps/
En voor game developers: https://www.unrealengine....apture-with-unreal-engine

Corridor Digital (leuke gasten op youtube) maken daar ook al veelvuldig gebruik van om gave content mee te maken.
Zeker wel, of tenminste dat is mijn aanname daarin. Voorbeeld welke ik zo 1, 2, 3, bedenk zijn de iPhones die hebben een Ani(mal)moji welke je gezicht trackt en omzet naar een kip, hond, etc. En vermeen dat met de 12 Pro je zelfs Lidar mogelijkheden hebt, als je die ruwe data (face-mesh met bewegingen) kan krijgen/uitdraaien kom je ook al ver. Maar of er echt iets 'dedicated' daarvoor is weet ik niet.
Niet in het zelfde prijsklasse, maar als je het over VFX wereld hebt ga ik ook vanuit dat ze wat meer geld hebben. Buiten vr om kan je met moderne iPhone hetzelfde doen, zelfs meer want het kan je hele gezicht tracken. Er zijn daadwerkelijk meerdere studios die dit gebruiken als een low-budged mocap alternatief in combinatie met de Unreal Engine: https://www.youtube.com/watch?v=lXZhgkNFGfM https://docs.unrealengine...R/FaceARSample/index.html
Nee dat doet die standaard dus niet, werkt zelfs alleen met de (eye)pro headsets, dus niet de originele of de cosmos.
Leuk idee alleen zit het op een ongemakkelijke plek; hopelijk is het een beetje sterk want je controller gaat er zeker vaak tegenaan botsen.
Dan ben ik wel benieuwd hoe jij gamet ;) Ook op mijn fanatiekste momenten komt mijn controller niet echt in de buurt van mijn kin...
Mijn Steam controller op PC niet, maar je hebt bij VR toch veel spellen waar je bijv. kan eten of drinken door die dingen bij je gezicht te houden, en spellen waar je 'echt' over je wapen heen kijkt of een verrekijker bij je oog houdt. In die situaties lijkt het mij toch wel erg lastig als er iets onder je bril hangt.
Dat denk ik ook inderdaad, of met een beetje hectisch boogschieten...
Dus moet of makkelijk weg te draaien zijn of makkelijk verwijderbaar, zodat het daar alleen hangt als je het nodig hebt.
Ik heb wel paar keer mijn vr-head gestoten met een controller. :) Tijdens het gamen heb je niet door hoever je headset van je hoofd uitsteekt. Als je een snelle beweging moet maken om net dat blokje in beat saber te pakken gaat dat puur vanuit je reflex en denk je er niet bij na.
De meesten hebben binnen een paar minuten niet eens meer in de gaten waar ze überhaupt zijn.
Ik heb wel eens mijn hoofd dwars door mijn betonnen vloer willen steken in Budget Cuts. De Vive en mijn hoofd vonden dat zeker niet leuk.
En ik ben zeker niet de enige die dat probleem had.
Leuk voor VRchat
Blijft leuk om te zien met wat voor kleine dingetjes ze aankomen waardoor VR nog leuker word.
140 euro voor een tracker is nog wel aardig aan de prijs. De meeste games waar je dat kunt gebruiken, zijn toch nog niet echt het minigame stadium voorbij (ook omdat er dus niet veel mensen met die dingen zijn). Ik vraag me af of het niet meer zin heeft die prijzen wat omlaag te gooien om ook daadwerkelijk vraag te creëren. Ik kan me voorstellen dat je zoiets prima kunt gebruiken voor bv voetbaltraining of iets dergelijks. Maar voor dit soort prijzen gaat hem dat niet worden (ook omdat ze nog wel eens stuk kunnen gaan).
De prijs is best overdreven hoog maar dit komt omdat er bijna geen concurrentie is.
Gelukkig zijn er ook open-source alternatieven:
https://hivetracker.github.io/
Wanneer Facebook dit introduceert voor de nieuwe Quest zal een (terechte) storm aan privacy issues opkomen. Terwijl er bij partijen als HTC er blijkbaar niet over gerept word.
HTC heeft wel een heel ander verdienmodel.
Klopt, maar dat betekent niet dat je nu wel weet wat htc daarmee doet, kan doen, of kan gaan doen
Klopt, maar dat betekent dat je nu wel weet wat facebook daarmee doet, zal doen, en kan gaan doen ;)
Ik heb geen HTV headset/facial tracker dus ik heb de EULA niet gelezen. Dus inderdaad, ik weet niet wat HTC ermee gaat doen, maar als je de EULA leest kun je erachter komen (ervan uitgaande dat ze niet liegen).

Aan de andere kant, wat @ltcom al zegt, bij Facebook weet je zeker dat ze die data gaan harvesten.
Wat betreft de oculus-brand heeft Facebook gewoon vergelijkbaar verdienmodel als HTC, hardware en software.
Groot verschil is dat HTC geen social media platformen bezit waar de gehele bevolking op zit. Maar goed had je vast zelf kunnen bedenken.
En binnen de kortste keren heeft ook de politie een aangepast model hiervan. Want het is mogelijk om met behulp van die camera en iets betere software leugens te ontdekken bij een verhoor aan de hand van gezichtsuitdrukkingen. https://www.businessinsid...r-zijn-gezicht-te-kijken/
Leuk voor pornoapplicaties. Het heeft de naam in ieder geval al mee. Ik zie zeker veel mogelijkheden.
Jammer dat Vive exclusief maakt voor Vive bril. Typisch om natuurlijk meer Vive Pro brillen te kunnen verkopen. Gelukkig genoeg 3rd party alternatieven voor anderen, bijvoorbeeld iPhone face tracking doet het ook.

Tenzij iemand weet facial tracker aan te passen voor anderen... het werkt namelijk via USB-C als ik goed heb. Index heeft USB poort, dus zou hieraan kunnen verbinden.

En ook al maakt Vive nieuwere trackers die stuk kleiner zijn, het prijs is nog steeds even hoog. Tundra komt ook eraan en die is nog kleiner en goedkoper. De project gaat binnenkort van start.

Verder heeft iemand met reflectoren ook body tracking gemaakt met infrarood gevoelige camera met IR leds. Deze werkt 180 graden, maar persoon beweert later 360 versie te kunnen maken.

Op dit item kan niet meer gereageerd worden.