Eye-tracking veelbelovend voor gamende gehandicapten

Stephen Vickers, van de Britse De Montfort University, is samen met een team medeonderzoekers bezig met de ontwikkeling van eye-tracking-technologie om motorisch gehandicapten te kunnen laten gamen.

Sinds de jaren negentig van de vorige eeuw wordt er door verschillende bedrijven gewerkt aan technologie waarmee motorisch gehandicapten 2d-desktopomgevingen kunnen besturen en via on-screen toetsenborden kunnen communiceren. De muiscursor wordt met de ogen bestuurd en wanneer iemand een bepaalde tijdsperiode naar een object op het scherm kijkt wordt een muisklik gesimuleerd. Voor 3d-omgevingen en met name spellen werkt dit echter niet snel genoeg, schrijft New Scientist.

Gewone eye-tracking apparatuur zendt infrarood licht de wereld in via een aantal led'jes onderaan een monitor. Door middel van enkele in stereo geplaatst infraroodcamera's wordt bijgehouden in welke richting de ogen van de computergebruiker bewegen. Het systeem kan zo met een nauwkeurigheid van 5 millimeter bepalen waar iemand naar kijkt op het scherm. De apparatuur van Vickers doet dit alles ook, maar bevat een aantal extra mogelijkheden.

Door de ogen gedurende een kort ogenblik in een bepaalde richting buiten het beeldscherm te laten kijken kan de computergebruiker wisselen tussen bepaalde functies. In een game kan zo bijvoorbeeld de viewpoint aangepast worden of een opdracht gegeven worden aan de spelfiguur. Om de gebruiker ook enige rust te geven kan de eye-trackingfunctionaliteit ook helemaal uitgeschakeld worden door middel van een blik in een bepaalde richting.

Vickers hoopt binnen een jaar te beginnen met het uitproberen van de software in samenwerking met enkele motorisch gehandicapte gebruikers. Verwacht wordt, onder meer door Mick Donegan - die werkzaam is bij een partnerorganisatie van de Britse universiteit - dat deze software het aanzienlijk makkelijker maakt voor gehandicapten om zichzelf in 3d-werelden te uiten zodat anderen niet hoeven te merken dat ze in de 'echte' wereld een handicap hebben.

Eye-gaze interactie met World of Warcraft

Reacties (35)

[vmsw]

Ik twijfel of je met je oog net zo snel kan worden als met de muis of het toetsenbord. Ik denk echt dat dit een ontwikkeling is, bedoel voor mensen die niet anders kunnen.
Probleem is er ook: ik kijkr egelmatig over het scherm heen, gewoon om even iets te controleren: als je eye tracker gebruikt, krijg je als nadeel dat je muis (zicht/wat dan ook) gelijk met je meegaat: met als nadeel dat je personage iets doet terwijl jij alleen maar even naar je wapens wilt kijken tijdens een gevecht.

Verder is slepen etc. ook moeilijk, en ben je afhankelijk van je knipperen, en MOET je een belangrijk zintuig afstaan voor het gamen: even iets anders doen tussendoor wordt op deze manier moeilijk, gezien het feit dat je niet door kan spelen op een toetsenbord/muis op je gevoel: zoals ik nu wel doe.

Verder kan je nog steeds niet world of warcraft goed spelen: immers heb je geen toetsenbord waar je commando's op uit kan voeren, en alleen met de muis ben je sowieso al te traag, en met eye tracker dus al helemaal: al ben je nog zo getraind.

Ik vind hersen-ontwikkelingen leuker, alhoewel die ok ingewikkeld worden: zo kan ik aan iets anders denken terwijl je gamed; dan moet je opletten dat je niet perongelijk denkt aan iets anders, of je niet laat afleiden: iets wat ik nu wel kan doen terwijl ik typ. Maar dit terzijde.

[bigbadbull]

hmm, je oog bewegingen zijn heeel wat kleiner dan je hand bewegen voor muis of toetsenbord.
kortom, eens de technologie op punt staat zullen ze werken aan de snelheid en nauwkeurigheid.
En wees maar zeker dat je sneller kijkt dan dat je met je muis beweegt.
Jij zegt wel dat je je muis bedient op het gevoel.
probeer eens een knop in te drukken zonder je ogen te gebruiken ! dat gaat niet.
je stemt namelijk je hand beweging af op de plaats van de cursor en het object dat je wil selecteren.

zoals al een paar keer in de reply's gelezen je ogen scannen voortdurend het beeld en focussen zich op de belangrijkste gebieden die jij in het oog wil houden. De software zal dit er wel uitfilteren.

In mijn opinie, zal de muis voor iedereen overbodig worden, als dit goed werkt. (behalve blinden dan sorry) dit is veel keer sneller dan een muis en als de nauwkeurigheid inderdaad verder kan verbeteren dan de huidige 5mm is dit ideaal voor FPS, je ogen zien veel sneller je vijand dan dat jij daar met je muis kan op richten.

toetsenbord is een ander verhaal, Zeker voor de normale mens die in staat is blind te typen (voor hetgeen hij nodig heeft, dus niet noodzakelijk voor brieven te typen, maar WASD & Co commando's) omdat hij zijn "typ-beweging" niet moet afstemmen op het scherm.

Voor Wow hoeft dit ook niet echt een probleem te zijn als je geen beschikking hebt over een normaal keyboard, zoals het al in het artikel zelf staat : onscreen keyboard is hier een oplossing !

hoofd positie en bewegen zal ook wel verbeterd worden.
Als je je focust op een punt corrigeren je ogen van zelfs de hoofdbeweging; dit hang af van de gebruikte technologie natuurlijk, maar dit is een van de dingen die ongetwijfeld ook op punt gesteld zullen worden.

Er zitten blijkbaar ook al 'dead spots' ingebouwd om je ogen van nodige rust te voorzien, als kan ik me inbeelden dat die plaatsen persoons gebonden zijn.

Wat ik me hierbij het meeste af vraag is hoe je een muisklik deftig kan simuleren ?
3 seconden op dat punt focussen ?? lijkt mij niet ideaal , en zeker te traag.
Met de linkeroog knipperen voor linker muisklik en met de rechter voor rechts kliken ?

besturing en muis bewegen zie ik volledig zitten, klikken is een andere zaak.
Zeker als de bedoeling is om te gamen, moet dit snel en accuraat worden.
FPS is iets heel anders dan een RTS of RPG.

[!null]

Leuk om te zien dat er ook aan gehandicapten wordt gedacht. Alleen dat ene zinnetje:

om zichzelf in 3d-werelden te uiten zodat anderen niet hoeven te merken dat ze in de 'echte' wereld een handicap hebben.

Zouden gehandicapten daar echt naar op zoek zijn? Misschien wel, maar lijkt me niet echt een goeie zaak. Lijkt me dat je je dan niet echt blij bent zodra de game wordt afgesloten.
Maar goed, dat geld voor meer dingen dan alleen handicaps.

[Verwijderd]

Ik heb zelf een lichamelijke handicap wat resulteerde in het feit dat ik nooit op een 'normale fiets' kan fietsen of recht lopen. En dat merk je, vooral mensen die zoiets hun hele leven hebben merken dat veel in hun kinderjaren/jeugd.
Ik denk dan ook dat ik voor vele spreek als ik zeg dat 'wij' niets liever zouden willen dan gewoon "normaal" te zijn. Het is telkens heel vervelend om mensen te vertellen over je handicap, vaak kun je irl niet anders.

Op internet is die anoniemiteit er al (vandaar ook dat veel gehandicapten in de ICT zitten), en met bijvoorbeeld een mmorpg is er een mogelijkeid mensen te ontmoeten zonder dat je meteen met bepaalde vooroordelen zit.

En ook dat alles is weer tegenstrijdig, natuurlijk zijn gehandicapte mensen wie ze zijn en zullen zeggen zich niet te schamen voor hun handicap. Dat zeg ik zelf ook. Aan de andere kant zou zo iemand een dergelijk systeem niet willen, omdat ze niet nog meer "speciale hulp" willen..

[!null]

Ja ik kan het op deze manier ook zeker wel begrijpen, dat je tenminste iets kunt doen waarbij het niet uitmaakt.
Ik doelde meer op een soort van ontvluchtingsgedrag. Daar hoef je geen handicap voor te hebben, daar kun je ook een heel onzeker iemand voor zijn (door bijvoorbeeld puberteit of overgewicht, ik noem maar wat), dan lekker het internet op want daar ben je lekker anoniem en ziet niemand je. Lijkt me niet echt een oplossing, want dan voel je je slecht zodra de computer uitgaat. (die zal dan ook niet vaak uit gaan etc)
Niet dat alle gehandicapten daarvoor gaan gamen, ik viel alleen over die zin.

[Chip.]

Nou ik kan je vertellen ik werk op een gehandicapten instelling en daar zitten ook knullen van 20/30 jaar die WOW spelen vond het eerst ook raar maar zij spelen ook online spelletjes hoor.

[!null]

Natuurlijk, waarom zouden gehandicapten anders zijn?
het gaat mij meer om de reden, die in dit artikel gesuggereerd wordt.

[Verwijderd]

Juist wel, alle gehandicapten die ik ken wouden juist NIET een voorkeurspositie krijgen, of uitgezonderd worden, en dat kunnen ze hiermee.

Geweldige ontwikkeling, de nauwkeurigheid mag nog wel iets verbeterd worden, maar het is een stap in de goede richting.

[Sebastiaan_2005]

Ik denk dat het in het begin heel onwennig is maar dat je het snel leert. Op een gegeven moment wordt het net zo makkelijk als met je muis denk ik.

[Docho]

Hhmmm, ik ga je mening zeker niet volledig afbreken, aangezien de kans inderdaad groot is dat je 'eraan went' of 'er leert mee te werken'.
Toch wil ik erop wijzen dat we zelf vaak onbewust met onze ogen bewegen en dat we dat eigenlijk ook continu doen. In tegenstelling tot wat sommigen zouden denken hebben mensen nogal slechte ogen (relatief natuurlijk) aangezien alleen maar een héél klein stukje van wat je ziet ook echt duidelijk is. (en nog heel wat andere redenen zoals onze blinde vlek en de vele oneffenheden binnen onze ogen, maar die doen hier niet ter zake). Aangezien we zo 'slecht zien' lost de mens dit op door zich snel na elkaar op een paar punten te focussen met de ogen om zo een compleet beeld van wat we zien te kunnen bevatten (of met andere woorden: een compleet beeld van de situatie samen te stellen). Hoewel we dit proces zeker kunnen beïnvloeden (als je bv. aan het lezen bent), zijn die oogbewegingen toch soms moeilijk onder controle te houden ...

[Verwijderd]

Ik weet uit ervaring dat wanneer je bepaalde functie's verliest je hersenen een nieuwe zintuig(en) ontwikkelen. De balans bij dwarslaesie patienten veranderd veelal, daar waar het oorspronkelijk ligt in je gehoor komt bij lage laesie's het te liggen in je rug.

Tijdens de revalidatie periode word je getrained om te balanceren op 2 wielen in je rolstoel en het uiterste valpunt te "herkennen". Door de trainign nemen je hersenen dit automatisch over. Vergeet niet, de hersenen hebben een groot adaptief vermogen. Gebieden die niet meer relevant zijn qua werking nemen een andere functie aan.

Hoge dwarslaesie's die vaak ook haast geen functie meer in hun armen hebben kunnen uiterst nauwkeurig met een laser richten en doen dat ook vrij snel. Wel gegeven is een feit dat je ook moet willen, ik heb jonge jongens gekend die al vroeg hadden opgegeven, veelal omdat ze niet aan verwerken toekomen.

Het is mooi om te zien dat er wat gedaan word voor deze groep in de categorie ontspanning, omdat het voorheen veelal bleef bij muziek en films. Gamen is een goeie afleiding en het feit dat je nu weer iets zelf kunt "besturen' zal voor velen een verademing zijn. Recreatie genoeg en te over maar dit was toch nog wel steeds een groot gemis

[Verwijderd]

Met software zijn die oneffenheden er natuurlijk (vrij eenvoudig?) uit te filteren. Volgens mij doen muizen, trackpads en touchscreens (iphone bijv. ivm multitouch) dit namelijk al doen.

[Verwijderd]

Toen we vijftien jaar geleden ofzo muizen gingen gebruiken moesten we er ook erg aan wennen. Ik kan me nog vaag die eerste momenten herinneren. Ging niet echt gemakkelijk. Gewoon een kwestie van wennen. Hopelijk hou je geen tik aan over.

[l0rien]

Dat het nut heeft voor mensen die niet anders kunnen staat buiten kijf. Of zoiets echter ook toegepast gaat worden voor 'normaal valide' mensen vraag ik met sterk af. Veel focussen met je ogen is vaak al snel heel vermoeiend.

Een stap verder is de BMI(Brain Machine Interface). Je wilt echter niet weten hoe 'moe' je wordt om constant te moeten 'denken' en focussen op wat er moet gebeuren. Even uitfaseren is er niet bij en dus houd je het ook nooit lang achter een stuk vol. De mens staat namelijk meer dan 80% van de tijd in de automatische piloot, ook terwijl je aan het surfen bent en zelfs bij heel veel gamen ga je zaken automatisch doen. Bewust iets doen wat je eigenlijk automatisch doet is zeer inspannend en vertraagd zelfs vorderingen.

[Verwijderd]

Mooie ontwikkeling!
Na de demo van de wii-fit moest ik ook al denken aan het feit dat zoiets best in te zetten zou kunnen zijn als voetbesturing.

Nu nog zoiets betaalbaar maken dat het ook werkelijk gebruikt kan worden voor spelletjes.

[Zero Grav]

dat deze software het aanzienlijk makkelijker maakt voor gehandicapten om zichzelf in 3d-werelden te uiten zodat anderen niet hoeven te merken dat ze in de 'echte' wereld een handicap hebben.

Deze zin doet me een beetje denken aan de film BenX waarin een licht autistische jongen zichzelf ook alleen kan uitdrukken in het spel ArchLord en niet in het echte leven.

Toch weet ik niet of hier veel interesse in is, een deel van het spelen van een spel is toch het fysiek controleren van de loop ervan. Dit met je ogen doen lijkt me zo.. passief en vrij saai. Al is dit natuurlijk een welkome manier voor mensen met een lichamelijke handicap om toch te kunnen gamen.

[Verwijderd]

Ik vraag me een aantal dingen af:

1) Als je een tekst leest zit dat muis niet telkens over het woord heen?
2) Is het schadelijk of irriteerd dat niet in je ogen?
3) Stel je krijgt keuzevenster voor je neus. Je kijkt naar de optie "nee" en net voordat je klikt, kijk je per ongeluk op "ja".
4) Wat als je scheel kijkt?
5) Wat als je een bril of lens draagt?
6) Hoe zit het met je zithouding? De keer leun je voorover de ander keer achterover. Die gast op dat filmpje zit als een stijve hark voor het beeldbuis.
7) ...

[Xthemes.us]

1) Als je een tekst leest zit dat muis niet telkens over het woord heen?

Je kon de modus veranderen door naar een andere punt buiten het scherm te kijken, lijkt me dat er één bij zit die je rustig je tekst laat lezen (in het filmpje heeft de persoon ook z'n questlog even open bij 2m15s, neem aan dat hij ook de quest aan het lezen was)

4) Wat als je scheel kijkt?

Het kalibreren zet waarschijnlijk je 'cursor' op het juiste punt ten opzichte van het punt waar je naar kijkt.

3) Stel je krijgt keuzevenster voor je neus. Je kijkt naar de optie "nee" en net voordat je klikt, kijk je per ongeluk op "ja".

Gewenning? Ik klik ook wel eens het verkeerde knopje bij de installatie van programma's omdat ik er te snel doorheen klik en gewoon klik waar ik verwacht dat iets staat i.p.v. het te lezen

[Verwijderd]

Interessante ontwikkeling!

Dit is denk ik ook belangrijk met het oog op toekomstige ontwikkelingen. Eigenlijk wordt nu alleen de software nog maar getest met de beschreven/getoonde mogelijkheden.
Dat gamen zo mogelijk wordt is op zich niet zo interessant, het gaat er denk ik ook om dat er een andere interface-techniek ontwikkeld wordt.

Een aantal jaar geleden is er een prof (weet zijn naam even niet) geweest die alleen in een rolstoel zat, niet kon praten en alles alleen kon bedienen met een soort potlood, bevestigd aan zijn hoofd. Daarbij was hij ook nog licht spastisch, zodat een van elke 10 hits juist was. Lijkt me erg vermoeiend.
Toch is deze man cum laude geslaagd en hij werd vergeleken met Einstein...
Juist voor mensen in zo'n situatie een werkbare interface bedenken, bouwen en testen is hier de uitdaging, en ik denk dat je dit ook in dit licht moet zien.

[lvmeijer]

Ik heb tijdens de laatste CeBIT in Hannover demo's gezien van het bedrijf Tobii. Dit bedrijf is zeer succesvol met hun uitstekende eye-tracking technologie. Ze verkopen momenteel hoofdzakelijk aan marktonderzoekers/marketingbureaus en gehandicapten. De prijs is erg hoog, maar hopelijk breekt het in de toekomst door in de consumentenmarkt.

[Amanoo]

Ik heb vaak problemen met de camerastand in spellen. Met dat er ook nog bij worden het te veel knopjes die ik tegelijk moet in drukken. Dan lijkt mij dit ook wel handig. Maar vast ook wel gigantisch duur.