Wetenschapper maakt besturing tablet op basis van tools uit echte leven

Een wetenschapper heeft een methode gemaakt om tablets te besturen zoals tools in het echte leven, zoals gummetjes en scharen. Zijn methode werkt op een reguliere iPad en met een gewoon touchscreen, waardoor het geen eigen hardware vereist.

De methode moet het makkelijker maken om bepaalde functies die overeenkomen met die van fysieke gereedschappen te gebruiken, schrijft de onderzoeker van de Amerikaanse Carnegie Mellon-universiteit. Omdat mensen de handgreep voor bijvoorbeeld gummen al eerder hebben aangeleerd, is het makkelijk die ook te gebruiken op een touchscreen. Bij deze besturing moeten ze doen alsof ze die objecten vast hebben.

TouchTools ondersteunt zeven verschillende objecten: een bordenwisser, markeerstift, rubberen gum, meetlint, digitale camera, computermuis en een vergrootglas. De onderzoeker heeft eerst gemeten welke aanrakingen de gebaren daarvoor veroorzaakte en bouwde die ondersteuning in de software in. Sommige objecten bleken makkelijker te ontdekken dan andere, zo bleek uit een experiment. Een nadeel bij de implementatie bleek dat het touchscreen van de iPad 2 geen nagels herkent, iets dat sommige nieuwe telefoons wel kunnen herkennen.

Het is onbekend of deze technologie snel gebruikt gaat worden in commerciële producten. Vooral in apps en apparaten die bedoeld zijn voor mensen met minder computerkennis lijkt TouchTools praktisch: gebruikers hoeven geen nieuwe gebaren aan te leren om de software te besturen.

Helaas!
De video die je probeert te bekijken is niet langer beschikbaar op Tweakers.net.

Reacties (50)

[Sietse1990]

Dat is zeker wel echt gaaf! Mede omdat de spullen gewoon naast de tablet liggen die hij heeft gebruikt. De praktische nut is misschien wat minder omdat je hand ongeveer het hele scherm al in gebruik heeft. Misschien dat de spullen gebruikt kunnen worden zonder dat het type apparaat te zien is. Dus dat je met je hand op het scherm zit zonder dat de muis tevoorschijn komt en zo kunt schrollen en klikken?

[StWesleyT]

Ikzie hier ook potentie in... Echter is er alsnog een verschil, ik kan het niet perfect uitleggen, maar toch een poging:
De gebruiker houdt de digitale pen vast, terwijl hij bv de vergrootglas als het ware "virtueel" vasthoudt.
De houding van je hand is toch anders in vergelijking met het vasthouden van de pen(digitaal), en als je een stylus vasthoudt (pengreep).

Verder ziet het er natuurlijk leuk uit, maar denk ik toch dat we op een echte doorbraak moeten wachten voordat het echt nuttig is. Het ziet er een beetje laggy uit, erg grote beelden in het scherm en je hand blokkeert het ook nog (zoals je zei). Kortom is het meer een videotje wat de toekomst kan beloven in plaats van dat het echt toepasbaar is (denk ik).

Wat dat betreft denk ik dat we het meer moeten zoeken in blinde invoer met 1hand. (Bv zoals een muis, of i-drive van BMW. En dat alles multifunctioneel en zonder gekke brillen of rare handschoenen)
Zo kan je volledig ontspannen naar een scherm kijken, en toch je hand in een wat ergonomischere houding aannemen.
Een touchscreen in een auto vind ik bv ook altijd maar een gadget/gimmick. Je moet ECHT kijken naar je scherm, je blokkeert het beeld met je eigen hand die je moet uitsteken, enz enz... Anyway, laat ik maar niet teveel offtopic gaan...

[2Cent]

Voor een tablet is dit inderdaad niet erg handig omdat het te groot is, maar als we straks touchscreen whiteboards of tafels hebben zal het waarschijnlijk beter tot zijn recht komen.

[StWesleyT]

Oja, grote schermen... Heb ik nog niet eens over nagedacht. Laten we dan maar even denken: bij een groot scherm moet je er dichtbij staan. Hierbij is het (voornamelijk) niet alleen voorjezelf, ook voor andere toeschouwers (anders zou je er verder vanaf staan). Kortom, presentaties en dergelijke. Als het voorjezelf is, kan het bv voor een groot tekenproject zijn (architectuur ofzo).
Learning curve zal in theorie niet breed moeten zijn, maar je zal wel het verschil tussen een markeerstift en een tekenstift moeten maken om de functionaliteit uitgebreid te houden. In principe zou ik een rubberen gum, een pen, een stift eem vergrootglas allemaal als t zelfde vast houden. Dan krijg je de blokvormige, of bijzondere vormen. Niet iedereen houdt een meetlint hetzelfde vast, dus er zou wel een soort van uitleg moeten zijn. Dus zouden er wel al nieuwe gebaren aangeleerd moeten worden.
Uiteindelijk, als je het veel gebruikt, is natuurlijk alles te leren en ben ik nog steeds positief over deze ontwikkelingen. De echte vernieuwing zit voornamelijk in het herkennen van verschillende gebaren door het apparaat zelf.

[Reactie gewijzigd door StWesleyT op 24 juli 2024 21:46]

[engelbertus]

dat het het ziuch belemmerd is niet echt een nadeel van deze toepassing, in het echt belemmeren de pen en je hand ook het zicht.
nu is het gereedschap virtueel, en kan transparant of niet zochtbaar zijn,

op deze manier heb je altijd alle gereedschap tegelijk in je hand.wat zelfs een voordeel is ten opzicht van tastbare gereedschappen. die zoek je telkens ergens vanonder ene boek of iets dergelijks,

de nieuw te leren gebaren komen nu veel mer overeen dan de gebaren die je nu moet leren. dus ook dat lijkt me geen probleem, voor kleine schermen is het miner handig, maar het begint wel een beetje te lijken op tracking zoals bij xbox en playstation, en andere tools die je met cameras volgen...

[crackletinned]

Dan weet je niet waar je moet klikken. En waar zou je moeten klikken om de muis te laten verdwijnen?

[Sietse1990]

Dat zou dan ook geregistreerd moeten worden. Met je hand vasthouden alsof je een muis vast houdt. Dan kun je toch scroll bewegingen detecteren met een vingen in het midden, maar boven je andere vingers? Of een klik iets van het midden af. Dan zou je met een kleinere hand of een compactere grip ook een kleinere muis hebben zodat je hand niet in de weg zit.
En om de muis te laten verdwijnen, laat je toch gewoon de tablet los?
Ik zie hier zeker potentie in, maar niet in de huidige vorm. De blinde invoer zoals StWesleyT het over had lijkt me dan beter. Het is gewoon een gewenning. En als het een optie zou zijn zoals AnderNeo aangeeft, misschien een optie om het apparaat niet helemaal onzichtbaar te maken maar een opacity mee te geven?

[AnderNeo]

Lijkt me dat dit laatste gewoon mogelijk gaat zijn. Zal een vinkje zijn in de software die meegeleverd is.

[Verwijderd]

Ik vind het een rare redenering dat je oude aangeleerde manieren moet toepassen op nieuwe technologie. Als je dat doortrekt krijg je heel vreemde soortgelijke voorbeelden:

- Een loopbeweging in de auto maken om gas te geven.
- met een beweging waarmee je een filmrol oplegt een dvd aanzetten.
- Op je CD-speler zit een gekke arm die je van een steuntje op een plaat moet leggen om de CD af te spelen.
- In je e-reader zit een sensor, zodat je met een natte vinger een bladzijde om kan slaan.
- enz.

[koelpasta]

"Ik vind het een rare redenering dat je oude aangeleerde manieren moet toepassen op nieuwe technologie. Als je dat doortrekt krijg je heel vreemde soortgelijke voorbeelden:"

Het hoeft ook niet. Het gebeurt gewoon omdat mensen de dingen toepassen die ze al kennen.
En daarom is het niet nodig om het door te trekken tot in het absurde.
Veel van dit soort dingen zit al in je smartphone. Met een veegbeweging kun je iets weg laten gaan. Hoe geniaal!

En je zult je denk ik verbazen hoeveel mensen geinteresseerd zouden zijn in jouw 'analoge' CD verhaal of een boekrandsimulator

[Verwijderd]

Ik geef je gedeeltelijk gelijk... maar bij e-readers slaan we o.a. wel degelijk een bladzijde om met een veeg beweging, die redelijk overeen komt met een bladzijde omslaan.

[Vayra]

Zo raar is het niet.

Kijk bijvoorbeeld eens naar de ontwikkelingen op het gebied van OLED. We komen nu op het punt in ontwikkelingen dat dit soort technologie op veel manieren gebruikt kan worden. De flexibele OLED schermen zijn juist een perfect voorbeeld van nieuwe technologie die op een hele ouderwetse manier gebruikt gaat worden. Denk aan een OLED-agenda die je gewoon openslaat zoals een papieren agenda, en waarin je bladert met twee vingers in de hoek van het scherm bijvoorbeeld - dit zou een perfecte uitwerking zijn voor een agenda dat altijd herbruikbaar is. En dat heeft enorme charme en aantrekkingskracht juist omdat het exact hetzelfde werkt als een papieren versie.

[Verwijderd]

misschien is dit wel een leuke manier om wachtwoorden mee te gaan maken

[Deem]

Lijkt me totaal overbodig. Het blijft onnatuurlijk om net te doen alsof je het fysieke product gebruik zonder dar je het daadwerkelijk vast hebt.

[HummerHealey]

Vooral de motivatie " omdat mensen het zo gewend zijn" vind ik slecht. Toen mensen van paard en wagen naar de auto overstapte monteerde ze toch ook geen paardekont op de motorkap om dat men gewend was daar tegen aan te kijken.

[skrall]

Een paardenkop bedoel je, hoop ik? Tenzij vroeger iedereen achterstevoren op z'n paard reed

Ontopic: Leuk idee, maar het fysiek vast kunnen houden van de voorwerpen in kwestie is toch wel iets dat ik persoonlijk zou missen. De voorwerpen zorgen voor weerstand, feedback, gewicht, allerlei zaken die een touchscreen niet heeft. Vandaar dat dit naar mijn mening niet zo'n grote invloed zal hebben. Desondanks is deze ontwikkeling wel goed gevonden!

[redbullet]

paardenhoofd

Volgens mij is dit overbodig want zoiets zit onderhand al standaard op een tablet? (s pen bijv)

Wel ziet het er gaaf en mooi uit

[Verwijderd]

Nee, kont. Hij heeft het over paard en wagen

[Verwijderd]

om dat men gewend was daar tegen aan te kijken.

Hij bedoelt volgens mij dat ze van een koets naar auto zijn gegaan, en dat je als je op een koets zit tegen een paardenkont aan kijkt.

[gladius1983]

Nee dat niet. Ze monteerde een motor op een koets omdat ze dat gewend waren.

*edit* omdat ze het gebruik van een koets gewend waren

[Reactie gewijzigd door gladius1983 op 24 juli 2024 21:46]

[koelpasta]

Volgens mij zagen de eerste auto's er uit als koetsen en werden bestuurd met een roer.

[Vuikie]

Vooral de motivatie " omdat mensen het zo gewend zijn" vind ik slecht. Toen mensen van paard en wagen naar de auto overstapte monteerde ze toch ook geen paardekont op de motorkap om dat men gewend was daar tegen aan te kijken.

Nee, maar als je eens heel goed zoekt op google, dan zal je zien dat de eerste wagen wel heel veel op een koets leken!
Tuurlijk, de toen voorhanden matterialen maakte het makkelijker om zo een auto te maken, maar het maakte wel dat de functie van het apparaat duidelijk was. Met dit in het achterhoofd kan ik mij voorstellen dat dit de digibeet tablet gebruiker bepaalde functies beter leert te begrijpen.

[Reactie gewijzigd door Vuikie op 24 juli 2024 21:46]

[Fealine]

tablets te besturen zoals tools in het echte leven, zoals gummetjes en scharen

Ehm, sorry? In welke situatie zou je je tablet wilen besturen met een schaar?

[sorasuki]

bij knippen (ctrl-x)

[crackletinned]

Het lijkt erop dat de schaar al afgevallen is.

[Vayra]

Tuurlijk, ik zie de eerste aanklacht van een doorgebroken ('doorgeknipt') tablet al komen.

[Reactie gewijzigd door Vayra op 24 juli 2024 21:46]

[Qlusivenl]

heb je t filmpje wel gezien?

[Fealine]

Ja, jij ook? Nog steeds zie ik geen nut om iets te willen uitknippen met een virtuele schaar. Jij wel, dan hoor ik dat graag.

[Qlusivenl]

jep. ik heb geen schaar gezien, of heb ik echtw at gemist? wellicht gewoon dom van tweakers dat ze dat er bij hebben gezet.

[Fealine]

Het originele artikel is hierin inderdaad een stuk duidelijker; een schaar is hierin alleen gebruikt als voorbeeld van een van de vele voorwerpen die een mens kan gebruiken in zijn dagelijks leven.

Buttons, tabs, sliders, folders, and even the larger desktop metaphor all draw upon our experiences in the real world to make us comfortable and agile in the virtual one. Simultaneously, the average person can skillfully manipulate an impressive array of tools, from scissors and glue sticks to wrenches and hammers. The core idea behind TouchTools is to draw upon user familiarity and motor skill with tools from the real world, and bring them to interactive use on computers.

[Reactie gewijzigd door Fealine op 24 juli 2024 21:46]

[willseb]

Of het allemaal even prettig zal werken, blijft nog maar de vraag. Ik kan mij echter best voorstellen dat er wel iets van te maken is. Met name de de muis-interface met scroll-wheel; iets soortgelijks voor mobile-devices lijkt mij niet onhandig. Allicht als transparante variant.

[Fealine]

Met name de de muis-interface met scroll-wheel; iets soortgelijks voor mobile-devices lijkt mij niet onhandig.

Waarom moeilijk doen door met 5 vingers een muis "uit te beelden" en dan met 1 vinger loslaten en op precies de juiste plek te bewegen zodat er wordt gescrolled.

Op elke smartphone/tablet kan je gewoon met 1 vinger scrollen, zonder moeilijk te doen. Zelfde met een muisklik, gewoon 1 vinger ergens op drukken. Rechtermuisknop? Even langer indrukken dan normaal en voila, context menuutje. En dat alles met 1 vinger

[willseb]

Dat klopt. Echter; niet alle websites zijn even toegankelijk op een mobiel apparaat; vooral op kleine tablets en de telefoon. Denk aan: drop-down-menu's, scrollbare vensters in de pagina, kleine hyperlinks. Het mag best wat minder omslachtig dan in de video weergegeven, maar ik kan mij voorstellen dat iets soortgelijks handig kan zijn.

[Netrunner]

Ik probeer het nog te plaatsen, maar het lukt me niet. We zitten uit de fase van aabod-gestuurde business. We stemmen al onze diensten, ontwikkelingen en producten af op vraag-gestuurde business. Dit is aanbod gestuurd, waarom? Zal wel voor zijn afstudeeropdracht zijn geweest

[Mizgala28]

Hoe ironisch een Microsoft muis

Dat terzijde, erg leuk concept moet ik zeggen, heel duidelijk voor mensen die minder verstand hebben van de standard gebaren.

[Bloemstukje]

Ik denk dat ze hiermee een beetje te laat zijn. De mensen die geïnteresseerd zijn in een tablet hebben er al een, en dus gewend aan de huidige interface. Ik zie hiervan de toegevoegde waarde totaal niet van in.

[bonyuri]

Ik zie eerder toekomst in een product als Leap Motion: https://www.leapmotion.com/
Het is denk ik makkelijker om een vinkje aan te zetten als je wil wissen dan om te moeten herinneren wat ook al weer de beweging was...

[PegOpDeWeg]

Leuke gimmick maar geen praktisch nut. De muis alleen al is lachwekkend, half zo groot als het hele tablet en dan nog een pointer er boven zodat je 5 cm heen en weer kan. Of een loop gebruiken terwijl je al jaren kan 'pinchzoomen' om iets te vergroten. En dan moet je nog al die cryptische 'gangster vinger moves' doen om iets te krijgen wat je met een simpel menu-balkje de elementen zou kunnen selecteren binnen een halve seconde.