Studenten voorzien Macbook van touchscreen met behulp van spiegeltje

Een aantal MIT-studenten heeft een Macbook voorzien van een rudimentair touchscreen door gebruik te maken van een klein spiegeltje, dat in een hoek voor de webcam wordt geplaatst. De bijbehorende software hebben ze ook gepubliceerd.

De aanpassing zou ongeveer een dollar kosten, zo schrijven de studenten Anish Athalye, Kevin Kwok, Guillermo Webster en Logan Engstrom. Hun project, dat de naam Project Sistine draagt en het resultaat is van 16 uur werk, maakt gebruik van de reflectie van het spiegelende Macbook-scherm. Door een spiegel in de juiste hoek te plaatsen, kan hun software met behulp van de ingebouwde webcam de positie van de vinger bepalen en 'zien' of deze het scherm aanraakt. De studenten hebben een video gepubliceerd.

De code voor hun 'hacky' vingerdetectiealgoritme hebben ze op GitHub vrijgegeven. Om ervan gebruik te maken moet er eerst een kalibratieproces doorlopen worden om een projectiematrix voor schermcoördinaten op te stellen. In hun prototype zetten de studenten hun aanrakingen om in muisbewegingen, waardoor ze bijvoorbeeld vormen kunnen tekenen of kunnen scrollen. Een webcam met hogere resolutie en een gebogen spiegel voor het vastleggen van het hele scherm zouden tot betere resultaten leiden, vermelden ze nog.

De spiegel voor de webcam

Reacties (54)

Remoteworks 5 april 2018 21:29

Geinig. Zou leuk zijn als je met een losse webcam ook andere objecten (bijv tafel/muur/muismat) als touchscreen kunt gebruiken.

Mar2zz @Remoteworks • 5 april 2018 22:20

Moet kunnen met dezelfde techniek, maar dan moet je gokken waar knoppen zitten. Een raster mappen is voldoende. Ik zie wel een toepassing dat je op deze manier een touchscreen kan maken van geprojecteerd beeld.

Finraziel

@Mar2zz • 6 april 2018 07:54

Nee, dat gaat niet op dezelfde manier. Je hebt dan een camera nodig die diepte kan zien. Het probleem is dat je dan niet het verschil ziet tussen je vinger een stukje van de muur afhouden, of de muur aanraken een stukje verder van de camera af.
Bij het spiegelende laptop scherm lossen ze dat op doordat ze zowel de echte vinger als de reflectie er van detecteren. Als die elkaar raken, dan raak je het scherm dus aan.

Mar2zz @Finraziel • 6 april 2018 10:36

Oh ja daar had ik niet aan gedacht. Maar dan zou je een beweging als klik kunnen registreren. Bijvoorbeeld vuist is klik, lang vuist is vasthouden zodat je kunt slepen en scrollen.

Stroper @Remoteworks • 5 april 2018 22:09

Zoiets als een keybo, dus?

https://www.serafimshop.com/products/serafim-keybo

StanNL @Stroper • 6 april 2018 07:16

Her doet mij eerder denken aan een Sony Xperia Touch, een apparaat dat verrassend weinig media-aandacht krijgt eigenlijk.

Remoteworks @Stroper • 5 april 2018 22:15

Thnx. Die kende ik nog niet.

darknessblade @DohnJoe • 6 april 2018 16:03

veel producten zijn even goede qualiteit.

dit had je ook met de figdet cube, de china versies zijn eigenlijk iedentiek aan het origineel.
alleen omdat er bv 1 clicker knopje niet werkt van een test van een grotere batch, wordt die batch afgekeurdt en verkocht aan de hoogste bieder.

die kijkt dan van welke wel goed werken en verkoop deze dan voor nog goedkoper.

twizzle @Remoteworks • 5 april 2018 22:31

Doet me denken aan die interactieve whiteboards met behulp van kinects

darknessblade @twizzle • 6 april 2018 00:47

of de originele digiborden die scholen gebruikte.
wat eigenlijk gewoon een webcam was met beamer.

nu heb je 80" schermen met digitizer.

Ruw ER 5 april 2018 21:57

Zou dit ook werken als apple een mat scherm ipv een glanzend scherm zou gebruiken?
(Los van de voor en nadelen van een mat scherm ten opzichte van een glanzend scherm)

TheToolGuy @Ruw ER • 6 april 2018 00:15

quote: "(Los van de voor en nadelen van een mat scherm ten opzichte van een glanzend scherm)"

/offtopic
Enige voordeel van een glanzend scherm is dat je altijd een dure spiegel bij de hand hebt.
En alle verlichting etc. om je heen maakt het zicht op zo'n scherm er ook niets beter op ...
Bij een mat scherm kan ik alleen maar voordelen bedenken, geen nadelen ...

/ontopic
Op een mat scherm moet dit ook wel werken, aangezien het spiegeltje vlak over het "spiegel"-scherm heen kijkt en dus iets herkent in de baan van het zichtveld ...

Finraziel

@TheToolGuy • 6 april 2018 07:49

Kleuren zijn mooier op glanzende schermen, zolang je maar in een omgeving zit waar je geen last van reflecties hebt. Dat verklaart ook waarom fabrikanten er zo dol op zijn. Zolang je ze in de juiste omgeving verkoopt ziet het er beter uit voor de klant.

En nee dit gaat niet werken op een mat scherm. Het probleem is dat de software dan niet het verschil kan zien tussen het scherm werkelijk aanraken of er een stukje boven hangen (wat dan gezien kan worden als een aanraking een stukje naar beneden).

[Reactie gewijzigd door Finraziel op 26 juli 2024 08:21]

Xerxes249 @Ruw ER • 5 april 2018 22:15

Ja, heeft niks met het scherm zelf te maken, de camera ziet de vinger en mapt dat naar een positie op het scherm dankzij zn kalibratie

Ruw ER @Xerxes249 • 5 april 2018 22:31

Heh maar in het artikel staat dat er gebruik wordt gemaakt van de reflectie van het spiegelende scherm van de macbook.

[Reactie gewijzigd door Ruw ER op 26 juli 2024 08:21]

lololig @Ruw ER • 5 april 2018 22:35

De spiegeling zal gebruikt worden om te checken of je het scherm aanraakt. Als je 2 vinger toppen (je echte vinger en de spiegeling) heel dicht bij elkaar ziet kun je uitgaan van een aanraking.
Bij een niet spiegelend scherm gaat dat denk ik best een stukje lastiger worden omdat je dan moet checken met een andere referentie

Clemens123 @lololig • 5 april 2018 23:27

en bovendien zijn de meeste matte scermen (zonder glas ervoor) niet geschikt om aan te raken, omdat ze binnen de kortste keren vuil worden.

[Reactie gewijzigd door Clemens123 op 26 juli 2024 08:21]

ToolBee 5 april 2018 21:24

De cameralens is wellicht een beetje fish-eye-achtig, en heeft een grote kijkhoek?
(just my 2 cents...)

miicker @ToolBee • 5 april 2018 21:35

Ze gebruiken gewoon de ingebouwde webcam, lijkt me niet dat dit een fish eye camera is.

ToolBee @miicker • 5 april 2018 21:49

Ey, geluidsman hier. Geen camera man!

Weet ik hoe dat heet. Een lens met vergrote kijkhoek zeg maar? Of zo...

Boost9898 @ToolBee • 5 april 2018 22:45

Ja klopt, je hebt het in principe goed. Een fish-eye-lens is meestal ook een overdreven groothoeklens. Een groothoek/wide angle lens is eigenlijk gewoon het tegenovergestelde van een telelens.

ToolBee @Boost9898 • 5 april 2018 22:52

Telelens weet ik wel! Goed voor close-ups van meeëters en neusharen!

Joshua... @ToolBee • 5 april 2018 23:44

Dat is weer een macro lens

Zer0CooL @Joshua... • 6 april 2018 06:03

Dat hangt af, lijkt me, van de afstand tot je onderwerp

Grrrrrene

5 april 2018 21:15

Ik vroeg me al af hoe ze de linker- en rechterbovenhoek gingen zien met zo'n (op het oog) recht spiegeltje, maar met een gebogen spiegel kun je dus ook knoppen in dat gebied van het scherm bedienen. Geinig, beetje zoals Google Cardboard. Niet echt bepaald te vergelijken met "the real deal", maar leuk om eens mee te spelen voor die paar euro...

WWJD @Grrrrrene • 5 april 2018 21:19

De gebogen spiegel is genoemd als 'upgrade'

Op dit moment maken ze gebruik van een vlakke spiegel.. vandaar ook de 1$ natuurlijk

Verwijderd 5 april 2018 21:29

Indrukwekkend, maar hoeveel processor tijd neemt dit in beslag gezien het feit dat ze OpenCV gebruiken?

Craimasjien @Verwijderd • 5 april 2018 21:31

Dat zal niet zuinig zijn, inderdaad.
Heb er zelf wel eens e.e.a. mee gedaan, maar je moest van goeie huize komen wil je dat soepeltjes laten draaien.

Craimasjien 5 april 2018 21:34

Compleet off topic, maar de instructies om de boel aan de praat te krijgen vond ik erg vermakelijk:

installation instructions
- Install OpenCV 3 using brew install opencv3 or whatever

Xalephsis @Craimasjien • 5 april 2018 21:39

Heb hardop gelachen om je reactie

Thanks!

SilentDecode 5 april 2018 22:47

Mijn grote hamvraag is nu wel:
Gaat dit op elke laptop werken?

De meeste machines tegenwoordig hebben een groot scherm, die helaas ook voorzien is van een gigantische spiegel, dus mooi egaal zijn ze wel.

Echter heb ik bijvoorbeeld een 17" Elitebook, die nogal bulky is (just the way I like them..) en los van de software, kan deze ook voorzien worden met zo'n hacky touchscreen? Niet dat ik een touchscreen op mijn laptop wil, maar mocht dit ooit leuk zijn, of handig zijn voor andere toepassingen, is het wellicht wel een leuk "projectje".

PdeBie @SilentDecode • 6 april 2018 08:29

De code staat op GitHub, dus je kan helemaal los om het zelf te maken

C711 6 april 2018 07:28

Mooi en aardig tweakers maar dit was er al 2 jaar geleden....

GnrlSchnavy 6 april 2018 08:21

Eh, de laatste commit voor aanpassen van code lijkt een jaar geleden gedaan te zijn. Alleen de readme file is recentelijk aangepast. Is dit dan nog wel nieuws?

Verwijderd 5 april 2018 21:49

Binnenkort officeel verkrijgbaar voor 50 euro als iMirror.

lololig @Verwijderd • 5 april 2018 22:36

Of: Webcam toegang geblokkeerd voor developers, wegens beperkte geschiktheid van MacOS in combinatie met touch

Op dit item kan niet meer gereageerd worden.

Studenten voorzien Macbook van touchscreen met behulp van spiegeltje

Lees meer

Reacties (54)

Sorteer op:

Weergave: