Zwitserse onderzoekers ontwikkelen kleine package voor 'machine vision'

Onderzoekers aan de CSEM hebben naar eigen zeggen de meest compacte vision-in-package ontwikkeld. De standalone 'vip' is ongeveer een kubieke centimeter groot en bevat een optische sensor, een ARM-soc en opslaggeheugen.

De vision-in-a-package is 18,5 x 18,5mm lang en breed, en slechts 3mm hoog. De optische sensor biedt een resolutie van 752x480 pixels, waarbij hdr wordt ondersteund. Verder bevat de module een ARM Cortex M4F-soc en 2MB flashopslag voor de firmware. Er is 64MB werkgeheugen beschikbaar, terwijl er via bluetooth op de 2,4GHz-frequentie draadloos gecommuniceerd kan worden.

Volgens de ontwikkelaars is de vip-module driemaal zo klein als bestaande optische modules en is hij, mede door de lage kosten en het eenvoudige ontwerp, breed toepasbaar. Onder andere de functie van 'smart sensor' voor internet-of-things-toepassingen, robotic guidance en autonome voertuigen worden genoemd. De module kan ook eenvoudig aan andere systemen gekoppeld worden die weinig energie verstoken. Ook beloven de ontwikkelaars de benodigde software breed beschikbaar te maken.

Er zijn meer partijen die werken aan compacte modules voor machine vision, zoals de OpenMV, die 2,54x3,3cm meet.

Reacties (37)

[budi]

Mooie techniek. Handig om ingetoetste pincodes af te lezen bij PIN automaten, maar gelukkig zijn er ook wel wat betere toepassingen voor te verzinnen, maar de stoute jongen in mijn brein moest meteen hieraan denken (zo lang het maar bij denken blijft, Budi!)

[Verwijderd]

Daarom: NFC betalen!

Ik denk dat Google, Volvo etc hier veel meer belangstelling voor hebben dan diefjes.

[JustFogMaxi]

Want NFC zonder bevestiging is zo veilig? Laptop in de rugzak en een gestripte pin-terminal in de hand, automatisch transacties aanmaken (ben een winkel) en ga eens lekker door een druk centrum lopen.

[Carda]

Helaas zit de NFC beveiliging niet in de kaart maar in de 'hardware' van de pin automaat in de winkel

Jouw kaart geeft alleen maar de bankrekening door aan de pin automaat volgens mij.

[JustFogMaxi]

Waar het om gaat is dat je als 'winkel' alleen maar een transactie hoeft te starten en de terminal langs een willekeurig pasje hoeft te swipen.

[Carda]

Als je een door de bank geverifieerde 'winkel' hebt dan kan het.
Daarnaast wordt 10cm van iemand afstaan met dat apparaat ook wel verdacht hoor

[PostHEX]

Behoorlijk veilig in een portefeuille met specifiek signaal blokkerend folie (en niet zomaar alu e.d.). Een reader die sterk genoeg is om daar doorheen te komen kan je echt niet in je rugzak dragen. Maar het veiligst is nog altijd NFC betalen via een smartphone -- want die NFC antenne kan je tenminste uitzetten, of althans het doorgeven van data.

[Daileass]

zie ik dat nu goed of is dat een hdmi connector onderaan op de foto?
kan ook gewoon een metalen houdertje zijn om de modules in te plaatsen...

[WWJD]

Het lijkt ook wel wat op Micro USB

[jctjepkema]

Ik denk persoonlijk ook dat het microUSB is. vooral omdat het anders wel weer wat grote gaatjes zullen zijn.

Wat ik me overigens afvraag, is de afbeelding dat apparaat wat word beschreven of is dat die openMV?

[QinX]

Als je kijkt naar de opdruk van de bovenste PCB staat er rechtsbovenin CSEM SA. Lijkt mij dus het beschreven apparaat.

[sianto1997]

Of USB-C

[TVH7]

Vraag me af of het hier over een volledige versie van bluetooth gaat, of over de low-power editie van bluetooth.

Meer dan low power lijkt mij overigens overkill.

[Mijzelf]

Als je er ooit beelden vanaf wilt trekken ben je blij met elke bit bandbreedte.

[TVH7]

Zeker maar zeker voor zulke kleine cams, wil je toch ook dat hij een beetje efficient is, niet dat je een mega battery pack moet gaan meenemen. Tenzij je dit natuurlijk op het net aansluit, maar deze cameratje's lijken mij ook een goed idee voor portable scenario's.

[sigma01]

Het buzzword "Internet of Things" is weer gevallen. Uiteindelijk is dit een weinig innovatieve toepassing van een bestaand concept en slecht toepasbaar in de meeste machine vision toepassingen om de volgende redenen:
- Weinig sensor informatie; vermoedelijk rolling shutter.
- Geen informatie over throughput. Gezien de gebruikte soc zal de framerate < 30 fps zijn.
- Geen realtime interface.
- Geen trigger mogelijkheden.
- Storings gevoeligheid wireless interface.

Daarbij heeft iedere mobiele telefoon al een sensor die met een CSI interface aan een SOC gekoppeld is. Voor machine vision toepassingen worden niet voor niets speciale camera's ontwikkeld met hard realtime eigenschappen. En daarover beschikt dit device zeker niet.

[farlane]

Over welke hard-realtime eigenschappen heb je het en hoe weet jij dat dit device die niet heeft?

[sigma01]

Een voorbeeld van zo'n eigenschap is het starten van de beeldacquisitie op basis van een externe puls, waardoor het mogelijk is om te synchroniseren op een externe lichtbron of de exposure time te controleren. Mijn zeer sterke vermoeden waarom deze camera dat niet heeft is het ontbreken van deze informatie in de datasheet hierover.
Er worden enkel uitbreidingspoorten vermeld die op iedere standaard microcontroller aanwezig zijn. Hoe deze ondersteund worden is niet vermeld,laat staan wat de latency en nauwkeurigheid is.

[Cornholio]

Mooi dat het zo klein kan, maar het is totaal niet praktisch. Net als met USB-sticks, op het laatst worden ze zo klein dat je ze alleen maar sneller verliest.
Als je zo'n camera mee op vakantie neemt, waar laat je hem dan? In je beurs ofzo? Even een foto maken *pakt beurs*

Nee, ik blijf mijn telefoon wel gebruiken, of een goede spiegelreflex natuurlijk

[tellavist]

Dit is nou niet het type camera om je vakantie kiekjes mee te maken
Ik twijfel of je het nieuwsbericht wel helemaal doorgelezen hebt...
Dit gaat meer om bijvoorbeel makkelijk wegwerkbare bewakingscamera's e.d.

[Reactie gewijzigd door tellavist op 22 juli 2024 20:06]

[Verwijderd]

Wat is er mis met een 0.3 MegaPixel Camera. De meeste webcams hadden deze resultie toch ook.

Ik kan me voorstellen dat het handig is voor IOT een koelkast die open gaat als je er voor staat, een deur die open gaat aan de hand van gezichts herkenning, dmv bluethooth verbinding met een smartphone en online database. Voor dit soort dingen wil je geen logge 5MP camera module hebben.

Vind het verder wel mooi dat de sensor +/- 1/4 van het printplaatje is.

[tellavist]

Er is niks mis met zo'n camera! Dat zeg ik ook niet? Ik maak alleen niet mijn vakantie kiekjes met een 0.3MP camera Ik vind het juist een mooie ontwikkeling!
Zoals het nieuwsbericht al aangeeft: het is voor "the internet of things" dus inderdaad wat jij zegt: voor je koelkast die automatisch open gaat, en omdat hij mijn gezicht herkent, het juiste biermerk aangeeft...

[Macfreak101]

Met die resolutie worden dat geen mooie kiekjes nee .

[0stone0]

Uiteraard hadden de onderzoekers bij CSEM niet de intentie om een camera te maken voor op vakantie. Dat hij zo klein is kan juist goed worden gebruikt in de huidige wearables etc.
(Als je beschikking hebt tot een spiegelreflex, waarom zou je dan überhaupt naar zo iets terug gaan?)

[Musical-Memoirs]

Laatste wat ze als functie bedoelen is waarschijnlijk als normale camera te gebruiken. Als sensor zie ik hier zelf veel nut in. Een camera als sensor geeft gedetailleerde informatie. In kleine of complexe systemen kan zo een kleine gedetailleerde camerasensor mogelijk perfect zijn.

Verder zal voor smartwatches en dergelijke eerder een zo klein mogelijke camera wenselijk zijn dan een hele goede camera dan het ding te groot maakt. De resolutie is daar in weze nog goed genoeg voor.

[Durandal]

Mooi dat het zo klein kan, maar het is totaal niet praktisch. Net als met USB-sticks, op het laatst worden ze zo klein dat je ze alleen maar sneller verliest.

Ik denk niet dat het bij die 3mm hoogte blijft. Je zult ook nog wat lenzen nodig hebben om het beeld scherp op de CCD te krijgen. Voor je het weet is het dan al net zo groot als een kleine webcam.
De webcam in je laptop is trouwens al kleiner dan dit ding.

[VickyNick]

Ik zag laatst een mooi projectje van Ben Hack (link) met dezelfde soort type seriele camera (PIXY). Het laat wel mooi zien hoe makkelijk deze camera's zijn met betrekking tot het programmeren van simpele track en trace systemen.

[WillySis]

Mooi cameraatje. Niet bedoeld voor mooie plaatjes, maar als censor. In een zelf rijdende auto bijvoorbeeld om drempels, lijnen en stoeprandjes te detecteren. In je koelkast kan het als een barcodelezer fungeren, die netjes in de rand is weggewerkt.
Lenzen lijken niet direct nodig (het kan als direct-contact camera werken). De onboard rekencapaciteit kan al wat rekenwerk doen (patroon herkenning), zodat er maar weinig informatie doorgestuurd moet worden. Ik vermoed dat het doorsturen van de afbeeldingen (met een acceptabele frame-rate) niet het doel is van deze sensor. Dan kon het nog wel kleiner en zou je eerder aan een beraadde communicatie denken. De verwerking kan dan wel door een processor een stukje verder op.

[Verwijderd]

Zit de lens dan geïntegreerd of moet die er nog op komen? Ik weet uit ervaring dat dit soort apparaatjes een relatief grote lens gebruiken die rechtstreeks op de sensor komt te zitten. Dit zie je ook bij OpenMV.

[maykoga]

Knap dat ze dit zo klein kunnen maken. Uiteindelijk zal deze techniek ook naar andere handheld devices doorsijpelen zoals tablets smartphones en andere wearables zoals google glass.

Maar tevens ook geweldig voor spionage en geheime diensten...

[Reactie gewijzigd door maykoga op 22 juli 2024 20:06]

[Barryke]

Het is meer andersom.. je smartphone kan dit en veel meer.

[The Bula King]

Ik snap niet dat mensen dit zo maar als "normaal" zien.
Het is precies alsof men iedereen al aan het warm maken zijn, lees aan het kneden zijn, om vrijwillig overal camera's in je huis te steken.
En dit ook nog eens te laten verbinden met internet!
Ik word hier ziek van...

[Mijzelf]

Met het internet verbinden? Via de bluetooth verbinding zeker.

Om mensen zo get te krijgen om een met het internet verbonden camera in de huiskamer te zetten hoeb je dit dingetje helemaal niet nodig. Iedere smartphone, tablet of laptop heeft er een, veel desktops ook. De kenect heeft er een, ...

[Atmosfeer]

Omdat de ontwikkelingen hiervan los staat van waar het voor gebruikt kan worden.

Als jij ziek wordt hiervan moet je bij overheden en dergelijke gaan kotsen, niet bij de mensen/bedrijven die dit soort innovaties maken.

Je laat je teveel bang maken. En dan bedoel ik niet dat je niet ongelijk hebt wat betreft spionage, tuurlijk dat gaat allemaal veel te ver. Maar jij laat je zo bang maken dat je nieuwe technieken al wilt stoppen omdat ze eventueel slecht gebruikt kunnen worden. DAT vind ik dan weer eng.

[Reactie gewijzigd door Atmosfeer op 22 juli 2024 20:06]

[The Bula King]

Dan ben jij nogal rap bang zo te zien.
Deze producten zijn juist speciaal ontwikkeld voor het concept dat internet of thing wordt genoemd.

[Atmosfeer]

Internet of things. Ik ben me bekend met het concept en het heeft erg veel voordelen. Stel je voor een hele slimme stad, waarbij bijvoorbeeld prullenbakken zelf aangeven of ze vol zitten of niet. Kan zo weer een berg benzine schelen omdat er niet altijd overal langsgereden hoeft te worden.