Google schakelt Pixel Visual Core in voor apps van derden

Google heeft aangekondigd dat het de Pixel Visual Core inschakelt voor de tweede generatie van zijn Pixel-telefoons. Daardoor kunnen nu ook apps van derden van de chip gebruikmaken bij het nemen van foto's.

Google schrijft dat de chip nu ook gebruikt kan worden door apps als WhatsApp, Snapchat en Instagram. Dat moet de kwaliteit van de foto's ten goede komen, die automatisch worden aangepast. De Pixel Visual Core maakt net als de camera van de Pixel gebruik van een techniek die Google aanduidt met de naam Raisr. Dat staat voor rapid and accurate image super resolution en moet er aan de hand van machine learning voor zorgen dat ingezoomde foto's scherper lijken.

Toen de tweede generatie van Pixel-telefoons uitkwam, hadden ze de chip voor beeldverwerking wel aan boord maar was deze uitgeschakeld. Pas in de laatste developer preview van Android 8.1 was het mogelijk om de chip in te schakelen. Dat moest toen aan de hand van een ontwikkelaarsoptie. De Pixel Visual Core heeft een enkele Cortex A53-core en daarnaast acht kernen die specifiek zijn gemaakt voor het verwerken van beelden.

Het inschakelen gebeurt in de maandelijkse update van februari, die gedurende de komende dagen uitkomt.

Reacties (27)

Eh, de Visual Core was altijd al in gebruik door de ingebouwde camera-app, de enige wijziging in zowel 8.1 alsook in deze pressrelease is dat deze nu ook door third-party apps te gebruiken is.

Dank, dat heb ik verduidelijkt!

Dacht dat t eerst helemaal uitgeschakeld was. Dat t later gebruikt werd door de interne camera app op pixels (wat het alleen maar sneller maakte, maar niet de foto kwaliteit verhoogde) en nu dus ook voor derden beschikbaar is

Deze update is op het moment van schrijven al uit en al te downloaden en sideloaden via de Google OTA download site.

Ik heb voor mijn Pixel 2 de update gisteren al binnengehaald via de update functie in de settings op de telefoon. (Ben wel op vakantie in Oostenrijk, wellicht dat ze hem daar eerder uitgerold hebben?

Allereerst, fijne vakantie!

Google doet inderdaad aan distributed updates. Ik weet echter niet of dit bij Google op gebruiker gaat of op regio. Ik had m gister helaas nog niet in de normale update sectie maar kwam hem wel tegen toen ik de OTA site bekeek (bekijk ik altijd aan het begin van de maand). Ik vind het zelf geen probleem om de update te sideloaden met ADB en heb dat gisteravond dus ook direct gedaan.

Ik heb zelf een pixel 2 xl en ben hier fan van, misschien ben ik een beetje gekleurd.

Waarom wordt dit niet met enige scepsis bekeken? Je stopt hardware in een telefoon, gebruikt deze niet optimaal aan het begin, maar weet wel al hoe je die moet gebruiken. In hoeverre is dit niet een moderne manier van aandacht trekken na de lancering van een telefoon? Door deze functies nu te activeren komt de telefoon weer in beeld en wordt het besproken. Extra publiciteit na de lancering en extra exposure. Is dit dus niet expres gedaan en zouden we hier enig zins kritisch op moeten zijn?

1. het was al geactiveerd maar nu ook voor 3th party apps.
2. pixel 2 is niet vorig maand gelanceerd dat ze zo'n stunt nodig hebben...

Ik snap wel wat pepijn1234 bedoelt: de Visual Core werd pas in Android 8.1 geactiveerd. Ik denk echter wel dat Google de intentie had om de Pixel 2 uit te brengen met gebruik van de Visual Core (waren geloof ik ook wel aanwijzingen naar), maar de software was gewoon niet niet af.

Ik vind dit juist een sterke actie van Google. Je ziet zoveel fabrikanten die hun telefoon met software releasen die niet af is en dus nog vol met bugs zit. Gewoon omdat ze in de presentatie hebben gezegd dat de telefoon met deze features komt. Google zag dat ze de software niet voor de geplande release afkregen, dus leveren ze een product waar dit nog niet in zit, waar ze volledig open over zijn. Kortom, je hebt als klant geen last van buggy software en Google heeft de tijd om een (zoveel mogelijke) foutloze implementatie van de feature te realiseren.

Zou dit ook een verklaring kunnen zijn waarom bijv. AR Stickers veel beter werkt op een Pixel 2 dan op bijv. een OnePlus 3? Vanwege het ontbreken van die extra chip (Pixel Visual Core)?

Jij gaat het ver zoeken Waarom zou bij Pixel 2 dit beter moeten werken dan bij een OP3. Bij de Pixel staat de chip voor 3th parties uitgeschakeld en OP3 heeft er geen.

[Reactie gewijzigd door BlaDeKke op 6 februari 2018 08:40]

AR Stickers zijn onderdeel van de Camera-app op de Pixel 2.

Precies wat HellFury zegt, AR Stickers is ingebouwd in de Camera app van Google en die gebruikt die chip.

geen idee, deze werken best fijn op mijn eerste generatie Pixel XL, en die beschikt dus niet over de Pixel Visual Core....

Ik heb het zien werken op een Pixel 2 en op m'n eigen OP3, maar bijvoorbeeld het vastzetten van een Star Wars poppetje op een ondergrond werkt op de Pixel 2 echt 100 keer beter.

Cool dat ze het via ML doen. Daar zijn afgelopen tijd wel leuke voorbeelden van voorbij gekomen. Erg impressive vind ik het! Maar zou dit ook niet in real time gedaan kunnen worden, dus dat je de lage res foto opslaat en alleen bij het openen of exporteren van de foto de boel upscaled?
BIj de pixel telefoon telefoon lijkt het alsof het gedaan wordt bij het nemen van de foto. Dan neem het 1. meer ruimte in beslag en 2. als het algoritme geupdate wordt heeft dit in principe geen effect op je library tenzij ze daar weer wat voor bouwen.

[Reactie gewijzigd door Menesis op 6 februari 2018 08:14]

De fotokwaliteit wordt verbeterd, maar dit betekent niet automatisch dat de bestandsgrootte omhoog gaat.

Hmm ik kan alleen nergens echt een test vinden van iemand van buiten de betrokken partijen. Hoe goed presteert het in het echt?

Bij die vogel zie je duidelijk dat er dingen aangevuld worden die niet in de originele foto zaten: het programma gokt als het waren en stopt er wat dingen in uit een database (moet wel). Het is wel goed gedaan op die foto.

maar heeft het voor apps als whatsapp dan wel veel nut? aangezien whatsapp de foto's al comprimeerd voor een lager dataverbruik. ik zie tenminste wel verschil als ik een foto vanuit whatsapp maak of een van tevoren gemaakte foto verstuur.

Je kan in WhatsApp de cameraknop ingedrukt houden, dan komt de systeemcamera-app tevoorschijn ipv de ingebouwde variant van WhatsApp zelf

...voor zorgen dat ingezoomde foto's scherper lijken.

Hoe kijken foto-puristen naar deze functie? Is dit werkelijk iets wat de foto beter maakt, of slechts een filter trucje, zoals de bass-boost knop op mijn versterker?

Alsof dat wat uitmaakt voor de massa die enkel nikszeggende selfies schieten voor hun nikszeggende instagram pagina.

Zou je er ook Bitcoins mee kunnen minen :-D

But can it run Crysis?

Met toekomstige updates zouden ontwikkelaars ook de NPU van de Kirin 970 kunnen aanspreken via de NNAPI.

Ik ben benieuwd hoe ontwikkelaars dat extra mogelijkheden gaan gebruiken... Of ben nog beter, ben benieuwd als je straks een Google Camera port kan krijgen die het NPU gebruikt voor hdr+.