Heb je het opgemerkt? Onze blinde test van smartphonecamera's was niet zo blind als we hadden gewild. In de foto's van de knuffel met de zonnebril op was in de reflectie van de bril het toestel te zien waarmee we de foto aan het maken waren. Toen we die foto's maakten, hadden we nog geen idee dat we ze zouden gebruiken voor de blinde test, maar het is best wel een blunder voor een test waarbij het leukste element juist is dat niemand weet met welke telefoon de foto is gemaakt. We hopen maar dat mensen het niet hebben opgemerkt en hebben gestemd zonder te weten om welk toestel het ging, en pas in de reacties zagen dat je in dit geval aan elke foto de gebruikte smartphone kon koppelen.
Het verhaal van woensdag maakte veel los. Welke telefoon precies welke foto's had gemaakt, was ook op de redactie geen openbare informatie en dus braken er gesprekken los over of het mogelijk was om aan bijvoorbeeld de verzadiging van de kleuren te zien om welk toestel het ging. Het bleek moeilijk.
Voor wie het verhaal woensdag heeft gemist: we deden iets heel nieuws. We hebben voorbeeldfoto's van vier nieuwe high-end Android-smartphones online gezet zonder erbij te zeggen welke toestel welke foto had gemaakt. Iedereen mocht stemmen op de foto die hem of haar het mooiste leek. Het doel is natuurlijk om te kijken welk toestel het al met al het beste doet als je probeert zoveel mogelijk factoren uit te sluiten, zoals eventuele vooroordelen over een bepaald merk of een bepaalde telefoon.
Nu zijn de stemmen geteld, ongeveer 20.000 lezers hebben hun voorkeuren kenbaar gemaakt, en is de uitslag binnen. Welke foto is nu genomen met welke telefoon en welke telefoon kreeg de meeste stemmen?
/i/2001057427.jpeg?f=imagenormal)
Als kleine opfrisser plaatsen we hier eerst de tabel met informatie over de camera's van de vier smartphones.
Toestel |
Samsung S7 Edge |
LG G5 |
HTC 10 |
Huawei P9 |
Modules |
Enkele, 12Mp |
Dubbele: 16Mp, 8Mp wide-angle |
Enkele, 12Mp |
Dubbele: 12Mp kleur 12Mp monochroom |
Sensor |
Sony IMX260/ Samsung S5K2L1 |
Sony IMX234/ IMX268 |
Sony IMX377 |
2x Sony IMX286 |
Sensorgrootte |
1/2,5" |
1/2,6" |
1/2,3" |
1/2,6" |
Pixelgrootte |
1,4µm |
1,12µm |
1,55µm |
1,25µm |
Diafragma lens |
f/1.7 |
f/1.8 en f/2.4 |
f/1.8 |
Beide f/2.2 |
Raw |
Ja |
Ja |
Ja |
Ja, alleen in kleur |
In de grafieken kun je voor iedere foto aflezen welk toestel hem heeft gemaakt, maar ook in de gallery's is dat zichtbaar. Wie op de foto's klikt, ziet onderaan een zwarte balk met exif-data, met daarin naast de iso, de sluitertijd, het diafragma en de naam van het toestel. Hoewel die namen niet altijd overeenkomen met de naam van de toestellen in de winkels, is al aan het merk te zien om welke telefoon het gaat.
De eerste situatie is eigenlijk best wel standaard en leek ons makkelijk: een oude tram op de voorgrond met op de achtergrond het IJ en gebouwen aan de overkant. Met een tik op het scherm bepaalden we de focus op de gebouwen erachter.
Tenminste, dat was de bedoeling. Het ging hartstikke mis bij de LG G5. Die legde de focus ogenschijnlijk op de regen. Misschien was de autofocus hier wel iets te snel, want daar heb je natuurlijk niets aan.
De Galaxy S7 edge kwam hier met grote overmacht als winnaar uit de bus. Maar liefst 78 procent van de stemmen ging naar de Samsung-telefoon. De oorzaak ligt vermoedelijk bij het feit dat de S7 edge alles het scherpst in beeld heeft gebracht, al is het de vraag of het hier gaat om vastgelegde details of om kunstmatige verscherping. Het gaat echter in deze test niet om de beste of natuurgetrouwste foto, de vraag was welke foto je de mooiste vond. De S7 edge maakte volgens de meeste mensen de mooiste foto.
Dan de afbeelding met de graffiti. Die foto vertoont veel kleur en een grote mate van detail, terwijl de afstand tot de muur ook redelijk groot is. We hebben het niet gemeten, maar we stonden er vermoedelijk wel een meter of vijftig vanaf.
De S7 edge pakt weer de winst, maar nu met minder overmacht. De P9 is een goede tweede met een kwart van de stemmen, met de G5 en HTC 10 op gepaste afstand.
De derde foto is het inmiddels beruchte plaatje met de knuffel die een zonnebril draagt. Er zit veel uitdaging in dat beeld, met de reflectie in de bril, de details in de haartjes en fors tegenlicht. Je ziet ook een verschil in belichting. De HTC 10 kiest ervoor om de achtergrond wat meer in beeld te houden en daardoor de knuffel wat minder licht in beeld te brengen, terwijl de Galaxy S7 edge het omgekeerde doet.
De grote zege is nu voor de P9, die zowel de achtergrond redelijk intact laat als de knuffel detailrijk laat zien. De overige foto's hebben maar weinig stemmen gekregen, hoewel de S7 edge toch nog bijna vijftien procent van de stemmen heeft. Vrijwel niemand stemde hier op de G5.
De foto met de 2CV in de parkeergarage is een van de testplaatjes waarop het verschil in een oogopslag te zien is. Een groot verschil zit in de manier waarop de diverse telefoons het geel van de auto in beeld brengen.
Dat blijkt ook wel, want de meningen zijn meer verdeeld dan bij de andere testfoto's. De LG G5 pakt hier de winst met iets meer dan de helft van de stemmen, gevolgd door de Huawei P9. De G5 laat het volste geel zien, het meest richting oranje. Dat is overigens niet de natuurlijke kleur van de auto, dat hebben de overige telefoons iets beter vastgelegd. De S7 edge krijgt toch nog 19 procent van de stemmen, terwijl er op de HTC 10 duidelijk het minst gestemd is.
De laatste foto is de uitdagendste: een serieus kijkende smartphoneredacteur in een vrijwel donkere studio, op automatische stand. Uiteraard gebruikten alle toestellen de flits. We hebben de foto ook gemaakt zonder flits, maar voor deze test bleek die onbruikbaar: je had dan naar een paar zwarte plaatjes gekeken.
Ook bij deze testfoto zijn de meningen aardig verdeeld, maar de helft van de mensen koos voor de Samsung. Logisch, want dat is de scherpste foto die ertussen zit, al is dat voor veel mensen niet de mooiste. De HTC 10 en Huawei P9 doen het ongeveer even goed, terwijl de G5 hier achterblijft.
Hoewel de scores bij de individuele testfoto's duidelijk zijn, is er wel degelijk een gemengd beeld te zien. De S7 edge wint de meeste tests, namelijk drie van de vijf. De G5 is drie keer laatste, maar pakt ook een keer de winst. De P9 wint een keer en wordt vier keer tweede. Alleen de HTC 10 moet het doen zonder zege in een van de tests. Sterker nog, het toestel van HTC is alleen derde of vierde geworden.
Als we een gemiddelde nemen van alle percentages - en dit is geen exacte wetenschap, maar het leek ons leuk om te doen - dan scoort de S7 edge gemiddeld 44 procent, terwijl de P9 op bijna 32 procent uitkomt. De LG G5 ligt daar met 15 procent ver achter, terwijl de HTC 10 de rode lantaarn draagt met nog geen 10 procent van de stemmen.
We hebben veel geleerd van deze blinde smartphonecameratest, niet alleen over wat Tweakers-lezers mooie foto's vinden, maar ook over het maken van de foto's - knuffels met zonnebrillen zijn geen goed idee - en over de opzet ervan. Ook verdient onze devver Crisp kudos, want hij maakte het een dag van tevoren op verzoek mogelijk om polls in de lopende tekst van een artikel te zetten; dat was tot nu toe niet mogelijk.
Zouden we zoiets nog een keer doen? Absoluut. Het is bij smartphones met een interessante camera een leuke manier om de foto's te vergelijken zonder voorkennis uit welke camera die komt. We kunnen een heel wensenlijstje samenstellen van dingen die we op deze manier kunnen voorleggen: oude smartphones tegen nieuwe, smartphones tegen compactcamera's en natuurlijk later dit jaar of volgend jaar een nieuwe generatie high-end smartphones tegen elkaar. Voorlopig komt het daar nog niet van; we hebben drie smartphonereviews af te maken en het mag geen geheim meer heten welke toestellen we aan het reviewen zijn.