antwoord van femme
Op zich een helder, duidelijk antwoord. Maar naar aanleiding hiervan (en omdat deze draad inmiddels toch al door de deken der off-topic moderatie bedekt is ;p), wil ik toch nog even reageren:
Als je zo overtuigd bent van de representativiteit van jullie testmethodieken, dan kan ik niet anders dan concluderen dat je ook van mening moet zijn dat de wetenschappelijke testmethodieken (te) zwaar overdreven en vaak overbodig overdreven zijn (er is immers met veel minder inspanning en middelen (de t.net manier) hetzelfde resultaat te behalen, waaruit dezelfde conclusie te trekken zijn). Kortom: als jullie op deze manier representatieve tests kunnen uitvoeren, dan moeten die slimme wetenschappers het ook veel simpeler en goedkoper kunnen. Wetenschappers en ingenieurs schijnen daar toch anders over te denken. Ik moet zeggen dat ik persoonlijk ook liever *geen* review zie, dan een review waarvan de conclusie en methodieken op de 'gutt-feeling' van een clubje zelf-uitgeroepen benchmarkers zijn gebasseerd, in plaats dat deze tot stand is gekomen via de 'officiele' wetenschappelijke weg. Dit niet omdat ik een hekel heb aan alles wat niet wetenschappelijk is, maar voornamelijk omdat ik een hekel heb aan het feit dat massa's mensen de onwetenschappelijke test-pulp vaak als zoete koek en volledige waarheid slikken. Het kost vervolgens weer jaren van zinloze discussies in forums om deze schisma's in de waarheid recht te trekken.
Dat de gepubliceerde reviews een boel gebruikers blij maken, is een non-argument. Natuurlijk is het het hoofddoel van een site om haar gebruikers te geven wat ze willen. Maar deze gebruikers zouden een stuk minder blij zijn, als ze zich bewust zouden zijn dat de test-resultaten die ze lezen, wellicht niks te maken hebben met de vraag of ze nu wel of niet RAID-0 moeten aanschaffen voor hun desktop PC.
Want laten we eerlijk zijn: hoeveel moeite jullie ook in het uitvoeren van de benchmarks gestopt hebben, wat zeggen ze nu eigenlijk? Wat kun je afleiden uit de benchmarks? Eigenlijk niets meer of minder dan dat de performance van RAID 0 inderdaad significant verbeterd onder de randvoorwaarden (load) van de benchmark.
Maar wat heeft het voor zin om te testen volgens de randvoorwaarden van een (willekeurige) disk-benchmark? Ik bedoel: het zou veel zinniger zijn, om eerst te onderzoeken *WELKE* factoren en onderdelen (en load) nu echt specifiek bepalend zijn/is voor desktop PC's. Dan kun je vervolgens deze factoren onafhankelijk (of afhankelijk) van elkaar gaan benchmarken, en dan heb je (min of meer) een handgreep om iets zinnigs te zeggen over de performance van RAID 0 in een (door jouw geteste) desktop omgeving.
De tests die zijn uitgevoerd zijn vooral load-test (tests die performance meten onder relatief zware load), en hebben niks met standaard desktop-gebruik te maken (waar diskgebruik doorgaans nooit in de buurt zal komen van het gebruik dat in benchmarks wordt getest). Hoewel de benchmarks op zich dus wel degelijk *IETS* zeggen, zeggen ze weinig tot niets over de bruikbaarheid van RAID-0 in een desktop omgeving.
Daarbij komt, dat wanneer je iets wilt zeggen over de bruikbaarheid van RAID 0 m.b.t performance-verbetering, je dit eigenlijk niet kunt doen zonder andere (qua budget) gelijkwaardige alternatieven tot performance-verbetering ook te benchmarken.
Zo ben ik bijvoorbeeld ook erg benieuwd naar de performance van een systeem waarbij, voor het geld dat een RAID-0 oplossing anders had gekost, er extra RAM is bijgeplaatst, er een sneller CPU is gekozen, of een 15,000 rpm HD is gekozen.
De performance van deze alternatieven is ook erg belangrijk voor het waarde-oordeel van het nut van RAID-0 als performance-verbeteraar op de desktop. Nergens wordt mij de mogelijkheid geboden om dit op een goede, vergelijkbare, manier te toetsen.
Nu komen we weer terug op het argument: maar als we ons aan de (zware) eisen van wetenschappelijke testmethodieken moeten houden, kunnen we uberhaupt geen (vergelijkbare) tests meer uitvoeren/publiceren. In feite kan ik niet anders dan hier volmondig 'ja' op antwoorden: Het doen van uitspraken met enig waarheidsgehalte is, sinds de einde van de middeleeuwen en de opkomst van de renaissance, eigenlijk voorbehouden aan mensen die weten waar ze het over hebben. En in onze westerse maatschappij houdt 'weten waar je het over hebt' in, dat je uitspraken de toets der wetenschap zullen moeten kunnen doorstaan. De door tweakers uitgevoerde tests doen dit helaas niet, en mogen dus ook niet als 'waarheden' aangenomen worden. De cijfers van de benchmarks zijn dan weliswaar 'waarheden', maar de conclusie dat RAID-0 in een desktop-omgeving als nuttig kan worden beschouwd, is een conclusie die niet op basis van de randvoorwaarden van de benchmarks (nog van de resultaten) getrokken kan worden.
Simpelweg omdat er geen wetenschappelijke basis is, die aangeeft dat de door jullie uitgevoerde tests representatief zijn voor een 'desktop' PC. Sterker nog: jullie hanteren niet eens een eenduidige definitie van desktop PC. Hoe kun je dan wel tot een eenduidige eindconclusie komen?
Helaas leest 99% van alle tweakers hier, of door desinteresse in testmethodieken, of door onwetendheid, of door een blind vertrouwen en respect in de redactie van t.net, dwars doorheen, en nemen ze eigenlijk iedere conclusie aan. Er staan immers grafiekjes bij ;p
Maar goed, ik weet dat het niet jullie taak is om voor alles correcte testmethodieken uit te denken, laat staan dat jullie daar zin in zouden hebben (zou ik zelf ook niet hebben). En ik begrijp ook heel goed dat mijn verhaal absoluut niet zal leiden tot een verbetering m.b.t. dit soort reviews. Dat zou inderdaad allemaal veel te veel geld kosten. Of nog belangrijker: het zou veel te lastig zijn, en niemand die 'dankbaar' zou zijn voor al die moeite (behalve halve zolen als ik, maar ja, daar doen jullie 't niet voor ;p).
Maar besef ondertussen wel dat jullie artikelen waarschijnlijk meer mensen bereiken dan een gemiddeld artikel in een wetenschappelijk tijdschrift. En dat deze mensen veel van wat jullie schrijven klakkeloos aannemen (waarmee ik bedoel dat ze waarschijnlijk minder kritisch zijn op jullie dan jullie zijn op jezelf ;p). Jullie hebben dus weldegelijk een 'meningvormende' functie (net als anandtech en SR). Dit geeft jullie een bepaalde vorm van macht/invloed. En zoals de oom van Peter Parker al zei: 'with great power, comes great responsibility'.
En hier wil ik 't echt bij laten, voor wat betreft dit onderwerp.