Ace's Hardware werpt kritische blik op 3dMark 2003

Ace's Hardware heeft een kritische blik geworpen op 3dMark 2003. Dit keer gaat het niet om de beruchte driveroptimalisaties, maar over de manier waarop de test de uiteindelijke score berekent. De schrijver kwam er namelijk toevallig achter dat een 350MHz Pentium II voorzien van een moderne videokaart (zoals een Radeon 9700 Pro) beter scoort dan een 2,8GHz Pentium 4 met een iets mindere videokaart. Er kan natuurlijk beargumenteerd worden dat dit positief is als je wil weten hoe goed een bepaalde videokaart kan presteren. De vraag is echter in hoeverre de gebruikte testmethode representatief is voor 'real world' spellen. Dit blijkt - natuurlijk - nauwelijks het geval te zijn; uit tests blijkt volledig comform de verwachting dat de 350MHz-processor in echte spellen de prestaties flink onderuit haalt. De claim op de site van FutureMark dat 3dMark een nauwkeurig beeld geeft van de gameprestaties van een systeem, is dus op zijn minst twijfelachtig:

After testing both 3DMark03 and a variety of real-world games based on DirectX 7, 8.1, and 9, we suspect that 3DMark03 is really more of a video card benchmark than anything else. It seems that some of the game tests, especially Mother Nature, measure video card performance almost in isolation from the rest of the system.

For a synthetic graphics accelerator benchmark, this is an ideal situation. But this is not how 3DMark03 has been represented. It is stated to provide an overview of your "system's current gaming performance." Yet from our results, it has failed in that charge twice, by grossly exaggerating the performance of a 350 MHz Pentium II with a Radeon 9700 Pro and minimizing the performance of a 2.8 GHz Pentium 4 with a Radeon 9600.