Channels
Powered by True

De uitdagingen van een hardwaretest

Door Daniel Kegel, maandag 4 februari 2008 13:53, views: 16.814

Iedereen die wel eens geprobeerd heeft enigszins gestructureerd een hardwaretest uit te voeren, zal ervaren hebben dat de praktijk doorgaans een stuk weerbarstiger is dan op voorhand gedacht.

Niet passende onderdelen, slecht werkende drivers, onverklaarbare stabiliteitsproblemen en een gebrek aan goed vergelijkingsmateriaal zijn slechts enkele van de vele uitdagingen waar een tester mee wordt geconfronteerd. Tweakers.net is daarbij vooralsnog geen uitzondering. Het optuigen van een fullscale testlab staat al langer op onze verlanglijst, maar de ruimte ontbreekt vooralsnog om deze droom te realiseren. Gelukkig gloort er hoop, maar daarover later meer.

Afgelopen dinsdag werden we onverwacht geconfronteerd met een grote doos die door onze collega's van HUB namens Intel werd aangeleverd. In de doos vonden we een sample-kit van Intels Skulltrail-platform. Nu is Intel tenminste nog zo vriendelijk om een redelijk complete kit inclusief geheugen en koelers aan te leveren, maar dan nog is het verre van een testklaar systeem. Harde schijven, voedingen en videokaarten moeten uit eigen voorraad opgetrommeld worden. Vandaar dat we regelmatig de hulp inroepen van bevriende hardwareleveranciers zoals Leon van Rooijen van Dollarshops, die ons binnen twee dagen wist te voorzien van twee Jetway Radeon 3870 X2-videokaarten. Voorwaar erg nuttig, maar helaas was het inmiddels dus al donderdag, terwijl de kit op vrijdag al weer afgeleverd moest worden bij de volgende reviewer.

Tsja, daar sta je dan met je goede bedoelingen. Je hebt een testkit van één van de belangrijkste introducties van 2008 van de grootste chipfabrikant ter wereld, maar je hebt geen tijd om een echte review in elkaar te klussen. Wachten totdat de kit weer beschikbaar komt, heeft ook geen zin, daar op dat moment de halve wereld al over het systeem heen is gegaan en een review onzerzijds nog maar weinig nuttige informatie zal kunnen toevoegen.

Enige inspanningen van ondergetekende resulteerden derhalve in de volgende testopstelling.

Skulltrail testopstelling 500px

Links zien we de twee Tagan-voedingen van respectievelijk 480 en 500 watt die nodig waren om het systeem überhaupt aan de gang te krijgen. Het Intel D5400XS-moederbord vraagt om twee 8-pins 12V-aansluitingen en alleen de meeste lompe voedingen beschikken daar standaard over. Die hadden we even niet liggen, dus dan gebruiken we er maar twee. Daarnaast vragen de Radeon 3870X2-kaarten ieder ook om een tweetal pcie-e-voedingsaansluitingen en voedingen met vier van dergelijke exemplaren zijn eveneens zeldzaam. Het is ons overigens niet gelukt om de twee ATI-kaarten in Crossfire-opstelling aan de gang te krijgen. Met twee kaarten in het moederbord gestoken wilde de Windows-installatie niet eens op gang komen, laat staan correct uitgevoerd worden. Eenmaal geïnstalleerd ziet Windows zelf de tweede kaart wel correct maar de ATI-driver kan er vooralsnog erg weinig mee. Desalniettemin levert ook één kaart vrij indrukwekkende scores op (17.500 punten in 3Dmark06 zonder enige optimalisatie).

Skulltrail Crossfire2
Skulltrail geheugen
Skulltrail Crossfire3

De afbeeldingen geven al aan dat er voor het ad-hoc testwerk het nodige kan worden verbeterd. Gelukkig is op korte termijn de nodige verbetering op dit vlak te verwachten. Binnen enkele maanden zal Tweakers.net namelijk een tweede verdieping in het huidige kantoorgebouw betrekken waardoor er eindelijk ruimte komt om een professioneel testlab te realiseren.

Testlab inrichtingstekening

In totaal krijgen we de beschikking over ruim 500 vierkante meter vloeroppervlak extra, waarvan zo'n negentig vierkante meter voor het nieuwe testlab is gereserveerd. Hiervan zal ongeveer 75 vierkante meter voor hardwaretests gebruikt worden; de resterende 15 vierkante meter zal verbouwd worden tot 'gameroom'. In beide ruimtes kunnen we dan eindelijk permanente testopstellingen realiseren zodat er gestructureerd en professioneel getest kan worden. In het hardwarelab komt zo'n 90 strekkende meter aan stellingruimte, waardoor het opstapelen van dozen met hardware tot het verleden gaat behoren, we een nette voorraad van nog te testen hardware kunnen aanleggen en de nodige onderdelen kwijt kunnen.

Dus hoewel we op dit moment nog niet altijd tevreden zijn over de manier waarop we sommige tests kunnen uitvoeren en afhankelijk zijn van externe factoren, is het de bedoeling dat nog in de eerste helft van dit jaar aanzienlijk zal verbeteren.

Volgende in Life: Moe van Tweede Wereldoorlog-shooters? 14:44

Reacties

«  1  2  3  »

Ziet er wel stoer uit die opstelling! Ik waardeer het werk dat jullie voor ons doen _/-\o_ !
Vet dat jullie een nieuwe testruimte krijgen! Wat doen jullie met de rest van de 410 M2?

Daar komt de redactie volgens mij te zitten :)

Of daar wordt de nieuwste kaskraker van de Nederlandsche televisiebazen gehuisvest: "Het Gouden Nerdhok", 20 kamers van ieder 20m2 uitgerust met een monstercomputer op basis van het skulltrail platform, 40" LCD Full HD beeldscherm, comfortabele stoel, magnetron, kraan, senseo, king-size beker, vriezer met Pizza's en toiletpot. Wie zijn kamer verlaat verliest en geen ramen nodig want daglicht verhindert toch maar een maximaal contrast. De laatst overgebleven kandidaat mag de apparatuur uit zijn kamer mee naar huis nemen, na een verplicht bezoekje aan een revalidatiecentrum en psycholoog :P
Maar ontopic: ziet er mooi uit, ook meteen een paar zware voedingen aanschaffen natuurlijk :)

[Reactie gewijzigd door Bas van der Doorn]


Breng die lui van RTL nou niet op ideeën man ;)

Noem je allerlei mooi's op, maar dan kan er slechts een Senseo vanaf :p Doe dan op ze minst zo'n ding van Nescafe.

Maar ziet er strak uit zo. Me hoeveel man zitten jullie eigenlijk op kantoor tegenwoordig?

Je vergeet de frietpan en een extra vriezer voor friet en frikandellen. Als die er ook bij komen dan wil ik daar wel een jaartje zitten :) .

Ik denk dat de gouden kooi iets boeiender is voor de kijkers thuis..

Dan vraag ik me af hoe het komt dat Tweakers.net niet een kast in de huidige ruimte staat met meuk er in twv ~5000 euro. Lijkt me een schijntje voor tweakers.net, kijkende naar de uitgave om de react-source te kopen.

Nu zit je met dit soort situaties, geen hardware wanneer het hard nodig is. Gewoon zo te lezen helemaal niets. Geen een goede voeding (met 1 als backup), niet een setje videokaarten (2x 8880GT, 2x HD 3870 en een 2870X2 oid).

NOFI, maar het staat zo ontzettend knullig op deze manier. Een vooraanstaande Tech site van Nederland die niet eens wat standaard spul klaar heeft liggen. Waar zelfs niet ter plekke wat geld kon worden vrijgemaakt om iig even langs de shops te gaan om wat videokaarten, een voeding en wat andere meuk te scoren.

Nouja, hopelijk hebben jullie er van geleerd en ik wens jullie in ieder geval veel succes met het neiuwe testhonk. Hopelijk kunnen we straks vele geweldige reviews verwachten en ik kijk er ook naar uit. Niet meer naar xbitlabs, anandtech of ome tom, nee gewoon op tweakers.net een goede review lezen :)

[Reactie gewijzigd door GENETX]


Omdat er
a) geen ruimte voor is
b) je moet zoiets wel up-to-date houden

Aan a) wordt dus gewerkt, en aan b) kan dan ook gewerkt worden.

De huidige ruimte waar tweakers.net inzit zit redelijk vol, helemaal met alle verschillende hardwaretests die er gedaan worden, en de redactie, management, developpers/systeembeheerders etc etc die allemaal in een ruimte zitten, de huidige ruimte staat gewoon te vol :P

Dus je wilt zeggen dat er geen kast van, laten we zeggen 1,5 meter breed, een halve meter diep en een 2 meter hoog meer in het gebouw past?

Ze heoven echt niet ergens uitgestald te liggen. Dat up to date houden valt ook wel mee, je hoeft ook niet alle kaarten en al het top spul te hebben, maar het price/performance spul lijkt me toch een scheintje. Desnoods spreek je iets af met een verkoper om reclame te maken om zo wat op de kosten te besparen.

Als je wat wilt zul je ook wat moeten investeren. Dat gaat nu dan ook komen gelukkig, maar ik ben van mening dat dat prima binnen tweakers.net in een meuk-kast had gekunt. Zoveel ruimte nemen een paar kaarten, 2 moederplankjes, een paar coolers, 2 voedingen, 2-4 CPU's ook niet in beslag.

* GENETX wil een foto als proof dat die kast er niet past :+

Kijk, die kast past best, maar het is natuurlijk nogal loos om continue een hele reeks videokaarten op voorraad te hebben, als er over een half jaar alweer een nieuwe chip is die sneller moet zijn. Het is geen eenmalige uitgave, je zou continue top of the line hardware moeten blijven kopen die na een half jaar feitelijk afgeschreven is.

En dat zijn dan alleen de videokaarten, als je dan ook nog eens moederborden, processors, geheugen en noem maar op achter de hand moet hebben lopen de kosten al vrij snel totaal uit de hand. Vandaar dat wij (en volgens mij onze collega's van andere sites ook) meestal het vergelijkend materiaal ergens proberen te lenen.
Dit nog even los van het feit dat we nu de ruimte missen om een permanente testopstelling te bouwen: voor deze 'test' is onze vergadertafel misbruikt.

Zet de afgeschreven kaarten dan op VA, misschien krijg je/jullie dan leuke reactie's ;)

Dat kan je nu wel zeggen, maar een beetje basishardware (hoeft niet altijd actueel te zijn) kan er toch wel vanaf bij een commerciele onderneming.

Dus je wilt zeggen dat er geen kast van, laten we zeggen 1,5 meter breed, een halve meter diep en een 2 meter hoog meer in het gebouw past? Ze heoven echt niet ergens uitgestald te liggen.
In een kast van 1,5 bij 2 meter kun je niet fatsoenlijk werken.

Voor een goede review zul je meer dan één processor getest moeten hebben. Om efficiënt meerdere processors te testen wil je meerdere testsystemen naast elkaar gebruiken (de meeste tijd zit je immers op resultaten van benchmarks te wachten). Om drie of vier systemen naast elkaar te gebruiken heb je al veel meer ruimte nodig.

Een testsysteem wil je niet netjes in een kast bouwen en in een hok wegstoppen. Het spul moet op en op tafel liggen zodat onderdelen makkelijk verwisseld kunnen worden.

Hoe testen jullie op dit moment dan? Ik neem aan gewoon op een bureau oid. Oftwewel. Je neemt een kast van een willekeurig Zweuds möbelhûs oid.

Je gooit het volgende er in:
1 AMD Phenom X4
1 AMD Athlon 6400+ BE
1 Intel Qxxxx
1 Intel C2D E8400
1 AMD mobo + CF
1 Intel Mobo + SLi
1 Intel Mobo + CF
2 8800GT
2 HD 3870
4 2GB DDR2-800 (kan best kingston valueram zijn)
2 Goede voedingen
Wat coolers

Het gaat er niet om dat je een uitgebreide test doet, het gaat er om dat zodra je een Skulltrial binnenkrijgt er gewoon 2x 8800GT in SLI en 2x HD3870 kan draaien omdat de kaarten klaarliggen en niet 2 dagen hoeft te wachten.

Het gaat er om dat zodra je de nieuwe HD3870 X2 binnenkrijgt je zowel je AMD als Intel setup kan pakken en hem direct kan testen en niet hoeft te wachten tot er een complete set wordt geleverd waar de kaart op kan.

Je hoeft echt niet het beste van het beste te hebben, dit kost je 1 keer 2500-3000 euro en dan kun je ieder half jaar voor 500-1000 euro wat spul er bij nemen. Dat moet toch geen probleem zijn voor tweakers.net lijkt me? Wel miljoenen voor de source van een forum uitgeven, maar niet wat wisselgeld in wat standaard spul kunnen steken. :?

Oftwewel: Je krijgt een nieuwe videokaart, platform oid binnen, maar je mist een onderdeel voor een compleet werkend systeem. Je haalt het spul uit de kast en je kan het direct testen. Je hebt alle tijd om een goede review op te bouwen en alles goed zonder problemen kunnen testen. Dat is toch wel wat waard lijkt me?

Edit: Als ik nu de reactie van Femme hieronder lees is dat ook exact wat ik bedoel, maar gewoon de vraag waarom dat er nu niet is. Ik heb het neit over een grote test waarin 20 CPU's worden getest. ik heb het over wat spul zodat je wat interessante tests kan draaien. Als je bovenstaande kast had gehad dan had je zowel SLi als CF goed kunnen testen. Dan had je hem nog naast een single Qxxxx kunnen zetten om te zien wat voor impact het heeft wanneer er tijd over zou zijn.

[Reactie gewijzigd door GENETX]


Nu zit je met dit soort situaties, geen hardware wanneer het hard nodig is. Gewoon zo te lezen helemaal niets. Geen een goede voeding (met 1 als backup), niet een setje videokaarten (2x 8880GT, 2x HD 3870 en een 2870X2 oid).
Op dit moment doen we niet doorlopend cpu-tests omdat de middelen er zoals gezegd er gewoon niet voor zijn. Het is dan ook logisch dat de spullen niet gereed liggen als er plotseling een doos met samples op de deurmat liggen.

Het regelen van wat samples van videokaarten is op zich het probleem niet. Er moet wel een zorgvuldige en continue planning aan voorafgaan, zodat de juiste spullen op het gewenste moment beschikbaar zijn. Dat nog even afgezien van het testwerk. De enorme hoeveelheid inspanningen die daarvoor geleverd moeten worden, moeten niet onderschat worden. Even 3dMark draaien is nog wel te doen, wil je echt een uitgebreide serie applicatie-benchmarks draaien met veel vergelijkingsmateriaal zoals AnandTech en Tech Report dat doen, dan ben je gewoon weken fulltime bezig. Het draaien van de benchmarks (alles minimaal drie keer) kost al veel tijd en dan moet je er ook rekening mee houden dat het nooit voorspoedig gaat. Er is altijd wel dingen die het benchen frustreren, van instabiele hardware tot nieuwe driverversies die plotseling beter presteren en ouder werk waardeloos maken.

Bij een inrichten van een testlab zal er natuurlijk wel voor gezorgd worden dat er geschikte voedingen en dergelijke paraat zijn.

Leuke bloemetjes. Ik vind het echt wel tof voor jullie, maar wat ik me afvraag, het is jullie toch gelukt om die review in elkaar te flansen? Dus waarom klagen?

Klagen :? Ik zie geen geklaag?
Ik zie enkel een positief bericht over uitbreiding, over een review die toch gelukt is op korte termijn enz. Het was/is misschien wat behelpen, maar dat is/was het dan ook.

[Reactie gewijzigd door RobIII]


Sterker nog, de enige die zou kunnen klagen is Femme zelf omdat Daniel en ik dei dag vakkundig zijn test systemen van hunne voedingen hebben ontdaan :P

Overigens ongeloofelijk hoe zwaar die videokaarten zijn, die koellichamen zijn echt huge....

Ze klagen niet, ze geven alleen de omstandigheden weer waaronder ze moeten werken. En dan als positieve noot dat het alleen nog maar beter wordt! Geen geklaag, maar gejuich dus! :)

Alvast gefeliciteerd met de nieuwe ruimte, nu is het wachten nog op de scores/prestaties van het Skulltrail platform.
Op Hardware.info staat al een test, kijken of de waardes van Tweakers veel beter zijn met 1 of 2 maal een 3870 X2, waar HW.info 1x een 8600GTS gebruikt (linkje)
helemaal in 3DMark06, en misschien heeft Tweakers.net wel in de dag dat het systeem getest is een overklok poging kunnen wagen, waar deze bij HW.info mist!!

Ik vind de opmerking over de voeding een beetje raar, ik heb een thermaltake 1000w voeding en die heeft 2x8 pins aansluting voor de cpu's en 6x pci-express. Lijkt me dat je zon voeding wel in vooraad zou moeten hebben, of anders de 1200w versie kan je tenmiste alle hardware testen en bijvoorbeeld 3 way sli met 8800 ultra's draaien.

1000 watt is nou niet echt standaard te noemen imho.
In de duurdere consumentenpc's zit nog gewoon een voeding van een goeie 400 watt.

1000 watt is dus al een behoorlijke voeding.

De meeste tweakers vergeten dat er ook nog niet-tweakers bestaan, die een veel groter deel van de 'thuispc' markt vertegenwoordigen dan zij.

Leuk stukje dit, laat maar weer eens zien dat het echt niet makkelijk is om even snel een hardwaretest te maken!

Veel succes alvast op jullie nieuwe etage, hoop dat er nog veel mooie revieuws komen!

Zeer gaaf dat jullie binnenkort wel over een professionele ruimte beschikken. Want die reviews die jullie schrijven zijn altijd zeer uitgebreid en diepgaand. Net even een stapje voorbij de concurrentie. Dus daar wil ik wel meer van lezen.

Waarom denk je dat reacties uit is gegaan bij de v&a?

Straks gaan alle gebruikte spulletjes voor net een tikkie meer als de nieuwprijs in de verkoop :+


Ok. ok, zo kan ie wel weer :) Succes met het nieuwe testhok.
Ik kijk er naar uit, er kunnen me niet genoeg reviews geschreven worden!
«  1  2  3  »

Op dit item kan niet meer gereageerd worden.

Volgende in Life: Moe van Tweede Wereldoorlog-shooters? 14:44

Powered by True
RSS VNU Media logo
© 1998 - 2008 Tweakers.net - Alle rechten voorbehouden
Uitgever van: