Phoronix brengt Linux-benchmarksuite ook uit op live-cd

Phoronix heeft tezamen met versie 2 van zijn Linux-benchmarksuite ook de PTS Desktop Live 2009.3-distributie uitgebracht. Met deze live-dvd kan een gebruiker geautomatiseerd een serie benchmarks op zijn systeem uitvoeren.

De Phoronix Test Suite 2.0, die ontworpen is om op reeds draaiende besturingsystemen te worden geïnstalleerd, bevat volgens de ontwikkelaars honderden updates en verbeteringen ten opzichte van de huidige 1.8-versie. De benchmarksuite bestaat uit 109 testprofielen en 46 benchmarks, uiteenlopend van de webserver Apache tot het spel Supertuxkart. Naast een aantal nieuwe testopties bevat de Phoronix Test Suite 2.0 een bijgewerkte gui. Ook kunnen gebruikers voortaan eigen testprofielen samenstellen. De benchmarksuite draait volgens Phoronix niet alleen op Linux-systemen: ook op OpenSolaris, BSD en OS X kan de software worden gebruikt. De benchmarkresultaten kunnen via het internet met de uitkomsten van anderen worden vergeleken.

Om het voor met name beginnende gebruikers eenvoudiger te maken om de Linux-benchmarks te draaien, heeft Phoronix een nieuwe Linux-live-omgeving ontwikkeld. PTS Desktop Live 2009.3, momenteel nog in bèta, kan vanaf een dvd of usb-stick geboot worden en laat geïnstalleerde besturingssystemen op de harddisk met rust.

De aanvullende webdienst Phoromatic zal nog in het derde kwartaal zijn virtuele deuren officieel openen, maar kan nu al door bètatesters worden gebruikt. Met dit gratis remote management system kunnen de Phonorix-benches op afstand worden gestart en beheerd. Phoromatic is met name interessant voor bedrijven die de benchmarks op grote aantallen hardware willen uitvoeren.

Reacties (24)

[Little Penguin]

Ik moet zeggen dat ik de titel van het artikel wel wat verwarrend vind, het gaat volgens mij om software die de computer en niet het OS test. (Of zit ik er nu helemaal naast?)

Uit de titel krijg ik het idee dat het om een benchmark gaat die de verschillen tussen de diverse GNU/Linux besturingssystemen kan testen - maar als ik dit artikel lees, krijg ik het idee dat 't om een test van de hardware gaat...

[CAPSLOCK2000]

Je kan het een niet zonder het ander testen.

Met deze test kun je zowel de vraag
"Is hardeschijf X sneller dan schijf Y?"
als de vraag
"Is de lees en schrijf snelheid van Linux 2.6.30 hoger dan Linux 2.6.29"
als de vraag
"Is Apache sneller onder Linux of onder Solaris"

[DCK]

Inderdaad. De Live-CD kan een goede benchmark zijn voor computerhardware, omdat het om dezelfde softwarebundel gaat die je op verschillende PC's gebruikt. (Zelfde software op ander hardware).

Als je de Test Suite los installeert is het gewoon een graadmeter van de performance van je specifieke Linux-systeem. (Andere Linuxinstellingen op andere hardware).

Wel moet opgemerkt worden dat driversupport alles betekent onder Linux. Voorbeeld: onder Windows is een Radeon HD4850 net zo snel als een 9800GTX+, maar onder Linux is een HD4870 gelijk aan een 9800GT, door de brakke ATI-ondersteuning. Voor harde schijven, CPU's en netwerkapparatuur gelden deze verschillen vermoedelijk nauwelijks.

[Reactie gewijzigd door DCK op 7 augustus 2024 11:42]

[kKaltUu]

De live-cd draait op een linux variant (ubuntu zo te zien) en bevat de linux variant van de benchmarksuite.

Wel lees ik op hun site dat je een x64 processor nodig hebt om deze te kunnen draaien.

[qrazi]

De meeste benchmarks die gedraaid worden door review sites, worden onder een versie van Windows gedraaid. De behaalde prestaties hoeven niet representatief te zijn voor andere besturingssystemen. Phoronix heeft deze testsuite ontwikkeld om een uniforme benchmarktool te hebben die werkt op vrijwel alle linux distri's (en sinds kort dus ook Mac OS X en Solaris). Voordeel is dat behaalde scores daadwerkelijk wat nuttigs te melden hebben over prestaties van bepaalde hardware op een bepaald besturingssysteem.....

[Verwijderd]

Het gaat om een benchmarksuite die draait op Linux (dus niet benchmarks vóór Linux), dus de titel klopt wel maar kan inderdaad op meerdere manieren worden opgevat.

[Verwijderd]

Het is inderdaad een benchmark test. Overeenkomstig de benchmark tests die gedaan worden als een systeem getest word 3Dmark, PC mark etc.

Dit zijn alle tests die in 2.0.0 zitten:

====================================
Phoronix Test Suite - Tests
====================================

apache - Apache Benchmark [VERIFIED, FREE]
blogbench - BlogBench [VERIFIED, FREE]
bork - Bork File Encrypter [VERIFIED, FREE]
build-apache - Timed Apache Compilation [VERIFIED, FREE]
build-imagemagick - Timed ImageMagick Compilation [VERIFIED, FREE]
build-linux-kernel - Timed Linux Kernel Compilation [VERIFIED, FREE]
build-mplayer - Timed MPlayer Compilation [VERIFIED, FREE]
build-mysql - Timed MySQL Compilation [VERIFIED, FREE]
build-php - Timed PHP Compilation [VERIFIED, FREE]
bwfirt - Bwfirt [VERIFIED, FREE]
byte - BYTE Unix Benchmark [VERIFIED, FREE]
c-ray - C-Ray [VERIFIED, FREE]
cachebench - CacheBench [VERIFIED, FREE]
compliance-acpi - ACPI [VERIFIED, FREE]
compliance-ogl - GLEW [VERIFIED, FREE]
compliance-sensors - LM Sensors [VERIFIED, FREE]
compress-7zip - 7-Zip Compression [VERIFIED, FREE]
compress-gzip - Gzip Compression [VERIFIED, FREE]
compress-lzma - LZMA Compression [VERIFIED, FREE]
compress-pbzip2 - Parallel BZIP2 Compression [VERIFIED, FREE]
crafty - Crafty [VERIFIED, FREE]
dbench - Dbench [VERIFIED, FREE]
dcraw - dcraw [VERIFIED, FREE]
doom3 - Doom 3 [VERIFIED, RETAIL]
encode-ape - Monkey Audio Encoding [VERIFIED, FREE]
encode-flac - FLAC Audio Encoding [VERIFIED, FREE]
encode-mp3 - LAME MP3 Encoding [VERIFIED, FREE]
encode-ogg - Ogg Encoding [VERIFIED, FREE]
encode-wavpack - WavPack Audio Encoding [VERIFIED, FREE]
espeak - eSpeak Speech Engine [VERIFIED, FREE]
et - Enemy Territory [VERIFIED, FREE]
etqw-demo - ET: Quake Wars Demo [VERIFIED, NON-FREE]
etqw - ET: Quake Wars [VERIFIED, RETAIL]
ffmpeg - FFmpeg [VERIFIED, FREE]
fgl-glxgears - ATI fgl_glxgears [VERIFIED, RESTRICTED]
fhourstones - Fhourstones [VERIFIED, FREE]
fio - Flexible IO Tester [VERIFIED, FREE]
glmark - GLMark [VERIFIED, FREE]
gmpbench - GMPbench [VERIFIED, FREE]
gnupg - GnuPG [VERIFIED, FREE]
graphics-magick - GraphicsMagick [VERIFIED, FREE]
gtkperf - GtkPerf [VERIFIED, FREE]
hdparm-read - hdparm Timed Disk Reads [VERIFIED, FREE]
hmmer - Timed HMMer Search [VERIFIED, FREE]
idle - Timed Idle [VERIFIED, FREE]
iozone - IOzone [VERIFIED, FREE]
j2dbench - Java 2D Microbenchmark [VERIFIED, FREE]
java-scimark2 - Java SciMark [VERIFIED, FREE]
jgfxbat - Java Graphics Basic Acceptance Test [VERIFIED, FREE]
jxrendermark - JXRenderMark [VERIFIED, FREE]
lightsmark - Lightsmark [VERIFIED, NON-FREE]
mafft - Timed MAFFT Alignment [VERIFIED, FREE]
md-gromacs - GROMACS MD Benchmark [VERIFIED, FREE]
mencoder - Mencoder [VERIFIED, FREE]
minion - Minion [VERIFIED, FREE]
mrbayes - Timed MrBayes Analysis [VERIFIED, FREE]
n-queens - N-Queens [VERIFIED, FREE]
nero2d - Open FMM Nero2D [VERIFIED, FREE]
nexuiz - Nexuiz [VERIFIED, FREE]
norsetto-shadow - Norsetto Shadow [VERIFIED, FREE]
openarena - OpenArena [VERIFIED, FREE]
openssl - OpenSSL [VERIFIED, FREE]
opstone-svd - Opstone Singular Value Decomposition [VERIFIED, NON-FREE]
opstone-svsp - Opstone Sparse-Vector Scalar Product [VERIFIED, NON-FREE]
opstone-vsp - Opstone Vector Scalar Product [VERIFIED, NON-FREE]
padman - World of Padman [VERIFIED, FREE]
pgbench - PostgreSQL pgbench [VERIFIED, FREE]
postmark - PostMark [VERIFIED, FREE]
povray - POV-Ray [VERIFIED, FREE]
prey - Prey [VERIFIED, RETAIL]
qgears2 - QGears2 [VERIFIED, FREE]
quake4 - Quake 4 [VERIFIED, RETAIL]
ramspeed - RAMspeed [VERIFIED, FREE]
render-bench - Render Bench [VERIFIED, FREE]
scimark2 - SciMark [VERIFIED, FREE]
smokin-guns - Smokin Guns [VERIFIED, FREE]
specviewperf10 - SPECViewPerf 10 [VERIFIED, FREE]
specviewperf9 - SPECViewPerf 9 [VERIFIED, FREE]
sqlite - SQLite [VERIFIED, FREE]
stresscpu2 - StressCPU2 Stress-Test [VERIFIED, FREE]
sudokut - Sudokut [VERIFIED, FREE]
sunflow - Sunflow Rendering System [VERIFIED, FREE]
super-pi - Super PI [VERIFIED, NON-FREE]
supertuxkart - SuperTuxKart [VERIFIED, FREE]
tiobench - Threaded I/O Tester [VERIFIED, FREE]
tremulous - Tremulous [VERIFIED, FREE]
trislam - Triangle Slammer [VERIFIED, FREE]
unigine-sanctuary - Unigine Sanctuary [VERIFIED, NON-FREE]
unigine-tropics - Unigine Tropics [VERIFIED, NON-FREE]
urbanterror - Urban Terror [VERIFIED, FREE]
ut2004-demo - Unreal Tournament 2004 Demo [VERIFIED, NON-FREE]
vdrift - VDrift [VERIFIED, FREE]
video-cpu-usage - 1080p H.264 Video Playback [VERIFIED, FREE]
video-extensions - MPlayer Video Playback Tests [VERIFIED, FREE]
warsow - Warsow [VERIFIED, FREE]
wine-cloth - Humus Cloth [VERIFIED, FREE]
wine-domino - Humus Domino [VERIFIED, FREE]
wine-fire2 - Humus Fire2 [VERIFIED, FREE]
wine-hdr - Humus HDR [VERIFIED, FREE]
wine-metaballs - Humus Metaballs [VERIFIED, FREE]
wine-vf2 - Humus Volumetric Fogging 2 [VERIFIED, FREE]
wine-water - Humus Water [VERIFIED, FREE]
x11perf - x11perf [VERIFIED, FREE]
xplane9 - X-Plane [VERIFIED, FREE]
yafray - YafRay [VERIFIED, FREE]

[Reactie gewijzigd door Verwijderd op 7 augustus 2024 11:42]

[CAPSLOCK2000]

De benchmark is prima, maar pas een beetje op met de artikelen die Phoronix er over schrijft. Ze hebben nog wel eens de neiging om de tests niet echt eerlijk te laten verlopen en de resultaten wat sensationeler voor te stellen dan ze zijn. Ik geloof niet dat het kwade opzet is, maar meer onkunde. Het gaat flink vooruit, maar laat je niet shockeren door oude resultaten van deze benchmark.

[Verwijderd]

Heb je een voorbeeld hiervan?

Schrijfstijl is vaak niet zo professioneel, maar de resultaten/grafieken kloppen volgens mij wel gewoon.

[CAPSLOCK2000]

Concreet kan ik me een geval herinneren waarbij ze niet dezelfde hardware gebruikten voor alle tests.

[Verwijderd]

Ideaal dat ze de test suite op CD/DVD uitbrengen. Dan hoef je alle tests appart te downloaden.

Ik vind de Phoronix Test Suite ideaal omdat je hier heel er veel testen mee kunt doen c.q. je kunt zo goed als alle benchmarks van je systeem doen.

Ik heb het al enkele keren gebruikt.

Deze CD/DVD is waarschijnlijk ook ideaal voor product reviews voor (LInux) gebruikers.

[Reactie gewijzigd door Verwijderd op 7 augustus 2024 11:42]

[PaulBloem]

| Dan hoef je alle tests appart te downloaden. |

Niet lullig bedoeld, maar hoe bedoel je dit?
Ik neem aan dat dat dan niet meer hoeft.

[CAPSLOCK2000]

Ik zie het zo:
Je loopt de computer winkel binnen, zegt "ik wil die computer of die computer, welke is beter voor ....". Je duwt je CD er in, wacht een half uur, en dan weet je of de verkoper eerlijk is geweest.

[Verwijderd]

Je kunt inderdaad een paar systemen testen onafhankelijk hoe goed of hoe slecht het OS opeen systeem installeert is. Daarbij neem je de benchmarks die je belangrijk vind c.q. belangrijk zijn voor wat je met de PC wil doen.

Je zult ook direct het de invloed van meer of minder geheugen zijn. En of een snelle processor meer winst oplevert dan extra geheugen etc.

[Verwijderd]

Als je naar de screenshot in de post kijkt zie je een aantal tabs.
De Installed tabs zijn alle tests die geïnstalleerd zijn. De rest staat in available tests.

Als je package installeert is er nog geen enkele test geïnstalleerd. Aangezien een aantal tests best groot zijn duurt het enige tijd om deze te installeren.

Gezien de grote van vooral de games zullen die er waarschijnlijk niet op staan. De iso is 1G terwijl er veel game benchmarks bij staan van meer dan 500M (UT, Quake, X-Plane etc)

Ik heb de DVD gedownload het blijkt dat je nog alle test packages moet doenloaden. Mogelijk om er voor te zorgen dat ze actueel zijn.
Ondanks dat heeft de DVD als voordelen:
1) Het test OS inclusief setting blijft altijd gelijk
2) Je hoeft het orginele OS dat al op de PC staat niet te raken.

[Reactie gewijzigd door Verwijderd op 7 augustus 2024 11:42]

[Verwijderd]

Deze oplossing wordt ook wel een "software appliance" genoemd. Suse heeft een webservice gelanceerd om middels enkele klikken je eigen appliance te bouwen. Een minimale linux core en alle programma's en instellingen die je erbij hebben wilt.
Deze wordt online gebouwd terwijl je wacht en kun je testen in een viruele omgeving.

[Zjosh]

Ik vind dit wel een mooie oplossing om te benchen, zo kan het namelijk niets meer schelen wat voor drivers iemand geinstalleerd heeft, antivirus suites, of zelfs of er ongemerkt mallware mee draait.

[dispie]

Het is inderdaad een verwarrende titel, ik dacht heel even dat dit standaard op de live cd van een linux distributie zou komen te staan.

Maar alles wat ze bedoelen is dat het gewoon van een bootable cd/dvd of usb stick kan worden gedraaid, dan is het wel ideaal.

Nu moet ik telkens voor benchmarks Win Xp op m'n systemen zetten om alles te testen, reviews te schrijven om daarna Windows er weer af te knikkeren.

Maar ik ben benieuwd of dit me een hoop tijd zou kunnen schelen.

[Reactie gewijzigd door dispie op 7 augustus 2024 11:42]

[Verwijderd]

Hoe zinloos ben je bezig om anno 2009 en bijna 2010 te zitten testen in een antiek OS? Je doet dus veel moeite maar je benchmarks zeggen heel weinig.

Alle software en drivers zijn al enkele jaren geoptimaliseerd voor Windows Vista en soms is het zelfs een eis van de software om te kunnen draaien.

In het begin toen Vista net uitkwam Vista een achterstand had wat betreft performance was het nog zinnig om onder XP te testen om dit verschil in kaart te brengen en dichter bij de echte performance van de hardware te komen. Echter is dat alweer een flinke tijd geleden en staat de opvolger van Vista alweer voor de deur.

Dit performance verschil werd deels veroorzaakt door het OS zelf (meer beveiligingslagen dus meer overhead dus mindere performance) maar voor het overgrote deel doordat de drivers niet geoptimaliseerd waren. Binnen een jaar hebben vrijwel alle fabrikanten hun drivers geoptimaliseerd voor Vista.

Daarnaast kun je natuurlijk ook gewoon Windows erop laten staan, waarom zou je het steeds weer eraf halen? Zodat je stoer kunt doen door te claimen geen Windows op je PC te hebben? Ik vind het niet echt stoer als je continu zinloos aan het herinstalleren bent maar dat kan aan mij liggen.

Ook is het niet zo alsof dit de eerste benchmarks ooit zijn die beschikbaar zijn onder Linux, er zijn al tijden goede benchmarks beschikbaar. Probleem is echter dat je die benchmarks nooit kunt gebruiken voor reviews. Dit omdat het niet aansluit bij de waarschijnlijke doelgroep (die voornamelijk Windows zullen gebruiken en dat een enorm verschil kan betekenen) en omdat je niet kunt vergelijken met andere reviews.

[Reactie gewijzigd door Verwijderd op 7 augustus 2024 11:42]

[BadRespawn]

"Hoe zinloos ben je bezig om anno 2009 en bijna 2010 te zitten testen in een antiek OS?"

Winxp is niet zo antiek dat het niet nog steeds op meer PCs is geinstalleerd dan Vista, dus is het wel zinlvol om met Winxp te benchmarken.


Vista market share climbs, Windows XP remains dominant OS
http://www.tgdaily.com/content/view/41581/113/
"...Windows XP, which remains the dominant operating system in the market, dropped from 63.76% to 63.67%..."

[Verwijderd]

Een bericht van een half jaar oud zonder bron zegt niet heel veel.

De cijfers die ze daar geven zijn dus niet te controleren, daarnaast is het me niet echt duidelijk wat ze bedoelen met die cijfers. Welke uitleg ik er ook aan geef, de cijfers lijken me niet echt realistisch, dus ik snap niet wat ze bedoelen.