Last minute driver en firmware updates
Vlak nadat het benchen van de HighPoint RocketRAID 1820A was voltooid, werd er door HighPoint een nieuwe driver voor deze kaart vrijgegeven. Driver versie 1.13 zou volgens de makers een betere performance leveren dan de versie 1.12 waarmee onze tests waren gedraaid. Omdat een complete hertoetsing van de RocketRAID 1820A in alle RAID-configuraties veel tijd zou vergen, werden alleen de tests in RAID 5 met acht schijven herhaald. De resultaten wijzen uit dat driver 1.13 gemiddeld zo'n 4,5 procent beter presteert dan versie 1.12. De verbeterde resultaten in RAID 5 met acht schijven zijn al in de tabellen en grafieken van de voorgaande pagina's verwerkt. De resultaten in de andere RAID-levels mag je met een denkbeeldige 4,5 procent verhogen. In ons oordeel over het prestatieniveau van de RocketRAID 1820A brengt de nieuwe driver geen verandering. De RocketRAID is een goede middenmoter, maar de stap naar de top kan hij niet maken. Inmiddels is driver 1.13 opgevolgd door versie 1.14. Deze kent volgens het changelog geen wijzigingen die invloed hebben op de performance.
Een procent of vier, vijf snelheidsverbetering is mooi meegenomen maar niet direct iets waar wij opgewonden van raken. Anders is dat wanneer een driver- of firmware-update zeer significante snelheidsverbetering bewerkstelligt. Eerder in deze review hebben we al gesproken over de tegenvallende random I/O performance van de Areca ARC-1120 en de verbetering die Areca op dit gebied in petto heeft. De slechte random I/O-prestaties van de Areca-kaarten kwam voor het aan het licht in een recente review van de Tom's Hardware Guide, waar de ARC-1120 (naar onze mening overigens onterecht) een matige beoordeling kreeg en werd afgerekend op slechte prestaties in de IOMeter fileserver simulatie.
Vlak voor de publicatie van dit artikel ontvingen we van Areca een beta van hun nieuwste firmware voor de ARC-1120 met de vraag of wij verbeteringen van de random I/O prestaties konden bevestigen. De resultaten van onze tests met vier schijven in RAID 5 en RAID 10 wijzen uit dat de performance in workloads met veel willekeurige I/O en lange I/O queues inderdaad zijn opgelost. Waar de prestaties met de oude firmware al bij een queue-lengte van acht of meer uitstaande I/O's aan het plafond zat, schaalt de nieuwe firmware helemaal door tot aan de grootste queue-lengte van de test. De verbeteringen zijn het grootst in RAID 5 (groene lijnen), maar ook de winst in RAID 10 (rode lijnen) mag er zijn.

Bekijken we het complete plaatje met de prestaties van alle andere adapters, dan blijkt de positie van de Areca ARC-1120 dankzij de nieuwe firmware enorm te zijn verbeterd. Met de oude firmware was hij de traagste kaart in de IOMeter fileserver simulatie, nu moet de ARC-1120 alleen nog de 3ware Escalade 9500S-8 voor zich dulden.

De aanzienlijke verbeteringen van de I/O performance zijn niet beperkt tot synthetische benchmarks zoals de IOMeter fileserver simulatie, ook in onze workloadsimulaties laten de prestaties vaak een behoorlijke progressie zien. Helaas wordt de jubelstemming enigzins bedorven door licht afgenomen RAID 10-prestaties in de Desktop en Workstation StorageMark 2004 Index. De RAID 5-prestaties noteren daarentegen een forse stijging van 17,8 en 15,6 procent in de desktop en workstation index, en dat terwijl deze workloads vrij beperkte I/O queues kennen. In de onderstaande tabellen zijn naast de resultaten van de Areca ARC-1120 in RAID 5 en RAID 10 met de nieuwe en oude firmware ook de resultaten van het best presterende alternatief weergegeven. De RAID 5-performance van de ARC-1120 was in deze benchmarks al onovertroffen, nu is hij helemaal een klasse apart.
In de Server StorageMark 2004 Index zet de nieuwe firmware zowel in RAID 5 als RAID 10 snellere responsetijden op de klok. In RAID 10 is de winst 3,0 procent, in RAID 5 is de nieuwe firmware gemiddeld 15,0 procent sneller. De voorsprong ten opzichte van de andere adapters is in RAID 5 wederom enorm.
De prestatieverbeteringen in de individuele tests uit de server suite lopen uiteen van een klein verliezen tot aanzienlijke verbetering van meer dan 30 procent. De prestaties in RAID 10 zijn lang niet altijd beter. In acht van de vijftien tests is de nieuwe firmware sneller, in twee tests presteert hij exact gelijk. In RAID 5 is de nieuwe firmware elf keer sneller en één keer gelijk. Gelukkig wordt de winst vooral gemaakt in de scenario's waar de Areca ARC-1120 eerst matig tot slecht presteerde. In het high concurrency disk-to-disk backupscenario verliest de ARC-1120 iets van zijn overigens zeer stevige positie in RAID 10, en pakt hij dankzij de nieuwe firmware de leiding in RAID 5.
Een zeer forse verbetering van de RAID 5-prestaties wordt geboekt in de fileserver medium filesize benchmark. Ten opzichte van de numero twee, de BC4852 van RAIDCore, is de Areca ARC-1120 maar liefst 41 procent sneller. De RAID 10-performance is vrijwel gelijk gebleven met de nieuwe firmware.
Een kleine verbetering is er ook voor de RAID 10-prestaties in het MySQL data drive-scenario. Het verschil ten opzichte van de koploper in de RAID 10-vergelijking blijft echter onveranderd groot. De RAID 5-performance gaat er namelijk weer behoorlijk op vooruit en staat nu bijna op kampioensniveau. De prestaties in RAID 5 zijn zelfs beter dan die in RAID 10. Vergelijken we de RAID 5-prestaties met de snelste RAID 10-adapter dan doet de Areca ARC-1120 het niet eens zo slecht.
Tenslotte een belichting van de nieuwe situatie in het high concurrency Exchange 2003-scenario. De RAID 10-prestaties namen behoorlijk toe deze benchmark, maar liggen nog steeds ver achter op de LSI MegaRAID SATA 150-4/6. In RAID 5 is de Areca ARC-1120 dankzij de nieuwe firmware op gelijk niveau gekomen met de LSI MegaRAID SATA 150-4/6, en dat zijn prestaties van het hoogste niveau. Ook in dit scenario presteert RAID 5 beter dan RAID 10.
De beta firmware voor de Areca ARC-1120 kan niet voorkomen dat de prestaties in RAID 10 in sommige tests nog steeds achter blijven bij de concurrentie. Wat betreft het gebruik in RAID 5, sowieso het belangrijkste RAID-level, hebben de Areca-adapters feitelijk geen zwakke punten meer. De nieuwe firmware heeft vrijwel alle achterstanden weggewerkt. In de scenario's waar eerst matige tot slechte prestaties werden geleverd, behoort de ARC-1120 nu tot de snelste adapters. We zullen de 16-poorts Areca ARC-1160 binnenkort met de nieuwe firmware gaan testen. Daarbij zullen alle RAID-levels opnieuw gebenched worden en zullen er tevens tests met 512MB en 1GB cache gedaan worden.
| Desktop StorageMark 2004 Index | |||
|---|---|---|---|
| # | RAID | Controller | Score (StorageMarks) |
| 8 | RAID 5 | HighPoint RocketRAID 1820A 1.13 | |
| 8 | RAID 5 | HighPoint RocketRAID 1820A 1.12 | |
| Workstation StorageMark 2004 Index | |||
|---|---|---|---|
| # | RAID | Controller | Score (StorageMarks) |
| 8 | RAID 5 | HighPoint RocketRAID 1820A 1.13 | |
| 8 | RAID 5 | HighPoint RocketRAID 1820A 1.12 | |
| Server StorageMark 2004 Index | |||
|---|---|---|---|
| # | RAID | Controller | Score (StorageMarks) |
| 8 | RAID 5 | HighPoint RocketRAID 1820A 1.13 | |
| 8 | RAID 5 | HighPoint RocketRAID 1820A 1.12 | |
Een procent of vier, vijf snelheidsverbetering is mooi meegenomen maar niet direct iets waar wij opgewonden van raken. Anders is dat wanneer een driver- of firmware-update zeer significante snelheidsverbetering bewerkstelligt. Eerder in deze review hebben we al gesproken over de tegenvallende random I/O performance van de Areca ARC-1120 en de verbetering die Areca op dit gebied in petto heeft. De slechte random I/O-prestaties van de Areca-kaarten kwam voor het aan het licht in een recente review van de Tom's Hardware Guide, waar de ARC-1120 (naar onze mening overigens onterecht) een matige beoordeling kreeg en werd afgerekend op slechte prestaties in de IOMeter fileserver simulatie.
Vlak voor de publicatie van dit artikel ontvingen we van Areca een beta van hun nieuwste firmware voor de ARC-1120 met de vraag of wij verbeteringen van de random I/O prestaties konden bevestigen. De resultaten van onze tests met vier schijven in RAID 5 en RAID 10 wijzen uit dat de performance in workloads met veel willekeurige I/O en lange I/O queues inderdaad zijn opgelost. Waar de prestaties met de oude firmware al bij een queue-lengte van acht of meer uitstaande I/O's aan het plafond zat, schaalt de nieuwe firmware helemaal door tot aan de grootste queue-lengte van de test. De verbeteringen zijn het grootst in RAID 5 (groene lijnen), maar ook de winst in RAID 10 (rode lijnen) mag er zijn.

Bekijken we het complete plaatje met de prestaties van alle andere adapters, dan blijkt de positie van de Areca ARC-1120 dankzij de nieuwe firmware enorm te zijn verbeterd. Met de oude firmware was hij de traagste kaart in de IOMeter fileserver simulatie, nu moet de ARC-1120 alleen nog de 3ware Escalade 9500S-8 voor zich dulden.

De aanzienlijke verbeteringen van de I/O performance zijn niet beperkt tot synthetische benchmarks zoals de IOMeter fileserver simulatie, ook in onze workloadsimulaties laten de prestaties vaak een behoorlijke progressie zien. Helaas wordt de jubelstemming enigzins bedorven door licht afgenomen RAID 10-prestaties in de Desktop en Workstation StorageMark 2004 Index. De RAID 5-prestaties noteren daarentegen een forse stijging van 17,8 en 15,6 procent in de desktop en workstation index, en dat terwijl deze workloads vrij beperkte I/O queues kennen. In de onderstaande tabellen zijn naast de resultaten van de Areca ARC-1120 in RAID 5 en RAID 10 met de nieuwe en oude firmware ook de resultaten van het best presterende alternatief weergegeven. De RAID 5-performance van de ARC-1120 was in deze benchmarks al onovertroffen, nu is hij helemaal een klasse apart.
| Desktop StorageMark 2004 Index | |||
|---|---|---|---|
| # | RAID | Controller | Score (StorageMarks) |
| 4 | RAID 10 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 10 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 10 | 3ware Escalade 9500S-8 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 5 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 5 | RAIDCore BC4852 | |
| Workstation StorageMark 2004 Index | |||
|---|---|---|---|
| # | RAID | Controller | Score (StorageMarks) |
| 4 | RAID 10 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 10 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 5 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 10 | 3ware Escalade 9500S-8 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 5 | HighPoint RocketRAID 1820A | |
In de Server StorageMark 2004 Index zet de nieuwe firmware zowel in RAID 5 als RAID 10 snellere responsetijden op de klok. In RAID 10 is de winst 3,0 procent, in RAID 5 is de nieuwe firmware gemiddeld 15,0 procent sneller. De voorsprong ten opzichte van de andere adapters is in RAID 5 wederom enorm.
| Server StorageMark 2004 Index | |||
|---|---|---|---|
| # | RAID | Controller | Score (StorageMarks) |
| 4 | RAID 10 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 10 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 10 | 3ware Escalade 8506-8 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 5 | RAIDCore BC4852 | |
De prestatieverbeteringen in de individuele tests uit de server suite lopen uiteen van een klein verliezen tot aanzienlijke verbetering van meer dan 30 procent. De prestaties in RAID 10 zijn lang niet altijd beter. In acht van de vijftien tests is de nieuwe firmware sneller, in twee tests presteert hij exact gelijk. In RAID 5 is de nieuwe firmware elf keer sneller en één keer gelijk. Gelukkig wordt de winst vooral gemaakt in de scenario's waar de Areca ARC-1120 eerst matig tot slecht presteerde. In het high concurrency disk-to-disk backupscenario verliest de ARC-1120 iets van zijn overigens zeer stevige positie in RAID 10, en pakt hij dankzij de nieuwe firmware de leiding in RAID 5.
| Disk-to-Disk Backupserver - High concurrency | |||
|---|---|---|---|
| # | RAID | Controller | Score (IOps) |
| 4 | RAID 10 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 10 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 10 | 3ware Escalade 8506-8 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 5 | LSI MegaRAID SATA 150-4 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.33 | |
Een zeer forse verbetering van de RAID 5-prestaties wordt geboekt in de fileserver medium filesize benchmark. Ten opzichte van de numero twee, de BC4852 van RAIDCore, is de Areca ARC-1120 maar liefst 41 procent sneller. De RAID 10-performance is vrijwel gelijk gebleven met de nieuwe firmware.
| Fileserver - Medium filesize | |||
|---|---|---|---|
| # | RAID | Controller | Score (IOps) |
| 4 | RAID 10 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 10 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 10 | 3ware Escalade 8506-8 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 5 | RAIDCore BC4852 | |
Een kleine verbetering is er ook voor de RAID 10-prestaties in het MySQL data drive-scenario. Het verschil ten opzichte van de koploper in de RAID 10-vergelijking blijft echter onveranderd groot. De RAID 5-performance gaat er namelijk weer behoorlijk op vooruit en staat nu bijna op kampioensniveau. De prestaties in RAID 5 zijn zelfs beter dan die in RAID 10. Vergelijken we de RAID 5-prestaties met de snelste RAID 10-adapter dan doet de Areca ARC-1120 het niet eens zo slecht.
| MySQL - Data drive | |||
|---|---|---|---|
| # | RAID | Controller | Score (IOps) |
| 4 | RAID 10 | 3ware Escalade 9500S-8 | |
| 4 | RAID 5 | LSI MegaRAID SATA 150-4 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 5 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 10 | Areca ARC-1120 v1.35ß | |
| 4 | RAID 10 | Areca ARC-1120 FW1.33 | |
Tenslotte een belichting van de nieuwe situatie in het high concurrency Exchange 2003-scenario. De RAID 10-prestaties namen behoorlijk toe deze benchmark, maar liggen nog steeds ver achter op de LSI MegaRAID SATA 150-4/6. In RAID 5 is de Areca ARC-1120 dankzij de nieuwe firmware op gelijk niveau gekomen met de LSI MegaRAID SATA 150-4/6, en dat zijn prestaties van het hoogste niveau. Ook in dit scenario presteert RAID 5 beter dan RAID 10.
| Exchange 2003 - High concurrency | |||
|---|---|---|---|
| # | RAID | Controller | Score (IOps) |
| 4 | RAID 10 | LSI MegaRAID SATA 150-4 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 5 | LSI MegaRAID SATA 150-4 | |
| 4 | RAID 10 | Areca ARC-1120 FW1.35ß | |
| 4 | RAID 10 | Areca ARC-1120 FW1.33 | |
| 4 | RAID 5 | Areca ARC-1120 FW1.33 | |
De beta firmware voor de Areca ARC-1120 kan niet voorkomen dat de prestaties in RAID 10 in sommige tests nog steeds achter blijven bij de concurrentie. Wat betreft het gebruik in RAID 5, sowieso het belangrijkste RAID-level, hebben de Areca-adapters feitelijk geen zwakke punten meer. De nieuwe firmware heeft vrijwel alle achterstanden weggewerkt. In de scenario's waar eerst matige tot slechte prestaties werden geleverd, behoort de ARC-1120 nu tot de snelste adapters. We zullen de 16-poorts Areca ARC-1160 binnenkort met de nieuwe firmware gaan testen. Daarbij zullen alle RAID-levels opnieuw gebenched worden en zullen er tevens tests met 512MB en 1GB cache gedaan worden.
Volgende pagina (Gebruikerservaringen - 31/32)
Inhoudsopgave
- Inleiding
- Testdoelstelling en testveld
- Anatomie van een RAID-adapter (1)
- Anatomie van een RAID-adapter (2)
- SATA-controllers en I/O processors
- 3ware Escalade 8506-8
- 3ware Escalade 9500S-8
- Areca ARC-1120
- HighPoint RocketRAID 1820A
- LSI Logic MegaRAID SATA 150-4/6
- Promise FastTrak S150 SX4
- RAIDCore BC4852
- Featurevergelijking (1)
- Featurevergelijking (2)
- Niet geteste alternatieven
- Testverantwoording
- Toegangstijden en STR's
- ATTO STR's en cache transfer rates
- Schrijf STR en CPU-belasting
- Random I/O performance
- Desktopprestaties
- Workstationprestaties
- Serverprestaties (1)
- Serverprestaties (2)
- Serverprestaties (3)
- Serverprestaties (4)
- RAID 6-en RAID 50-prestaties
- Write-thru en degraded array performance
- SATA vs SCSI RAID
- Last minute driver en firmware updates
- Gebruikerservaringen
- Conclusie
- Reacties (66)
