LSI MegaRAID SAS 9260-4i (MRSAS9260-4I/KIT)

Specs
Four internal SATA+SAS ports
One mini-SAS SFF-8087 x4 connector
6Gb/s throughput per port
LSISAS2108 RAID-on-Chip (ROC) 800MHz PowerPC®
Low-profile MD2 form factor (6.6” X 2.536”)
x8 PCI Express 2.0 host interface
512MB 800MHz ECC DDRII cache, 72b arrangement (5) 64Mx16
Size of flash ROM for firmware 8Mbytes
Optional battery backup unit (direct attach)
Connect up to 32 SATA and/or SAS devices
RAID levels 0, 1, 5 and 6
RAID spans 10, 50 and 60
Auto-resume on rebuild
Auto-resume on reconstruction
Online Capacity Expansion (OCE)
Online RAID Level Migration (RLM)
SafeStore™ Encryption Services
Instant secure erase
SSD support with SSD Guard™
Global and dedicated hot spare with revertible hot spare support
-Automatic rebuild
-Enclosure affinity
-Emergency SATA hot spare for SAS arrays
Single controller multipathing (failover)
II/O load balancing
Comprehensive RAID management suite
Performance
-Maximum reads: 2,875MB/s
-Maximum writes: 1,850MB/s
PCI Express 2.0 provides faster signaling for high-bandwidth applications
3Gb/s SATA 3.0 and 6Gb/s SAS 2.0
SafeStore Encryption Services for more secure data protection

Waarom deze kaart?
Wij zijn op zoek naar een nieuwe RAID-kaart die onze Areca 1212 kaarten kan gaan vervangen. Onze vereisten zijn: goede stabiliteit. Snelheid is leuk, maar de meeste hardware RAID-kaarten zijn snel genoeg. Veel van onze servers draaien zelfs nog in Linux software RAID, wat ook snel genoeg is. De kaart moet goed draaien onder Linux (Debian en Ubuntu, 64bits).

Onze setup
Wij hebben een ietwat oudere Asus RS120-E4 server om mee te testen. De server heeft 4 hotswappable harddrive bays, waar wij elk eem WD RE3 schijf in hebben gestopt. Als raidkabel hebben wij de 3Ware 8087 kabel (CBL-SFF8087OCF-05M, Zercom.nl, art. nr. 161261). De server heeft bios versie 1004, met een Intel Quad Q6600 2,4Ghz CPU. Wij hebben de kaart zonder battery, dus bij stroomuitval kan dit tot gegevensverver (al is de default wel met WriteThrough, dus ERG langzaam, maar veilig). Wij hebben de optie Writeback aangezet, aangezien in een datacenter de electra vrij goed gegarandeerd is.

Firmware update
De kaart werd uitgeleverd met een oude firmware 12.0.1-0057 (juli 2009). Wij hebben de kaart geflashed ( (versie 12.3.0-0022 van 29 januari 2010) vanuit een Ubuntu live-cd, voordat wij iets hadden geconfigureerd aan de RAID. Er zijn geen .deb installatiebestanden beschikbaar voor Debian/Ubuntu varianten, dus de utility was. Na de flash had de kaart de volgende info::

Firmware Version 2.30.03-0775
FW Package version 12.3.0-0022
BIOS 3.09
WebBIOS 5.0-8-Rel
NVRAM size 32KB
MinStripeSize 8KB
MaxStripeSize 1MB

WebBIOS
Tijdens de boot, kun je via CTRL-H in het menu komen. Het is ook wel echt een soort BIOS menu. Er is een mogelijkheid tot het gebruiken van een muis, maar die werkte bij mij niet goed. Dus maar gewoon met het toetsenbord. Via de configuratie gekozen voor RAID6, gebruikmakende van de 4 schijven. Er is dan 930,5GB beschikbaar.

Software
Wij willen de kaart gebruiken met Debian Lenny 5.0 en Ubuntu LTS 8.04 en straks 10.04, alles 64bits. Debian Lenny 5.0.4 ziet de kaart helaas niet. Ubuntu 9.10 live-cd ziet de kaart wel correct. Aangezien debian Squeeze 6.0 binnenkort uitkomt, hebben we testing gepakt. De kernel hiervan is een 2.6.32-trunk-amd64 versie.

Benchmarks
Vooraf even melden: de Asus server heeft een PCI-e 8x slot, wat dus niet op PCI-e 2.0 draait. Feitelijk is er dus maar de helft aan bandbreedte beschikbaar op de PCI-e-bus voor de RAID-kaart.
Bonnie++ geeft op RAID6 de volgende resultaten:
Version 1.96 ------Sequential Output------ --Sequential Input- --Random-
Concurrency 1 -Per Chr- --Block-- -Rewrite- -Per Chr- --Block-- --Seeks--
Machine Size K/sec %CP K/sec %CP K/sec %CP K/sec %CP K/sec %CP /sec %CP
debian 16G 528 99 133557 30 64870 12 2524 75 258659 15 268.0
7
Latency 15585us 956ms 295ms 193ms 676ms 662ms
Version 1.96 ------Sequential Create------ --------Random Create--------
debian -Create-- --Read--- -Delete-- -Create-- --Read--- -Delete--
files /sec %CP /sec %CP /sec %CP /sec %CP /sec %CP /sec %CP
16 +++++ +++ +++++ +++ +++++ +++ +++++ +++ +++++ +++ +++++ +++
Latency 404us 609us 631us 4208us 123us 132us
1.96,1.96,debian,1,1267530075,16G,,528,99,133557,30,64870,12,2524,75,258659,15,2
68.0,7,16,,,,,+++++,+++,+++++,+++,+++++,+++,+++++,+++,+++++,+++,+++++,+++,15585u
s,956ms,295ms,193ms,676ms,662ms,404us,609us,631us,4208us,123us,132us

Wat valt op? Write per character is erg laag. Aangezien dit in de praktijk niet echt voorkomt en de rest wel ok is, laten we dit maar voor wat het is. De Read is vooral goed met bijna 260MB/s. De performance levels zijn vergelijkbaar met onze Areca 1212 kaart op een nieuwere ASUS RS120-E5/PA4 server.

Reliability
Wij hebben er een aantal keer een schijf uit getrokken. Je merkt er op het piepen van de RAID-kaart na niets van, maar met een drive minder draait alles als Partially Degraded. Leuker: 2 drives eruit halen. Alles blijft stabiel, en de drives komen weer online als je ze er weer in stopt. Rebuilden start dan automatisch.