Stroomstoring legt Europese hostingdiensten Amazon deels plat

Als gevolg van een stroomstoring heeft een datacenter van Amazon in Dublin in de nacht van zondag op maandag zonder elektriciteit gezeten. Als gevolg hiervan waren veel sites die bij Amazons Elastic Cloud-dienst werden gehost offline.

De stroomstoring ontstond nadat een transformatorhuisje van het datacenter werd geraakt door blikseminslag. Door de inslag ontstond een explosie, gevolgd door brand. Hoewel een stroomonderbreking doorgaans zou moeten worden overgepakt door een noodgenerator, bleek dat de impact zo krachtig was geweest dat ook het controlesysteem van de stroomfases werd lamgelegd. Dit systeem zorgt ervoor dat de noodgenerator wordt gesynchroniseerd. Zonder deze fasesynchronisatie kunnen generators niet automatisch worden ingeschakeld, waardoor een handmatige actie was vereist.

Volgens Amazon ontstond de storing zondagavond rond 20 uur en waren de gevolgen maandagochtend nog niet helemaal opgelost. Door de storing waren zowel de Elastic Compute Cloud als de Relational Database Service van Amazon offline. Hoewel de stroom in het datacenter binnen enkele uren was hersteld, bleek dat het terug online brengen van de diverse instances langer duurde dan gedacht. Een deel van de instances kwam vanzelf weer online, maar het resterende deel moest hierbij geholpen worden. Rond half zeven maandagochtend was 75 procent van de instances van de zogenoemde Availablity Zone van Amazon weer beschikbaar. Op het moment van publicatie waren de gevolgen van de storing nog niet overal verholpen.

Amazon heeft het bewuste datacenter in Dublin in 2008 in gebruik genomen. Volgens het bedrijf zouden hiermee vooral Europese bedrijven geholpen zijn, die niet langer aangewezen waren op een datacenter in de VS als zij met Amazon in zee wilden gaan. Een locatie in Europa zou niet alleen leiden tot lagere responstijden, maar mogelijk ook in sommige gevallen noodzakelijk zijn; bijvoorbeeld omdat data Europa niet mag verlaten. Microsoft heeft om dezelfde reden een datacenter in Dublin, dat naar verluidt ook is getroffen door de stroomstoring. Hierdoor zouden BPOS-klanten problemen hebben gekregen. Microsoft heeft in Amsterdam ook een datacenter, waardoor Nederlandse klanten waarschijnlijk geen hinder hebben ondervonden.

Hoewel veel bedrijven de uptime van de clouddiensten bij Amazon en soortgelijke aanbieders prijzen, is dit de tweede storing bij Amazon in korte tijd. In april dit jaar werd de aanbieder ook al getroffen door een forse downtime van zijn clouddiensten. De problemen bij het Elastic Compute Cloud-platform van Amazon zouden destijds zijn ontstaan door een foutieve upgrade-procedure, vermoedelijk het gevolg van een menselijke fout.

Na de storing in april heeft Amazon zijn excuses aangeboden aan zijn klanten. Ook beloofde het bedrijf dat klanten die door de storing zijn getroffen compensatie krijgen; zij kunnen tien dagen kosteloos gebruikmaken van Amazons clouddiensten. Het is overigens nog maar de vraag of Amazon bij de storing van afgelopen nacht het boetekleed aantrekt. Het bedrijf zou kunnen stellen dat het al het mogelijke doet om de uptime te garanderen, maar dat er tegen overmacht door weersinvloeden weinig is te doen.

Klanten die Amazon op basis van de service level agreements willen aanspreken op zijn verantwoordelijkheden, komen mogelijk ook van een koude kermis thuis. Amazon heeft als voorwaarde in zijn SLA opgenomen dat, om in aanmerking te komen voor de compensatieregeling, de storing diverse Availablity Zones moet hebben getroffen en de beschikbaarbeid op jaarbasis beneden de 99,95 procent moet zijn gezakt, wat neerkomt op ruim 4 uur downtime. Hoewel de storing zich in een datacenter voordeed, beschikt de faciliteit in Dublin over drie van dergelijke Availability Zones. Het is niet bekend of al deze drie zones gelijktijdig en langdurig onbeschikbaar zijn geweest. Amazon adviseert overigens om een failover in te richten in een datacenter in een andere geografische regio om downtime als gevolg van een storing in een andere regio te beperken, al betekent dit voor veel bedrijven wel een forse stijging van de kosten.