Fotoverslag serveronderhoud 24-11-2006

Op kantoor hebben we de niet gelukt was. De oude Artemis, die enige tijd terug al

Als eerste hebben we de oude Artemis uit het rek getrokken.

De tweede taak was dus het vervangen van MS2; het plan was vrij simpel aangezien de meeste machines meer dan één voeding hebben waardoor je deze live kan omprikken. Korte samenvatting: een hoop kabels en een tijdelijk stekkerblok :

Tijdelijke voeding voor een deel van het rek.

Apollo sloeg alarm nadat één van de voedingen van zijn kabel was beroofd.

Alle stekkers zijn zonder downtime omgeprikt naar de nieuwe masterswitch.

Als laatste dachten we even de twee nieuwe webservers te plaatsen:

De onderdelen van de rackmountkit.

De twee nieuwe aanwinsten, Alectrona en Adrastos.

We moeten nog opruimen..

Tijdens het wegwerken van de kabels van de nieuwgeplaatste webservers, ging het helaas mis. De kabel tussen Apollo en Apolloslet, die het schijvenarray voor de database bevat, bleek niet goed vastgeschroefd te zijn de vorige keer en raakte los. Het live lostrekken van 16 schijven bleek iets waar MySQL nadrukkelijk minder van gecharmeerd was en luidde het begin van een lange nacht in.

Innodb doet verwoede pogingen om de problemen met behulp van zijn logfiles op te lossen.

Een aantal tabellen heeft het onverwacht wegvallen van de harde schijven niet overleefd. Onder andere de tabellen die forumberichten en de sessiedata bevatten, waren corrupt geraakt en moesten worden hersteld. Tijdens ons bezoek aan Redbus hebben we twee pogingen gedaan om de database te restoren, helaas slaagde MySQL er keer op keer niet in om de database geheel te herstellen: na het herstellen werden we getrakteerd op een tupels weggegooid werden.

Uiteindelijk zijn we om half elf naar huis vertrokken terwijl in een screen de backup van 's ochtends vijf uur werd teruggezet. Eenmaal thuis gekomen konden na wat eenvoudige aanpassingen met betrekking tot de primary keys de laatste brokjes verloren data weer handmatig worden teruggezet met behulp van een brakke dump van net na de crash.

De laatste zes aanwinsten: Alectrona, Adrastos, Astraeus, Aphaea, Apollo & Apolloslet.

Reacties (24)

[Depress]

Lees ik dat goed. Staat op het schermpje van apollo For The Win?

[PcDealer]

Fan Treshold Warning

[Verwijderd]

Nee joh, dat was storing, Apollo was dus in de war

Fuck The What?

[pietje63]

Fuck The Whore!

[Verwijderd]

dat was geen vraag maar WTF in omgekeerde volgorde

[Verwijderd]

WTF is toch ook een vraag

[bigoldie]

Ja, maar meestal aan je zelf

[Jo0Lz]

Yep. FTW!!

[Verwijderd]

spijtig dat het budgetair kostelijk is maar, is het geen tijd voor een upgrade naar een deftige db, oracle 10g ?

[Verwijderd]

Hee, dat spel je verkeerd: dat moet dan DB2 Viper zijn.

[jealma]

Volgens het artikel nieuws: 'SQL Server biedt superieure veiligheid tegenover Oracle' is de security van oracle brak, dus daarom geen upgraden

[GX]

Tsja, als je toch naar Windows moet voor fatsoenlijk support van een database ...

[Verwijderd]

apolloslet

[jwpmzijl]

Hé het forum ligt plat. Mysql vind dat er te veel mensen toegang tot de data willen hebben. Ik vrees dat op dit moment een systeembeheerder overuren aan het maken is.

[Viper®]

Het 'plug-and-playen' van je 16 schijfs disc-array vindt mySql nooit grappig

[Cybergamer]

Hoeveel servers heeft Tweakers.net nu ? En wat doen ze allemaal ?

[Robin]

Tweakers.net heeft een groot aantal servers in beheer, waarvan de servers die *.tweakers.net draaien allemaal in het statistiekenoverzicht staan: http://tweakers.net/stats. Daarnaast draaien er op het kantoor een aantal servers, waaronder een testserver en nog wat zut die zaken op het kantoor draaiende houden. We hebben dus een vrij veel servers, maar niet allemaal hangen ze bij Redbus in het rack.

[M@rijn]

En dan vraag ik me weer af welke dan allemaal? Buiten t.net?

[moto-moi]

we hebben 1 development server op kantoor staan, de oude Ares, Abaris en Aeolus voor het benchen van servers, en op dit moment ligt de volgende generatie van Asclepius ook op kantoor te wachten op een hd transplantatie.

[dominic]

Da's apart, wij mochten bij Redbus Interhouse geen eigen stekkerblokken gebruiken. Jullie wel?

[moto-moi]

Als het niet mag zullen ze dat wel zeggen

Plus dat dat ding maar een minuut of 10 eraan heeft gehangen. Als definitieve oplossing zou ik het zeker niet adviseren.

[XplodingForce]

Waarom heeft Apollo geen naamstickertje?

[moto-moi]

Omdat ik niet verwacht had zo snel weer een stel dell's op te hangen, elke dell roept <naam>.tweakers.net in zijn display, alleen duurde ons dat even wat te lang dus hebben we op kantoor de twee webservers ook maar stickers gegeven.