Uptime en Downtime

Athena

Rond 4 uur vanmiddag is onze lieve dame Athena helaas gecrasht. Oorzaak is nog onbekend, maar hij doet het nu weer. Na de reboot waren er problemen met de database, deze bleek enkele fouten te bevatten en moest gerepareerd worden. Op het moment draait alles weer.

Athena:~$ 6:05pm up 2:23, 6 users, load average: 0.12, 0.21, 0.25

Aphrodite

Toch nog reden voor een beetje vrolijkheid vandaag, deze lieve dame heeft de mooie uptime van 75 dagen bereikt.

Aphrodite:~$ 6:07pm up 75 days, 14:02, 3 users, load average: 0.84, 1.04, 1.18

De database-server die Athena gaat vervangen is vandaag besteld en de onderdelen zijn bijna onderweg. Over een aantal weken kunnen wij ons serverpark dus uit gaan breiden met deze server, waardoor Athena een webserver wordt, en we verder kunnen werken aan de loadbalancingtechnieken en de redundancy van het serverpark. De configuratie van de nieuwe databaseserver heeft een kleine wijziging ondergaan. Er komt nu een Mylex eXtremeRAID 1100 in te hangen in plaats van een DPT SmartRAID VI Century.

Reacties (51)

Maar waarom word de databaseserver nu alweer vervangen? Is hij niet toereikend? Was dat van te voren niet te voorzien, dat hij niet snel genoeg was? Zolang draait deze machine nog niet toch? En wat gebeurt er met deze server?

Maar waarom word de databaseserver nu alweer vervangen? Is hij niet toereikend? Was dat van te voren niet te voorzien, dat hij niet snel genoeg was? Zolang draait deze machine nog niet toch?

Nou, we groeien nogal snel. Bovendien komt er een derde site bij te draaien en is er nu wat meer poen voorhanden voor RAID controllertjes en snelle Cheetah's.

Aphrodite heeft 't al behoorlijk druk met webserven, dus een tweede webserver is gewenst.

En wat gebeurt er met deze server?

Artemis: database, mail, ircd, reverse proxy (load balancing en caching)
Aphrodite: webserver, zoals nu
Athena: webserver

Dat vraag ik me ook af.. waarom wordt die nieuwe server (Artemis?) niet de webserver en wordt onze nationale trots Athena met rust gelaten?

Webservers kun je gewoon tot in de hemel laten scalen door bakken op elkaar te stapelen. Bij een MySQL database is dat wat moeilijker, dan is een bak met twee processors, RAID en veel geheugen wel handig om te voorkomen dat we binnen enkele maanden tegen een limiet zitten.

is er qua indexering enzo dan niet het nodige te verbeteren, of loop je dan tegen limitaties van mysql aan?
ik weet van oracle dat de performance-uit-doos nogal beroerd is en dat het na een dagje klussen door een dba flink verbeterd is allemaal.

Die indexes zitten wel goed. Als ik de index van de reacties tabel (160.000 records) afhaal dan schiet mysql meteen naar 100% en is de site niet meer vooruit te branden. Dit was ook de reden dat-ie vorige week down moest toen de indexes van de reacties tabel vaag deden. Het is geen doen om die te herbouwen als de server tegelijkertijd onder een hoge load staat.

MySQL load is op dit moment geen groot probleem en zal dat met twee CPU's ook niet snel worden.

Al overwogen gebruik te gaan maken voor een andere doos waarop oude meuk gearchiveerd gaat worden. Kan me voorstellen dat info van bijvoorbeeld een half jaar gelee in tweakland al een beetje achterhaald is. De productie-db blijft dan relatief klein en lekker rap.

oh ja, een alpha doet ook wonderen, al worden die niet door amd gesponsord

Dat is iets dat je kunt doen wanneer je tegen de limieten van de x86 multi-processor hardware aanloopt (Sun en Alpha spullen zijn veel te duur), maar die limieten zijn nog lang niet in zicht.

Op zich maakt de grootte van de database niet zo heel veel uit omdat eigenlijk alleen de laatst toegevoegde artikelen opgevraagd worden. Die kun je aan het begin van de index files zetten, dus dat is snel zoeken.

Als je bij de wat grotere ix86 servers bij de raid controllers er genoeg plakkertjes aftrekt, kom je uiteindelijk bij de naam mylex aan - 9 van de 10 keer. ibm/dell/compaq/hp allemaal.

dusseeh ik wou jullie feliciteren met jullie aankoop

as je dan nog een plakkertje verder trekt zie je dat mylex tegenwoordig van de firma ibm is.

Mogen we ook weten in welke config die cheeta's geplugd worden? RAID-5 neem ik aan ? En hoeveel Cheeta's bevolken deze RAID array dan ? En als je meer cash kan gebruiken voor de servers waar ieder van ons op leeft, organiseer dan een We Are Expanding fuifje en vraag 50 piek inkom ofzo ? Configureer de server on-site en maak er een blijde gebeurtenis van ? Make the tweakers part of tweakers.net !

Dat vraag ik me ook af.. waarom wordt die nieuwe server (Artemis?) niet de webserver en wordt onze nationale trots Athena met rust gelaten?

Artemis (?) is toch voor realgamer.nl?

Athena:~$ 6:05pm up 2:23, 6 users, load average: 0.12, 0.21, 0.25

6 users? Hmm.. en wie mogen dat zijn? Doe eens ff een 'w' Rick?

3 keer ik, 1 keer Femme en 1 Jorma en een Arjen.

Wat voor cijfer had jij op het gymnasium voor Nederlandse taal?

Athena was naar mijn mening dus echt een ZEI, vrouwelijk Enkelvoud.

[Havo mode on]
Mag het ook een zij zijn???
[/Havo mode off]

Wat een extreem vette foutmelding trouwens

ehjj kut, ik kan geen...

Grappig dat dat op een van de grootste sites van Nederland op de frontpage staat Pas maar op dat de bond tegen het vloeken het niet ziet

Dat hebben ze al gezien en nu krijg ik klachten. Ik zal een paar sterretjes plaatsen.

Of misschien een banner van de Bond tegen Vloeken er vlak onder?

Tja, ik vind dat je daar best op kan letten, als tweakers.net zich als een professionele site wil manifesteren zouden ook zulke foutmeldingen wat meer niveau moeten hebben. Hoewel, downtime is in gewoon Nederlands natuurlijk simpelweg kut

No way... die stoere foutmelding, en meer van dat soort kleine dingen geeft Tweakers.net nou juist zo'n uitstraling van "Door Tweakers Voor Tweakers", die ook terecht is, als je dan dit soort dingen zou gaan "proffessionaliseren" dan is al gauw de spontaniteit en gezelligheid verdwenen. Das pas Kut.

Wat lopen die gasten nou te zeiken?
Bijna iedereen vloekt wel eens en dan moeten wij ons in gaan houden voor die enkeling die pertinent tegen vloeken is?
Wat moet er anders staan?
Grutjes, ik kan geen verbinging maken met het databeest?
NEE! juist niet, het verwoord onze directe gevoelens: KUT! ik kan Tweakers niet bekijken.

tuurlijk nie joh, Tweakers heeft toch nog steeds een uitstraling van een "gezellige meeting over puterz", ze moeten daar toch geen "seminar over innovatie binnen de ICT" van maken! dit is juist één van de dingen die T.net groot heeft gemaakt.

Waarschijnlijk zat er ergens een memoryleak, waardoor processen geen geheugen meer kregen en de (in de kernel ingebakken) Watchdog het systeem als gecrasht beschouwde, en daarom het systeem rebootte.

hehe...
als dat Downtime kut is dan is kut Downtime..
Dus "Das pas Kut."
moet worden "Das pas downtime"

FF on topic:

Is de oorzaak nou al bekend?

Maareh... wat ga je er aan doen? Ik zit nu net een kwartiertje te lezen en ik heb ook al een keer of 3/4 die melding gehad.

[censoring mode on]
He* ***, ik kan m*n database verbinding niet tot stand brengen. Na**, het kan niet altijd meezitten?
[censoring mode off]

Max connections in MySQL was te laag. Dat is meteen opgelost door Rick.

Tja Femme,

Persoonlijk hoop ik dat je lak hebt aan de Bond tegen Vloeken. Ik stel voor om er ook nog wat volwaardige godslastering aan toe te voegen. (een eenvoudig GODVERDOMME volstaat)

en die Banner kan dan mooi naar de Bond voor het verrijken van de Nederlandse Taal. (ook wel bekend als de Bond Voor het Vloeken)

Misschien moeten we er dan een poll van maken. "Mag Tweakers.net het woordt 'kut' in een foutmelding over een falende dabase server gebruiken".

Nou kijk de reden dat kut bezwaren oproept is heel eenvoudig

Omdat de mensen hier zulke die hard computer gebruikers zijn hebben ze al in jaren geen kut meer gezien

Vandaar dat het meer een diepgeworstelde frustratie is dan een daadwerkelijke afkering tegen scheldwoorden.

Was getekend Psychiater dr Diddel

bottomline:
* 786562 looskuh

Ik had namelijk een vraag. Wat voor hardware zit er in die Artemis? Kheb de hele thread gelezen en twas nergens te vinden of mis ik iets?

Artemis: Dual PIII-733, 1GB PC133 ECC SDRAM, SuperMicro 370DLE mobo met ServerWorks ServerSet III LE chipset, Mylex eXtremeRAID 1100 RAID controller, 2 x Seagate Cheetah X15 15.000rpm Ultra160 harddisk, 2 hot swappable SCSI bays, 19" 4U rack (later evt. uitbreidbaar met een extra drive rack), 2 3Com 100Mbit NICs (naast de geïntegreerde Intel NIC op het moederbord).

En later natuurlijk nog een RealWeasel
Oh en vergeet de Ati RageII niet, voor het remote-quaken

Femme... betekent dit dat je jouw X15 uit je eigen pc moet halen?

ga boven tweakers.net bovenaan de page hangen dan about us en daar staat wel iets over de servers...

www.tweakers.net/plan.dsp?PlanID=2
www.tweakers.net/plan.dsp?PlanID=26

gewoon even bij search invullen...

In wat voor vaag slot gaat die kaart die staat afgebeeld?

Dat is een 64-bit PCI slot.

zie ook:
www.mylex.com/products/hpr/ex1100/extrmrd1100_specs.html

wat zien die kaarten er toch mooi uit

ff een vraag je hoeveel hdd komen er in en wat voor raid draaien jullie ?

2x Seagate Cheetah X15 4mb cache
Dit in een RAID-0 (of was het nou RAID-1.. hmmz) config.

Mirroring (RAID 1?).

En wat is die derde site die erbij komt te draaien?

realgamer.nl (vraag me niet waarom, maargoed)

maar waarom crasht Athena en Aphrodite niet?

wordt Athena dan zo veel meer belast? of is de software gewoon gammeler?

[mierenneukmode] maar hij doet het nu weer, je had het net over DAME Athena

Aphrodite crashed niet mee omdat het 2 afzonderlijke servers zijn, doh

Maar volgens mij zou Aphrodite toch de mysql-taken over moeten nemen als Athena ligt te slapen?

Nope, op Aphrodite is geen database aanwezig. Athena zou de taken overnemen van Aphrodite, mocht die downgaan.

Got zat ook raar te doen... Maar die gebruikt geen DB. Ik bedoel dat we allemaal internal server errors kregen.

En dan staat er powered bij AMD

Die server draait ook nog niet. De huidige twee zijn powered by Athlon 800.

Ah op die fiets...