Downtime Forum 22-06-2006

Vanwege de noodzaak van het uitvoeren van enkele controles aan forumserver Apollo gaat het forum vanmiddag tegen 16:00 uur plat. Nu begint dan ook net het voetbal dus jullie hoeven je niet te vervelen .

Hoewel sterk afhankelijk van de voortgang van de tests verwachten we de boel met een uur weer up te hebben en hopen we dat de recente problemen met Apollo weer een tijdje uit de wereld zullen zijn.

Tegelijkertijd werken we aan een vervanging van Apollo. De huidige configuratie loopt toch alweer ruim 2,5 jaar mee en staat op de nominatie om vervangen te worden. Met name het filesysteem is niet snel genoeg meer om de alsmaar groeiende database van GoT goed te behappen. Nieuwe investeringen in de verouderde SCSI-technologie lijken ons niet verstandig en ook uitbreiding van het geheugen kan de server veel goed doen. De voorlopige configuratie die we voor ogen hebben bestaat uit twee dual core AMD Opteron 280 processors, 16GB DDR-geheugen en een stuk of 16 SATA of SAS-schijven. Voor welk type schijven precies gekozen zal worden is nog niet helemaal duidelijk, storage-guru Femme is daar nog mee bezig . Het belooft in ieder geval veruit de snelste machine in ons park te worden.

Reacties (38)

Ondanks dat het natuurlijk een monster van een bak is: Is het niet slim en in verhouding om voor zo'n machine een Quad CPU config te pakken? Of is dit overkill?

De CPU-belasting is op dit moment niet het grootste probleem. Disk I/O is voor bepaalde handelingen wel een bottleneck. Dit komt doordat de database steeds verder groeit en doordat er dankzij Google AdSense meer oude topics worden opgevraagd, waarvan het waarschijnlijker is dat ze niet in de cache aanwezig zijn. Meer geheugen en snellere disks kunnen dit probleem verhelpen.

Twee dual-core processors hebben bovendien al twee keer zoveel cores als het huidige systeem. De CPU-performance zal ruimschoots voldoende zijn. Met vier sockets kom je ook weer bij hele andere behuizingen terecht, die meestal weinig ruimte bieden voor disks. De schijven moeten dan in een aparte doos wat de kosten weer verder opdrijft.

Hoe komt het dat Google Adsense voor meer opvragingen van oude topics zorgt?

GA indexeerd meestal de gehele website om advertenties te kunnen laten zien die het beste aansluiten bij de pagina waar je op dat moment bevind. En google indexeerd dat alvast zodat het tonen van de advertenties snel gaat.

Is google adsense over een tijdje klaar blijkt dat er opeens een zware overkill aan servers beschikbaar is
Kan adsense niet gewoon 's nachts indexeren?

Ja, ik vind dit ook nogal een vreemde situatie. De servers aanpassen aan de indexering van google. Kunnen requests van google niet apart afgehandeld worden ofzo?

dat gekke ding vraagt bijna continue topics op, ongeacht of ze oud of nieuw zijn, want dat weet google niet, en zo'n beetje elk topic wat er in de database staat -kan- aangepast zijn en dus andere keywords bevatten

Buiten dat, Apollo stond al voor september op de planning om vervangen te worden, dus het enige wat er nu gebeurt is dat we het iets vervroegd hebben, en niet eens zo gek veel

Alleen al het feit dat jullie (toch niet bescheiden) hardware fel belast wordt door de Google bots, die buiten GOT nog duizenden, miljoenen websites moeten afstropen; dat doet (althans mij) toch nog eens beseffen hoe walgelijk groot en complex Google's infrastructuur wel niet moet zijn...

It puts things into perspective...

@ moto-moi: Doet google dan niks met http headertjes (Last-modified ed)?

Misschien domme opmerking, maar wordt het dan niet langzaam tijd voor een leuk SANnetje met een behoorlijk presterend diskarray voor al uw storage-strubbelingen? Ja, dat is duur, maar biedt op gebied van I/Os hoofd aan deze problematiek... Losse disken in elke aparte server performt wat minder, zo te zeggen.

Femme is al op zoek naar een goede storage mogelijkheid, en SAN sluiten we i.d.d. nog niet uit

Hoe groot is de DB op dit moment -- kan er niet een zeer significante fractie, als niet geheel, gewoon in die 16 gb memory? Als orde-grootte van de DB nog een beetje in die richting ligt dan zou ik denken dat gewoon meer ram proppen (tot laten we zeggen max 64G) goedkoper en effectiever is dan een enorm diskenpakket.

Hebben jullie al eens ge-evalueerd of memcached zou kunnen helpen?

Misschien eens kijken naar een NAS of SAN? Wat dacht je van EMC? Het is een investering maar biedt ook vele mogelijkheden.

Quad core biedt bijna net zoveel voordeel en is bijna de helft goedkoper, nog even los van de lagere prijzen van moederborden.

AMD Opteron 280 Dual Core (S940, 2,4GHz, 2x1MB, Boxed) = 827 euro
AMD Opteron 850 (S940, 2,4GHz, 1MB, Boxed) = 784 euro

Zijn er nog geen Quad-chip/Octal-core machines tegenwoordig?

Hm, ik wilde net wat posten in het WK-forum over de status van mijn verse voetbalstream, nu moet iedereen aanzien wat er mee gebeurt

Naja.

Is een apparaat zoals de Gigabyte I-RAM niet iets?
Evt met SATA aansluitingen oid.
Als je daar bv 4 of 8GB RAM inprikt en dat als harddisk gebruikt zal het toch behoorlijk snel gaan

Wel een nadeel als je dan n halve terabyte aan database-spul moet opslaan, maar daar verzinnen jullie wel weer wat op

Clustering ook niet iets? 2 fat-ass Apollo's zijn beter als 1

Een Gigabyte i-RAM is inherent betrouwbaar voor opslag. Het beperken van read I/O kan goed door gewoon massieve hoeveelheden geheugen in de doos te stappen en write I/O kan versnelt worden door een dikke cache op de RAID-controller. De I/O die uiteindelijk wel op de disks terecht komt kan versnelt worden met een snelle, goed schalende RAID-controller en heel veel disks, waarbij het de vraag is of 10.000rpm SATA RAID meer prestaties voor hetzelfde geldt biedt als 15.000rpm SAS RAID.

zou de ramsan-400 niet de oplossing zijn?

(prijs wil je niet weten )

Je bedoelt zeker inherent *on*betrouwbaar?

Arme Apollo

Hopen dat zijn opvolger Apollo II gaat heten, want dat verdient die server wel met alle data die hij ons geserveerd heeft.

Ik zie over 11 update's een probleem

Ik denk dat dit al de 4de of 5de revisie van apollo wordt

Die foutmeldingen zijn geweldig.
Alleen dat #1 steeds snap ik niet. Wie maakt een n00b wijzer?

Vroeger was code #1 de melding dat er een probleem was met de database server. Sinds dat GoT draait op React is dat niet meer het geval, maar die "foutmeldingen" zijn gewoon uit nostalgie meegenomen

Nu begint dan ook net het voetbal dus jullie hoeven je niet te vervelen

Juist wel

maargoed, wat nodig is, is nodig

"Apollo, Come out, come out, wherever you are!"

"Apollo is down. Round up the usual suspects.

"Looks like Apollo picked the wrong week to stop sniffing glue."

"This quitting thing, it's a hard habit to break once you start."

"Als u klaar bent met het lezen van deze melding zou het kunnen zijn dat apollo het al weer doet, ik ben beniewd"

"Nee het is niet apollo 13, teminste ........ nee, gelukkig niet"

"It's Alive, Alive I Tell You! ...... No it isn't"

wat ga je met de "oude" doen? (als die wordt vervangen)

wat weggooien? aaaaah geef dat ding dan maar aan mij

maar suc6 met het testen en vinden maybe van de prob's !

Artemis een beetje upgraden misschien?

Whoei, gelukkig heb ik net nieuw tobo met goede F5 erop

"The Beast Unleashed" is weer up

en weer down

en weer down moet gelukkig toch zo naar huis.....
MySQL down = Blije baas

hmm...ach..dan maar naar huis