Server- en netwerkonderhoud woensdag 2 februari (Update)

Zoals al te lezen was in de Server- & netwerkstatusmeldingen lijdt onze externe switch aan acute aanvallen van amnesie. Hierdoor waren de frontpage en het forum de afgelopen dagen al enkele keren niet meer te bereiken. Ook de interne switch vertoont de laatste tijd steeds meer kuren, met name de crashende interface (waardoor management of het maken van grafieken onmogelijk is) is erg vervelend. Daarom is besloten beide apparaten te vervangen door nieuwe HP Procurve 2824 switches. Deze zijn vanmorgen gearriveerd en zullen morgen in het rack worden geplaatst.

De nieuwe switches in volle glorie op het kantoor

Daarnaast zal het bezoek aan de serverlocatie worden benut om een aantal andere kleine werkzaamheden te verrichten. Backupserver Asclepius wordt met een tweetal Opteron 248-processors als webserver gebruikt, terwijl productieserver Apollo het moet doen met 242-exemplaren, die elke seconde ieder 600 miljoen kloktikken minder te besteden hebben. Omdat de 248-processors in Apollo beter tot zijn recht zullen komen, zullen de processoren morgen worden omgewisseld. Apollo zal hiervoor enige tijd down gaan, wat logischerwijs resulteert in een forum zonder inhoud. De geschatte downtime daarvoor is ongeveer 15 minuten.

Verdere werkzaamheden omvatten het plaatsen van een tweede Opteron 242 processor in de backupserver Athena en het ophangen van de vijfde webserver "Aeolus". Deze machine beschikt over twee Intel Xeon DP-processors op 3,0GHz en 1 GB ECC Registered DDR-geheugen. De bestaande webservers hebben door stijgende bezoekersaantallen en steeds zwaarder wordende pagina's een redelijk hoge load en processorbelasting en kunnen daarom wel wat assistentie gebruiken.

De werkzaamheden beginnen rond 11:30 en zullen, als alles volgens de planning verloopt, om 13:00 uur afgerond zijn.

Update 15:00 uur De switches zijn inmiddels vervangen en Apollo is voorzien van snellere processors. Ook Athena heeft er een processor bij gekregen. Reserve-server Asclepius wilde helaas niet meer tot leven komen na de harttransplantatie en is voor onderzoek meegenomen naar kantoor. Kees is op dit moment nog in de serverruimte bezig met het configureren van Aeolus en het testen van webserver Abaris. Deze laatste heeft de laatste tijd geregeld last van extreem hoge loads en crashes, Het vermoeden dat het geheugen niet helemaal fris is. De met deze werkzaamheden in verband staande reboots van de loadbalancer kunnen deze middag nog voor wat korte downtime zorgen.

Reacties (41)

[Verwijderd]

Waarom niet bijvoorbeeld een dell switch, die is velen malen goedkoper en dan kun je voor dat geld ook nog 2 spares op de plank leggen.

[Plague]

Ik denk inderdaad dat ze niet totaal niet over hebben nagedacht en dat ze maar gewoon de eerste de beste switch hebben gekocht

[Verwijderd]

ik gok erop dat ze het advies van true opgevolgd hebben, die draaien namelijk ook allemaal op HP

[Verwijderd]

Dat zegt hij niet. Hij vraagt waarom er voor dergelijke dure switches is gekozen, terwijl (op papier) een veel goedkopere DELL switch ook voldoet.

Ik denk zelf dat er voor HP switches is gekozen uit het oogpunt van betrouwbaarheid, manageability en support.

[moto-moi]

Dat zegt hij niet. Hij vraagt waarom er voor dergelijke dure switches is gekozen, terwijl (op papier) een veel goedkopere DELL switch ook voldoet.

Die voldoet niet
Voor zover ik weet maakt Dell zelfs geen switches, maar verkoopt een merk waar ze zelf hun labeltje op plakken.

Tot voor kort (tot 11:30 vandaag ) draaiden we trouwens op een 2tal 3coms, maar ook die bleken niet opgewassen te zijn tegen ons internetverkeer

HP's hebben we inderdaad aangeschaft onder andere naar aanleiding van de goede ervaringen met deze switches bij Parse en Trueserver.

[HaterFrame]

Dell Switch? Dan kun je er net zo goed sweex neer gaan zetten

Over het algemeen is de kwaliteit van de dell switches slecht gesteld helaas, de prijs is zacht maar ook de kwaliteit is zacht.

[Daniel]

Dat 'vele malen goedkoper' valt nogal mee. Een Dell PowerConnectTM 5324 (hun goedkoopste 24x Gbit switch) kost 1399 euro excl. BTW
Deze HP's zijn per stuk nog geen 100 euro duurder.

[mimic]

100 meer voor betere kwaliteit en stabiliteit, netjes toch

[mouse256]

Mag ik mij afvragen wat voor voordeel het heeft om 2 switchen te plaatsen ipv bvb de dubbel zo grote hp2848?
Komt dit voor de kosten beter uit, of heeft dit een ander voordeel? voor zover ik weet is het anders toch handiger om alles op 1 switch te hangen, zo kan alle trafiek eenvoudig naar alle servers toch? Nu kan de lijn(en) tussen de 2 switchen toch aardig overbelast geraken?

[PowerSp00n]

Een switch voor het verkeer alleen tussen servers en een switch voor verkeer tussen de servers en de 'buitenwereld'.

[Verwijderd]

In dat geval hebben 2 losse switches totaal geen toegevoegde waarde, m.b.v. VLAN's kan je scheiding van het verkeer aanbrengen; de 2848 heeft een 2 keer zo 'brede' backplane, dus ook dat is geen bottleneck.
Een goede reden om switches dubbel uit te voeren is redundancy. Maar dat lijkt hier dus niet zo te zijn.

[Jesse]

Voor zover ik begrepen heb is de ene switch voor het verkeer naar buiten, en de andere voor het interne verkeer.

/te laat

Edit: Weet ik veel waarom ze daarvoor gekozen hebben? Misschien is dit wel gemakkelijker beheersbaar oid. Ik geef alleen antwoord op zijn vraag.

Ik denk btw dat ze zo doorgaan omdat het zo al was, alles is immers zo geconfigd. Waarom moeilijk gaan doen met een vlan. Je hebt ook nog eens een stuk redundantie op deze manier.

[Verwijderd]

Mja, dus ?
Maak je 2 VLAN's aan op die switches, 1 voor intern, 1 voor extern. Lijkt me niet dat je de backplane van zo'n 2848 zodanig belast dat dat een probleem gaat vormen, ook lijkt 1 Gbit bandbreedte in totaal me ruim voldoende ?

[Daniel]

De hoofdreden is dat het al zo was

De tweede reden is redundancy. Met twee switches kun je ook twee VLAN's maken die je verdeelt over beide servers. Zo is in geval van uitval van 1 van de switches in ieder geval een deel van je servers nog te bereiken.

[heuker]

Worden de stats- en 'Tweakers.net serverpark' pagina's hierbij ook geupdate? Ik zou het zeer op prijs stellen aangezien ik door de bomen het bos niet meer zie op dit moment. Zijn er nu bijvoorbeeld 2 backup-servers?

[moto-moi]

Worden de stats- en 'Tweakers.net serverpark' pagina's hierbij ook geupdate?

Ik heb er even snel doorheen gescanned, maar volgens mij klopt die informatie nog vrij aardig ?

Zijn er nu bijvoorbeeld 2 backup-servers?

Jups, tenminste..
1tje (athena) is op dit moment vol in dienst, en asclepius gaat op zeer kort termijn eerst voor webserver spelen, omdat we graag willen weten of er een voordeel aan zit om een dual opteron te gebruiken ten opzichte van een dual xeon.
Verder willen we de nieuwe loadbalancers gaan uittesten, en daarvoor zijn de nieuwste uitbreidingen ook uitermate geschikt.

[Kees]

naamgeving verwarring galore

Athena is backup en log server, dit houd voor athena in dat hij braaf elke nacht backups maakt van in totaal 4 databases (artemis, apollo, arethusa en adonis) en redelijk vaak een backup van de fileserver. Ook slaat hij de logs op van apache (wat redelijk uit kan lopen qua schijfruimte). Hiervoor heeft hij een totaal van 1TB opslag (12x 160G in een raid-1, en 2x raid-5)

Asclepius wordt 'backupserver' voor de databases, het is de bedoeling dat we gaan testen met replication om te zien in hoeverre we een hot standy backup en/of de load kunnen verdelen. Verder gaat hij nog webserveren.

[Verwijderd]

Hij?

[ripexx]

Ik heb er even snel doorheen gescanned, maar volgens mij klopt die informatie nog vrij aardig ?

Volgens mij mist er nog aardig wat En zijn ook de images een beetje oud. Een update kan opzich geen kwaad maar haast heeft het absoluut niet.

Oja hulde voor de snelle actie, dit is weer eens een teken dat T.Net op de goede weg is en uitgroeid van een hobby project naar een professionele organisatie.

[Rafe]

Wat dingetjes die niet kloppen op het serverpark .plan:
- Achelois heeft geen plaatje
- Asclepius staat er nog niet bij
- De recent uitgevoerde wijzigingen aan de CPUs van Asclepius en Apollo zijn nog niet doorgevoerd
- Specs en beschrijving van Arethusa zijn verouderd
- Webservers zijn niet in het midden uitgelijnd, de rest wel
- Er staat dat Athena naar Fok is, maar kennelijk dus niet?
- De begeleidende tekst boven de servers mag ook onder de schop genomen worden, een aantal to-do dingen zijn al gerealiseerd (switches bijvoorbeeld)
- Netcraft grafiekje is niet meer helemaal up-to-date
- Sponsortekst aan het einde is ook wat verouderd

Nieuwe pics wel een leuke toevoeging zijn, deze staan er ook al weer een hele tijd.

[Bosmonster]

$2,031.99 per stuk... Worden die gesponsord of komt dat uit eigen zak?

[Daniel]

Zelf betaald (zoals alles tegenwoordig)

[the_stickie]

waarom staan al die logotjes dan nog onderaan elke pagina

[Daniel]

Omdat niet alles wat we gesponsord hebben gekregen al uitgerangeerd is

[sweetdude]

Backupserver Asclepius wordt met een tweetal Opteron 248-processors als webserver gebruikt, terwijl productieserver Apollo het moet doen met 242-exemplaren, die elke seconde ieder 600 miljoen kloktikken minder te besteden hebben. Omdat de 248-processors in Apollo beter tot zijn recht zullen komen, zullen de processoren morgen worden omgewisseld.

Even een hele stomme opmerking van mijn kant. Vergeeet aub niet het Ram geheugen mee te nemen van Asclepius naar Apollo aangezien die 248 een snellere FSB heeft en er maar pc2100 RAM in Apollo ligt.

[Daniel]

Ik heb het even nagekeken, in Apollo zit PC2700 geheugen (de specs die hier op de site staan kloppen niet)

[sweetdude]

ik zei toch ook dat het een stomme opmerking van me was

Maar vanaf de optron 246 wordt 400Mhz ram ondersteund dus als in de backup bak sneller geheugen zit zou ik dat wel meenemen.

[MikeN]

Opterons hebben geen FSB, maar wat vlotter ram in Apollo kan geen kwaad denk nee (als daar nu PC2100 in zit )

[Verwijderd]

Geen FSB? Da's knap! Zo'n processor wil ik ook wel

Volgens mij is het nog altijd hypertransport @ 800MHz.

[MikeN]

Hypertransport is niet echt met een reguliere FSB te vergelijken. Ook staat het geheugen los van de Hypertransport bus(sen).

[AW_Bos]

Woei, straks weer F5-en op het forum, als die in Maintenance staat

[HyperDevil]

Wel leeg hoor links op de frontpage zonder GOT forum!

[jota]

GoT loopt hier niet zoals gewoonlijk,

[Ultraman]

Vervelend van die switches. Beetje vaag probleem. Maar ja nix aan te doen.
Die t.net badges zien er echt uit op die nieuwe switches.

Wat betreft die 2 Opterons. 15 min is vlotjes. Wel voorzichtig zijn met die dingetjes he .
Ik zie hier een uur staan om 2 processoren te vervangen? Beetje lang lijkt je niet? What's to do?
- Koeler eraf + oude proc eruit
- Nieuwe proc erin
- Koelpruts als dat nodig is (het blok voorziet dit vaak zelf al)
en dan het koelblok gebeuren er weer op.
- Booten en kijken of procjes fatsoenlijk herkend worden, is alleen een multiplier verhoging toch? dus instellen zal niets zijn
Can't take that long...

[NitroX infinity]

Je vergeet dat de servers uitgezet moeten worden, uit het rack gehaald moeten worden en opengeschroefd moeten worden.

Dan pas kunnen de CPU's vervangen worden.

En daarna moeten de servers weer dichtgeschroefd worden, in het rack gezet worden en weer worden geboot.

Al met al zijn ze echt wel een uurtje kwijt.

[MikeN]

De downtime begint pas vanaf het moment dat hij uit staat
Het uit het rack halen is 30 seconden werk (lang leve rails), het open maken 10 seconden (lang leve kasten zonder schroeven). Het vervangen kan echt wel in 15 minuten hoor, alleen de backup server zal wat langer down blijven, maar daar merk je als bezoeker toch niets van

[NitroX infinity]

De geschatte downtime daarvoor is ongeveer 15 minuten.

Mwa, dat weet ik zo net nog niet. Processors verwisselen is niet zo snel. Ik denk dat daar wel een uurtje voor nodig is.

[strandbal]

Met 248 Opterons wil je wel wat voorzichtiger zijn hoor

[El Snorro]

mjah die gasten zullen wel ervaring hebben met opterons enzo, en een boxed coolertje zit er zo op zal ik maar zeggen