Los Alamos selecteert Opteron voor grootschalige clusters

AMD heeft opnieuw een grote clusterdeal binnengehaald voor zijn Opteron-processor. Het Amerikaanse Los Alamos National Laboratory heeft aangekondigd twee grootschalige Linux-clusters op basis van AMD Opteron-processors in gebruik te zullen nemen. In totaal zullen circa 3.300 Opteron-processors aan het werk gezet worden voor simulaties van medische en ecologische modellen en onderzoek voor het Amerikaanse Ministerie van Defensie. Volgens de planning zal in oktober het 'Lightning'-cluster operationeel worden. Dit cluster zal gebruikt worden voor het Advanced Simulation and Computing (ASCI) programma van de National Nuclear Security Administration. Lightning zal naar verwachting 2.816 Opteron-processors bevatten en zal een theoretische rekencapaciteit van 11,26 teraflops hebben. Het tweede cluster, 'Orange', zal functioneren als onderdeel van het Los Alamos Institutional Computing project, dat wetenschappelijk, medisch en ecologisch onderzoek verricht zoals de ontwikkeling van anti-biotica en simulaties van waterbronnen en bosbranden. Orange bestaat uit 256 nodes met ieder twee processors.

De twee door Los Alamos bestelde clusters worden ontworpen, gebouwd en geïmplementeerd door LinuxNetworx. De machines zijn gebaseerd op AMD Opteron 244-processors en Arima HDAMA-moederborden. Orange zal naar verwachting het eerste grootschalige Opteron-cluster zijn dat gebruik maakt van InfiniBand interconnectie technologie. Het grotere Lightning-cluster maakt gebruik van Myrinet 2000 Lanai XP-interconnects. Het beheer van de nodes wordt vereenvoudigd met ICE Box 3.0 cluster management. Hiermee is het onder andere mogelijk om temperaturen op afstand te bewaken en machines op afstand te rebooten. Tevens is een seriële terminal server ingebouwd.

De deal met Los Alamos National Laboratory is de vijfde grote clusterwin voor AMD sinds de introductie van de Opteron in april van dit jaar. Eerder maakten Sandia National Laboratories, Texas A&M University, Manchester University, het Japanse National Institute of Advanced Industrial Science and Technology en het Chinese Dawning bekend dat zij Opteron-clusters of supercomputers gingen implementeren. Het Lightning-cluster van Los Alamos National Laboratory is vooralsnog het grootste Opteron-cluster dat dit jaar afgeleverd zal worden. De totale kosten van het initiële contract, inclusief een optie voor de levering van 1.408 dual processor nodes en een optie voor systeemonderhoud, worden beraamd op een bedrag van net onder de 10 miljoen dollar. Een jaar geleden liet Los Alamos door LinuxNetworx nog een cluster met 2.048 Intel Xeon-processors bouwen. Deze supercomputer had destijds een prijskaartje van 6 miljoen dollar.

	Opdrachtgever		Leverancier		CPU's		Capaciteit
	Los Alamos National Laboratory (Orange)		LinuxNetworx		512
	Los Alamos National Laboratory (Lightning)		LinuxNetworx		2.816		11 Tflops
	Dawning Information Industry		Dawning		>2.000		> 10 Tflops
	Nat. Inst. of Advanced Industrial Science and Technology		IBM		2.116		> 11 Tflops*
	Manchester University		ClusterVision		70
	Texas A&M University		Appro		260
	Sandia National Laboratories		Cray		10.368		> 40 Tflops

*Rekencapaciteit van complete cluster inclusief 520 Intel Itanium-processors.

Reacties (20)

[Metal Baron]

Is dit nou echt zo veel? Per processor komt dit neer op 4 Gigflops, een G4 processor op 1 Ghz levert al 7,5 gigflops, kan je nagaan wat een G5 op 2 Ghz doet! Maw: kloppen de getalletjes hier niet of gaat er gewoon veel rekenkracht verloren bij het clusteren?

[Verwijderd]

Met clusteren ben je idd. een hoop kwijt aan overhead en langzamere lijnen die je met een 1-processor architectuur niet hebt.

- Overhead voor beheer en verdeling van taken over al die processors.
- Soms is een processor afhankelijk van het resultaat dat 1 of meerdere van z'n broertjes leveren, en dat kan wachttijden opleveren.
- Soms moet een processor bij stukken data die niet in z'n eigen RAM-bereik liggen. Met een beetje geluk kan 'ie er via NUMA bij (RAM-bereik van een andere processor in dezelfde unit), maar dat is al een stuk trager dan direct access. En meestal zal 'ie het bij een andere unit moeten zoeken, en dan kun je nog zo'n snelle fiber backbone hebben, 't blijft de bottleneck van een cluster.

Een dual G4 is ook nooit 2x zo snel als een single G4...

1 Enkel raspaard kan op een goeie dag een wereldtijd neerzetten op de mijl. Probeer dat 's met 2800 raspaarden, waarbij het hoofddoel is dat ze allemaal op hetzelfde moment de finish halen.

Maar voordeel van clustering is wel dat als je meer capaciteit nodig hebt, je gewoon een aantal units bijplaatst. Bij een single-CPU model is 't dan vervangen geblazen.

[Exirion]

Zijn er ook plannen voor een notebook versie?

[Verwijderd]

Ik denk dat deze orders zeker wel goed zijn voor AMD (ik weet het eigenlijk wel zeker ). Als je bedenkt dat de omzet van AMD rond de 600 miljoen / 800 miljoen(if I'm not mistaken) is. Dit is dan per kwartaal ongeveer heb ik net ff opgezocht.

Dan is een order van om en nabij 10 miljoen niet slecht. En als daar ook nog opties aan vastzitten.........
En dit is misschien nog wel het begin van veel meer orders voor AMD, wie weet. Als het nu ongeveer een soort vervangingsperiode is van dit soort renderfarms dan heeft AMD een goed product tegen een goede prijs beschikbaar.

Turndevil is ook aan het sparen voor een leuk Operton servertje

[miller82]

wat moet ik me eigenlijk bij 1 Teraflop aan capaciteit voorstellen??? want die getallen zijn / staan heel leuk, maar zegt me zo niet zoveel...

[bille]

zie hier

oftewel:
Tera (T) = 10^12
FLOPS = FLoating-point Operation Per Second

Floating-point is, according to IBM, "a method of encoding real numbers within the limits of finite precision available on computers." ..... The computation of floating-point numbers is often required in scientific or real-time processing applications and FLOPS is a common measure for any computer that runs these applications.

[C00P]

Paar maanden geleden vroeg ieder zich af of de Opteron/Athlon64 wel zou aanslaan.

Het lijkt me dat AMD het zeer goed doet, zijn nog maar paar maanden op de markt met de Opteron en ze bouwen al de snelste supercomputer(Cray), en nu halen ze weer een mooie bestelling binnen.

En de benchmarks voor de opkomende Athlon64 zijn ook beloftevol.

Respect voor AMD

[nhimf]

Zekers, met de algeliefde merken van ons tweakers gaat het erg goed. Ati die de xbox 2 graphics binnen haalt en AMD die toch een mooi toekomst blik kan hebben met hun opteron.

Ik wacht dan ook op de cijfers van AMD over hoe goed de opteron/a64 het doet.

Maar ik denk wel dat AMD een goede zet heeft gedaan.

[Beaves]

Ik wacht dan ook op de cijfers van AMD over hoe goed de opteron/a64 het doet.

Die cijfers kan AMD niet geven, simpelweg omdat het x86-64 platform net nieuw is en er dus geen representatieve cijfers zijn.

Dat AMD 5 clusters heeft binnen gesleept klinkt leuk, maar dat is ook alles, AMD verkoopt per jaar erg veel CPU's en vergeleken bij die cijfers vallen 2000 CPU's behoorlijk in het niets.

Daarnaast zijn er nog weinig Opteron servers verkocht, omdat de server markt nogal "bang" is voor nieuwe merken zoals AMD dat is op die markt. Pas over een tijdje als AMD algemeen geaccepteerd is zullen de verkopen stijgen.

En daarnaast is de Athlon64 nog niet uit, ik denk dat AMD halverwege volgend jaar pas kan zeggen hoe goed het Hammer platform is ontvangen, niet veel eerder.

edit:

RobT, ik heb het over dat AMD nog geen cijfers kan geven, ik heb het niet over de kans dat AMD wel of niet slaagt met de Opteron...

[RobT]

Ja, maar voorlopig lijkt het erop dat Opteron meer verkocht is dan Itanium (II), wat wel heel veel wil zeggen.

Bovendien moet je Opteron niet vergelijken met standaard desktop cpu's, AMD beweegt zich voor het eerst in deze markt van high-end cpu's, en als je nagaat dat de 10 grootste systemen ruim 10.000 AMD cpu's herbergen dan kan je toch van een positieve start spreken.

Als laatste, de winstmarge van Opteron ligt op een nogal ander niveau dan wat ze met een AthlonXP cpu halen..

In elk geval geeft dit soort verhalen grote geloofwaardigheid aan Opteron als platform, en dat is waar AMD het meeste mee zit/zat: of het 'Intel inside' idee niet teveel in de hoofden van de managers zit.

[VisionMaster]

www.top500.org

Earth Simulator:
35860.00 GFlops max
40960.00 GFlops peak

Los Alamos Nat. Lab.
13880.00 GFlops max
20480.00 GFlops peak

Lawrence Livermore Nat. Lab.
7634.00 GFlops max
11060.00 GFlops peak

Volgens de ranking zullen ze de nieuwe nummer 3 worden met deze machine. Het gaat weer lekker met AMD. Hopelijk krijgen ze met dit soort orders zich zelf een beetje uit het slop al zijn het 'maar' enkele duizenden machines. Het zal wel wat offspin krijgen naar het bedrijfsleven.

edit:
op plekje 80 van de lijst (stats van vandaag) staat de eerste AMD met een zwikkie 1.4 GHz procs. Is wel effe een verbetering als deze machine in de lijst staat en straks een Cray met de Opterons en er was er nog 1 ... uhmm ...

[EdwinSchaap]

En de PS3 komt strak met stip op plaats 59 binnen. Of een stapelje van 12 spelcomputers deze zaalvullende computer er uit te lopen.

Wanneer zal IBM een (cluster) supercomputer aankondigen gebaseerd op Cell? Kan de rest weer terug naar de ontwerptafel.

[0vestel0]

Oeps. En skynet draait op 40 Teraflops? T3 Is it goig to be real?

//Edit
En als dat niet genoeg is gaan ze ook al supercomputers in PetaFlops plannen????
//Edit

[boner]

Het tweede cluster, 'Orange', zal functioneren als onderdeel van het Los Alamos Institutional Computing project, dat wetenschappelijk, medisch en ecologisch onderzoek verricht zoals de ontwikkeling van anti-biotica en simulaties van waterbronnen en bosbranden. Orange bestaat uit 256 nodes met ieder twee processors.

Dus een agent op deze cluster heet agent orange. En dan ecologisch onderzoek doen...

Ministetie van defensie dat ecologisch onderzoek doet. An me zolen.

Voor diegenen die niet weten wat agent orange is.
http://www.lewispublishing.com/orange.htm

[Verwijderd]

Zou heel erg graag ook zo'n Terra-Flop PCtje hier willen hebben staan, kunnen we dan eindelijk eens een kewl game ontwikkelen......

[hoeretoeter]

ben ik nou gek of kan ik die sandia national laboratories ook nergens in de top 500 terugvinden? zal dus waarschijnljk nog niet af zijn... maar deze komt naar schatting dus op 1 te staan boven de earth simulator! das een leuke score dan voor amd die tot nu toe vrijwel niet in die lijst voorgekomen is!
niet dat het me echt veel boeit die superdingen maar het blijven grappige apparaten