Cookies op Tweakers

Tweakers maakt gebruik van cookies, onder andere om de website te analyseren, het gebruiksgemak te vergroten en advertenties te tonen. Door gebruik te maken van deze website, of door op 'Ga verder' te klikken, geef je toestemming voor het gebruik van cookies. Wil je meer informatie over cookies en hoe ze worden gebruikt, bekijk dan ons cookiebeleid.

Meer informatie

IBM onthult BlueGene/Q-supercomputer

IBM heeft zijn nieuwste rekenmonster tijdens het jaarlijke supercomputing-symposium in Portland gepresenteerd. Het bedrijf gaf details over de hardware van BlueGene/Q prijs; de supercomputer krijgt 16384 cores aan boord.

De eerste opvolger van de BlueGene/P-systemen, die IBM momenteel aan klanten uitlevert, wordt in het Lawrence Livermore National Laboratory gebouwd. Deze BlueGene/Q-supercomputer, met de naam Sequoia, wordt opgebouwd uit 96 racks met hardware. Elk rack wordt op zijn beurt gevuld met 32 zogeheten drawers, die weer ieder uit 32 modules of nodes bestaan. Een node bevat een 64bits-processor met 17 PowerPC-cores en 16GB ddr3-geheugen. Zestien cores zijn voor de hpc-taken, terwijl de zeventiende core voor het besturingssysteem wordt gebruikt. Daarmee komt het aantal hpc-cores per rack op 16384 stuks, met evenzoveel gigabyte aan geheugen.

Het complete systeem met 96 racks bestaat uit 1.572.864 hpc-cores met een kloksnelheid van 1,6GHz, die ieder vier threads aankunnen. De 96 racks van Sequoia worden gebruikt voor berekeningen, terwijl de extra core van elke node zich moet bezighouden met het aansturen van de supercomputer. Die extra cores zijn nodig om de Linux-versie van IBM te draaien. De nodes communiceren onderling via optische fiber-interconnects die de nodes als 5d-mesh-netwerk aan elkaar knopen. BlueGene/Q wordt door waterkoeling op een temperatuur tussen de 15 en 18 graden Celcius gehouden.

De rekenkracht van BlueGene/Q bedraagt voor de Sequoia-uitvoering 20,13 petaflops. Een versie met slechts 48 racks, die voor het Argonnne National Laboratory moet worden gebouwd, krijgt 10pflops aan rekenkracht. Per rack betekent dat bijna 210tflops, een vervijftienvoudiging ten opzichte van de 14tflops per rack van de BlueGene/P-serie. Een door IBM gebouwd half rack haalde in november een Linpack-score van 65,3tflops en bezette daarmee de 114e plaats in de supercomputer Top500-lijst. Sequoia moet in 2012 bijna tweehonderd keer zo hoog scoren.

Door

Redacteur componenten

69 Linkedin Google+

Lees meer

Fujitsu bouwt 10Pflops-supercomputer Nieuws van 29 september 2010

Reacties (69)

Wijzig sortering
Ik ben altijd wel benieuwd hoeveel ruimte dat nu in beslag neemt.
Heeft iemand een idee?
"Het complete systeem met 96 racks..."
Een volledig datacenter lijkt me zo...

[Reactie gewijzigd door _J7_ op 22 november 2010 11:40]

Het gaat hier om 96 racks staat er, dat zijn dus 96 19" in racks.

Per rack heb je snel 3m2 nodig (Denk ook aan loopruimte).

Dus kom je op een ruimte van zo'n 300m2, maar wellicht wel 400m2.

Denk dat het eerder interessant is om te weten hoe veel stroom dit verbruikt!
Zie gelinkte artikel:
But the company did not provide many details about the architecture, except that it would pack 1.6 million cores into a single cabinet, would have 1.6PB of storage, a peak performance of 20 petaflops, and burn 6.6 megawatts of juice.
6.6 MW, ongeveer goed voor 7000 huishoudens.

[Reactie gewijzigd door Matazj op 22 november 2010 11:45]

Dus kom je op een ruimte van zo'n 300m2, maar wellicht wel 400m2.
Vergeet je nu niet dat er ook ruimte nodig is voor netwerkapparatuur, koelingapparatuur en (redundante) stroom? Ook denk ik dat ze wel een geintegreerde blusinstallatie ergens kwijt willen.
De racks zullen zijn voorzien met redundante netwerkapparatuur en UPS'en. De racks vormen met elkaar de supercomputer en moeten dus al onderling met elkaar kunnen praten. Door de koeling zal de vloeroppervlakte waarschijnlijk ook niet toenemen. Is dit d.m.v. airconditioning dan is er geen extra vloeroppervlak nodig, doet men dit met een verhoogde vloer dan is de vloeroppervlakte ook afdoende, doet men dit via inrowkoeling dan zijn meer racks nodig, maar kunnen de racks dichter op elkaar staan, waardoor de totale vloeroppervlakte niet hoeft toe te nemen.
Een data center in een bezemkast?!?

Een rekencentrum, vaak aangeduid onder de Engelse naam datacenter, is een faciliteit waar bedrijfskritische ICT-apparatuur (bijvoorbeeld servers) kunnen worden ondergebracht. Een rekencentrum is uitgerust met diverse voorzieningen, waaronder klimaatbeheersing door middel van airconditioning, geavanceerde automatische brandblussystemen en backup stroomvoorzieningen. Daarnaast bevat een rekencentrum doorgaans verbindingen met het Internet en is het voorzien van fysieke veiligheidsmaatregelen. In verband met het bedrijfskritische karakter van de apparatuur in een rekencentrum, zijn de voorzieningen doorgaans redundant uitgevoerd.

[bron wikipedia]

knappe jongen die dat in een bezemkast krijgt. (of je hebt hele grote bezems natuurlijk)
een kleine airco, een serverkast, een backup stroom kastje in de serverkast, een slot op de deur en een schuimblusser ernaast?
Ik ken een bedrijf waar dit de serverruimte is. Het wordt dan wel geen datacenter genoemd, maar volstaat wel als ik jou beschrijving kan geloven en het past best in een beetje een grote bezemkast.
Serverruimte is geen datacenter. En dat zijn jou woorden....

[Reactie gewijzigd door _J7_ op 22 november 2010 14:13]

J7 is right. Het verschil zit in het aantal.

"A server room is a room that houses mainly computer servers. In information technology circles, the term is generally used for smaller arrangements of servers; larger groups of servers are housed in data centers."
Het zijn niet alleen grote multinationals die datacenters runnen, de lokale bibliotheek heeft ook een eigen 'datacenter' en dat is niet meer dan een flinke bigtower die bij mij makkelijk in de bezemkast past, die berekeningen en dergelijken zijn niet zo ingewikkeld. Aub wel verder kijken dan je neus lang is... Als jij je alleen vasthoudt aan het begrip wat op wikipedia is vastgelegd... tja, dat is een zo'n groots mogelijk opgezet voorbeeld. Maar kleiner kan ook hoor ;)

Tis maar wie de artikelen maakt... zoek bij wikipedia maar eens op 'garage' als in berging... ik versta onder garage een werkplaats, stalling bij de woning of zo'n mooie betonnen doos die je overal in de binnenstad vind waar een paar honderd auto's in kunnen. Het gekke is dat wikipedia dat laatste niet eens beschrijft... is het dan ineens niet zo?
Daar zeg je het al: Delen van de backup systemen. Geen datacenter dus. Een datacenter bevat alles en niet alleen delen van een backup systeem.
Staat in principe toch in de bron? Ik neem aan dat je wel weet hoe groot een 19" serverrack is? In het artikel staat dat de BlueGene/Q TOT 96 racks groot is (maar er komt dus ook een "kleintje" van 48 racks).

Om een idee te geven, dit is de BleuGene/P, de voorloper:

http://www.alcf.anl.gov/news/media_files/bluegene_p.jpg

[Reactie gewijzigd door Yngwie- op 22 november 2010 11:43]

Het hangt er een beetje vanaf, maar:

Als je uitgaat dat je per rackserver, met alle ondersteuning van koeling en gangen om te lopen enzo ongeveer 10 m2 (kan wat minder zijn hoor, dit is gewoon wat natte vingerwerk) nodig hebt dan dus 96 * 10 m2 = 960 m2, oftewel laten we zeggen, een ruimte van 20m bij 50m. Dat is dus een forse zaal.

(Ben benieuwd naar schattingen van anderen, die van mij is wat aan de hoge kant).

[Reactie gewijzigd door Keypunchie op 22 november 2010 11:45]

Afgaande van de grote van 1 rack van de BlueGene/P (http://en.wikipedia.org/wiki/File:BlueGeneL_cabinet.jpg) is dat heel wat. Ik gok dat 1 rack zo'n 1x1 meter in beslag neemt met een hoogte van zo'n 2,5 meter. en dat nog is maal 96.

Een performance van 20,13 Petaflops is ongekend hoog. De huidige snelste supercomputer doet 4,7 Petaflops (http://www.top500.org/system/performance/10587). Daarmee zou deze computer dus zo'n 4x a 5x zo snel worden!!

Daarnaast zal het systeem ook wel flink wat stroom vreten met 1.572.864 cores, evenveel 1572TB aan RAM en een enorm uitgebreid waterkoelingsysteem voor al die cpu's!! (6.6 Megawatt zoals hierboven dus is aangegeven :O)

[Reactie gewijzigd door NL-RaVeR op 22 november 2010 11:48]

Precies, het is niet zo moeilijk.
Zeg dat een rack 1 x 1 m2 is, en er 100 racks nodig zijn -> 100 m2 voor alleen de racks. Reken maar een redelijk datacentrum.
Ik moet nog steeds een beetje lachen om een opmerking in de review, die Tweakers.net dit weekend plaatste, van een Nederlandse supercomputer. Daarin stond over het gebruik ongeveer het volgende.

De computer werd onder andere gebruikt om een T-rex dinosaurus te modeleren om verolgens uit te rekenen hoe hard hij kon lopen. Antwoord van de supercomputer: "ongeveer 25 km/h" :D

Laten we hopen dat dat niet alles is wat ze met die computers berekenen aangezien ze nou niet de meeste milieuvriendelijke apparaten op aarde zijn.
Met 6MW (hierboven vermeld geen idee waar dit vandaan komt) kan je wel wat meer dan uitrekenen hoe hard een T-Rex liep :P, waarschijnlijk zijn er ook wel verschillende weermodelletjes mee uitgerekend.
Wat ik hierbij zo jammer vind is dat je hier nooit wat over hoort, ze zeggen alleen dat de computer xx flops kan rekenen en daar moet je het maar mee doen ;P
Er is teveel om uit te rekenen. Bijvoorbeeld: Met de komst van de algemene relativiteits theorie i.c.m. quantummechanica zijn er zoveel theoretische modellen te maken die gigantische rekenkracht vereisen.
Nouja... de aerodynamica van pringles, vloeistofdynamiek in luiers...
Large companies are also examining larger systems for testing and simulation. Procter & Gamble, for example, uses an SGI system to study the aerodynamics of Pringle's potato chips, Snell said. The chips move along a conveyor belt so fast that they actually take flight. Through aerodynamic modeling, the company can change the shape of the chips and speed up manufacturing. P&G also uses the system to study fluid dynamics in disposable diapers.

Read more: http://news.cnet.com/2100...l?tag=cd_mh#ixzz160g22KBJ
Laten we hopen dat dat niet alles is wat ze met die computers berekenen aangezien ze nou niet de meeste milieuvriendelijke apparaten op aarde zijn.
Alsof we niet weten dat berekenen hoe snel een T-Rex loopt niet het enige is dat met die computers wordt gedaan.

En alsof er niet vele nog veel minder milieuvriendelijke apparaten bestaan dan supercomputers.
Hoe willen ze dit waterkoelen, gebeurd dit door waterkoelblokken of dompelen ze het geheel onder in gedestilleerd water (geleid geen electriciteit)? Een paar MW aan energie raak je zo nog niet kwijt in de vorm van warmte, kan je bijna een stad mee opwarmen ;P (klein dorpje dan ^^)
Gedestilleerd water geleid geen elektriciteit nee, maar het geleid wel als het water vervuild wordt door een paar stofdeeltjes. Ga er maar vanuit dat hier gewoon koelblokken op gemonteerd worden, anders is onderhoud helemaal niet mogelijk.
Jep, een koelblokje per module, dus een warmtewisselaar die de warmte van de IC's overbrengt op de vloeistof (idd meestal gedestilleerd water om afzettingen en redox reacties/corrosie te voorkomen). Het water circuleert door de infrastructuur die in de racks is aangebracht, en op een centraal punt (of een aantal punten) staan pompen en warmtewisselaars met fans opgesteld om de warmte af te staan aan de buitenlucht, of aan de verwarming van het pand (maar meestal gewoon de buitenlucht). In feite niks anders dan je thuispc met vloeistofkoeling, alleen met een wat groter volume en een grotere vloeistofflow. En daar kun je prima meerdere MW's mee afvoeren.

Hoe denk je dat ze dat in een energiecentrale doen? Bij een grote centrale heb je het al gauw over een paar honderd MW wat je aan restwarmte kwijt moet. Het enige verschil is dat ze daar de warmte overdragen van het primaire (gesloten) circuit aan een ander circuit waar rivier- of zeewater door stroomt. In (PWR) kerncentrales heb je over het algemeen zelfs 3 circuits: een gesloten primair onder hoge druk, een gesloten secundair water/stoomcircuit om de turbines aan te drijven, en een tertair circuit met water dat door koeltorens geleid wordt.
een mooie totaalshot over de racks op groot formaat:

http://2.bp.blogspot.com/...37_jugene_pm_11_07_05.jpg

[Reactie gewijzigd door MelodyDeluxe op 22 november 2010 12:04]

Kijk daar heb je wat aan, dank u.
Laat me denken aan Battlestar Galactica; oude serie

Altijd jaw dropping, dit soort specs. Dat er maar mooi wetenschappelijk onderzoek mee gedaan moge worden.
Ik moet zeggen dat ik best onder de indruk ben van het energieverbruik. De 98.304 processoren verbruiken totaal 6.6 MW aan energie. Per processor is dat ongeveer 67 Watt. Dat is best netjes voor een 17 (!) core processor.
Dit is de nieuwe #1 in de top 500 meest energieŽfficiente supercomputers. http://www.green500.org/lists/2010/11/top/list.php

Op dit item kan niet meer gereageerd worden.


Call of Duty: Black Ops 4 HTC U12+ dual sim LG W7 Samsung Galaxy S9 Dual Sim OnePlus 6 Battlefield V Microsoft Xbox One X Apple iPhone 8

Tweakers vormt samen met Tweakers Elect, Hardware.Info, Autotrack, Nationale Vacaturebank en Intermediair de Persgroep Online Services B.V. © 1998 - 2018 Hosting door True

*