Britse Archer 2-supercomputer krijgt 11.696 AMD Epyc-cpu's

De United Kingdom Research and Innovation-organisatie heeft deze week bekendgemaakt dat Cray zijn nieuwe supercomputer zal leveren. De Archer 2 draait op 11.696 Epyc Rome-cpu's voor een totaal van 748.544 cores op 2,2GHz.

De Archer 2-supercomputer bevat 5848 compute nodes, elk met twee AMD Epyc-cpu's met 64 cores die draaien op 2,2GHz. In totaal levert dit 748.544 cores op, die voor een verwachte piekprestatie van 28 petaflops moeten zorgen. De Archer 2 heeft in totaal 1,57 petabyte aan systeemgeheugen, en wordt geplaatst in 23 Shasta Mountain-serverkasten met waterkoeling. De computer bevat 14,5PB aan opslagruimte met het Lustre-bestandssysteem en 1,1PB aan flashgeheugen met het Lustre BurstBuffer-filesystem.

De nieuwe supercomputer wordt aangesloten aan een 100Gbit/s-netwerk met dragonfly-topology die bestaat uit 46 compute-groepen, een i/o-groep en een servicegroep. Ook zijn er Rasta River-racks voor management en post-processing. De Archer 2 maakt gebruik van AMD-gpu's van een toekomstige generatie. Vermoedelijk gaat het hierbij om Instinct-gpu's.

De Archer 2 is volgens UKRI tot 8,7 keer sneller dan de huidige Archer-supercomputer in CP2K-workloads. Dit is een programma waarmee wetenschappers moleculaire simulaties kunnen draaien. Ook is de supercomputer 9,5 keer sneller in OpenSBLI, 11,3 keer sneller in Castep, 12,9 keer sneller in Gromacs voor chemische simulaties en 18 keer sneller in HadGEM3. Dat laatste programma wordt gebruikt voor weersvoorspellingen. De originele Archer-supercomputer wordt op 18 februari 2020 definitief afgesloten, waarna de installatie van de Archer 2 wordt gestart. Verwacht wordt dat de Archer 2 in mei 2020 operationeel is. Op 6 mei begint UKRI met een stresstest-periode van 30 dagen. Tijdens deze periode hoopt de organisatie mogelijke problemen op te sporen en te verhelpen.

AMD lijkt steeds meer marktaandeel te winnen op het gebied van supercomputers. Eerder dit jaar kondigde supercomputerfabrikant Cray de Frontier-supercomputer aan. De Frontier wordt met 1,5 exaflops 's wereld krachtigste supercomputer, en maakt eveneens gebruik van AMD-hardware. Met zijn 1,5 exaflops krijgt de Frontier ruim 31 keer meer rekenkracht dan de Archer 2. De Frontier maakt gebruik van custom Epyc-processors die gebaseerd zijn op een 'toekomstige Zen-architectuur'. Daarnaast maakt de Frontier gebruik van toekomstige Radeon Instinct-gpu's van AMD. Het systeem zal in totaal zo'n 600 miljoen dollar kosten, wat omgerekend met de huidige dollarkoers neerkomt op ongeveer 543 miljoen euro. Cray gaat de Frontier in 2021 onder andere leveren aan het Amerikaanse Oak Ridge National Laboratory.

De huidige Archer-supercomputer. Foto via EPCC

Reacties (51)

[Evianon]

Voor wie supercomputers interessant vindt, EPCC (waar Archer gehost wordt) en de University of Edinburgh hebben een MSc studie in High Performance Computing. Natuurlijk inclusief accounts op Archer en andere supercomputers

Toffe studie, top universiteit en in een van de leukste steden van Europa, dus zeker het overwegen waard voor mensen die graag in het buitenland willen studeren.

[Verwijderd]

Moet je wel het geld er voor hebben

[Balance]

Archer2 volgt Archer op, een supercomputer met 9840 Intel Xeon E5 v2's. Deze CPUs hebben 12 cores voor een totaal van 118.080 cores. In de eerste Top500 vermelding uit november 2013 was het de 19e snelste supercomputer op basis van de Linpack-benchmarks, ondertussen is deze afgezakt naar plaats 252. Indien we uitgaan van een 11 maal hogere Linpack score zou deze supercomputer zichzelf nu op plaats 10 of 11 positioneren in de Top500.

[dasiro]

ik mis wat cijfertjes over het verbruik, iets wat tegenwoordig toch een belangrijke factor is in datacenters en supercomputers.

[watercoolertje]

Kosten (en ja daar is verbruik wel een onderdeel van) en performance dat is wat telt. Als je 100 miljoen kan besparen door onzuinigere net zo snelle cpus te gebruiken over de levensduur dan doe je dat, want het doel is niet zuinig zijn maar snel zijn en dat voor zo min mogelink geld.

Wat dat betreft is het niet veel anders dan mijn gamepc, die moet koste wat kost zo snel mogelijk zijn, enige limiet is geld

[kidde]

Als je 100 miljoen kan besparen door onzuinigere net zo snelle cpus te gebruiken over de levensduur dan doe je dat

Een 7H12 doet 280 Watt rond $7000 aanschaf. Industrie-kWh prijs is 7 eurocenten in Nederland (Schotland kan ik helaas zo snel niet vinden, volgens mij duurder).

Als het ding 100% van de tijd 100% belast wordt, gaat dat in 3 jaar tijd over 512 Euro.

Maar dan is er nog airco; zelfs bij doorlevering van de warmte aan 'afnemers' haal je hooguit een rendement van ca. 80%; dus dan wordt het al 640 Euro + de aanschaf-kosten van de airco.

En de 7H12 heeft waterkoeling nodig; volgens mij is dat qua onderhoud veel duurder dan luchtkoeling maar daar weet u vast alles van

Maw, de stroom / airco / waterkoelingskosten zorgen ervoor, dat zuinigheid een substantieel deel wordt van het "zo min mogelijk geld" gedeelte!

Een 7742 loopt op 225W en luchtkoeling, en is hooguit 15% langzamer, bij 25% lager verbruik dus en geen waterkoeling nodig. Volgens mij is dus 'zo snel mogelijk voor zo min mogelijk geld' voor een groot gedeelte afhankelijk, van hoe duur je waterkoeling / airco en elektriciteit is.

Ed: Even nagezocht, een:
-7H12 (watergekoeld) doet 2.6 gHz base,
-7742 (luchtgekoeld) doet 2.25 gHz base,
-Archer 2 doet 2.2 gHz base.

Dus ja, kennelijk is maximale prestatie per aanschaf-geldeenheid niet het enige dat telt!

[Reactie gewijzigd door kidde op 23 juli 2024 05:12]

[flaskk]

Ik denk dat je met waterkoeling makkelijker de warmte naar een andere ruimte kan transporteren, daardoor zul je minder airco,s nodig hebben ?

[Verwijderd]

Wat dat betreft is het niet veel anders dan mijn gamepc, die moet koste wat kost zo snel mogelijk zijn, enige limiet is geld

En een primitieve API

[Zeerob]

Maakt het je dan niet uit als je game-pc veel warmte produceert, wat in de zomer niet prettig is. Of veel herrie, wat ook niet prettig is?

[Nox]

Minder dan een op Intel gebasseerd systeem Performance per watt van de nieuwe 7nm Epycs is fors beter.

Info: https://www.extremetech.c...osts-performance-per-watt

Benchmark: reviews: Ryzen 3900X en 3700X - AMD stoot Intel van de troon

In de benchmark zie je ook de benchmarks met opgenomen vermogen in wh over de testrun staan. De relatief laag geklokte 3700X scoort daar 28 tot 34 procent zuiniger dan de intelvariant. Uiteraard geldt hier dat het geen heel eerlijke vergelijking is met de nieuwe CPU's van AMD die geen Epycs zijn en de Intels die geen xeon's zijn, maar het geeft een indicatie van de nieuwe architectuur aan verbruik/efficiency. Gegeven dat de meeste cores iets van een Ghz lager geklokt worden zal de efficiency nog wat verder omhoog gaan. (meer verbruik zorgt voor hogere temperaturen wat een hoger verbruik oplevert, het versterkt elkaar).

[Verwijderd]

Veel. Erg veel.

[TheekAzzaBreek]

Heeft iemand enig idee waarom ze zo'n groot gat laten vallen tussen het afsluiten van Archer en het vrijgeven van Archer 2? Ruim drie maanden, ik vind dat verrassend
.
@Evianon Ah. Dank.

[Reactie gewijzigd door TheekAzzaBreek op 23 juli 2024 05:12]

[Evianon]

Er is niet genoeg ruimte op de locatie waar Archer staat om de nieuwe erbij te zetten. Dus de oude wordt weggehaald en daarna kan de nieuwe pas worden geïnstalleerd.

[bamboe]

Doet me erg denken aan van die sim games,
Je bouwt een nieuwe supercomputer voor je research,
haalt eerst de oude weg en plaatst daarna een extra energiecentrale....

[Spacekonijn]

Zet dat ding eens aan voor SETI dan hebben we de aliens zo gevonden !

[kakanox]

Ik wacht nog altijd op het nieuws dat er één of andere onverlaat SETI@Home probeert te draaien of gewoon bitcoins probeert te minen op een supercomputer van een universiteit. Crimineel, maar wel grappig

[redbullzuiper]

Kunnen ze niet als grap Cinebench R15 draaien? Dan vallen alle overige tests in eens in het niet. Dan zie je 1 grote balk en alle overige zijn dan een paar pixels groot

Edit:
Waarom is deze reactie ongewenst? Volgens mij is deze reactie gewoon een nulletje waard voor irrelevant. Een -1tje is er meer voor trollen of echt zwaar offtopic comments.

[Reactie gewijzigd door redbullzuiper op 23 juli 2024 05:12]

[extremezz]

Lol ik vroeg mij ook af hoelang het zou duren om met deze super pc een 8 teken paswoord te kraken? Als je 30j terug kijkt dan heb je nu ook een super pc in jouw smartphone , toen was een cpu een paar mhz?

[Reactie gewijzigd door extremezz op 23 juli 2024 05:12]

[aadje93]

in 1989 was de intel cpu architectuur de Intel 80486 toch? Kwam begin '89 uit als ik het goed heb, liep op een 16mhz tot 100mhz dus we wat meer als "een paar mhz"

[extremezz]

16 is toch niet ver van een paar:), als je nu een octacore hebt en die is 2 ghz .

[aadje93]

de snelheid zegt niet alles. een 2ghz cpu van nu kan sneller zijn dan een 3ghz model van 10 jaar geleden De architectuur maakt een hoop uit

[BarnET]

Absoluut,

AMD Bulldozers hadden prima kloksnelheden.
Architectuur, stroomverbruik en efficiency was echter nergens. Eerder een stap achteruit ten opzichte van de Phenom 2's die ze opvolgde.

[Tokkes]

in die tijd dat RCT1 een minimum system requirement van 75 MHz ofzo had!

[StGermain]

De originele IBM PC uit 1981 had een 8086 cpu die op 4.77 MHz draaide. De iets oudere Apple ][ uit 1977 had een 6502 op 1 MHz.

[Fermion]

8 character password kraak je al met gemak op je PC thuis.

[keranoz]

Dat is wel heel erg kort door de bocht. Dat hangt er vanaf waarmee je het wachtwoord hasht. MD5 zonder salt is inderdaad nog wel een keer gedaan denk ik. Heb je echter een gesalte bcrypt hash dan wens ik je heel erg veel succes.

[X21_Eagle_X21]

https://www.youtube.com/watch?v=GnQKD4K-HhY

Daar haalt iemand 11.080 punten op 2x EPYC 7742. Er staat in het artikel dat er gebruik wordt gemaakt van waterkoeling dus waarschijnlijk wordt in de supercomputer gebruik gemaakt van de EPYC 7H12, maar daar kan ik helaas geen Cinebench resultaten van vinden. Ook verwacht ik niet dat het lineair zal schalen tot 700.000+ cores, maar wat is daar nou leuk aan. Even rekenen: 5848 * 11.080 = 64.795.840 punten.

[kdekker]

Het zal heel zeker niet lineair schalen. Het verdelen van load over zoveel cpu's is zo enorm complex, dat ik me afvraag of 10 of 20% minder cpu's wel terug te zien is als slechtere score. Parallellisatie = overhead. Ik ben wel benieuwd wat de factor overhead is op dit totaal.

[X21_Eagle_X21]

Zou ik ook wel willen weten! Voor zover ik weet is er helaas geen makkelijke manier om daar achter te komen. Zal waarschijnlijk ook wel verschillen per applicatie. Misschien toch maar vragen of ze echt even Cinebench kunnen draaien dan.

[ilaurensnl]

Neen, helaas werkt dat niet zo. Het is geen enkel server maar meerdere. 5848 nodes = servers.

Je hebt dus niet gelijk alle 748.544 tot je beschikking.

Kan het mis hebben

[kdekker]

Maar dan nog, dik 5000 nodes bezighouden is ook een ingewikkelde klus. Er zullen vast controlling node(s) zijn die werk parallel distribueren.

[redbullzuiper]

Zou toch een heerlijke grap zijn als je je Cinebench open en je ziet op nummer 1 een score van 64.795.840

De balkjes van de overige scores kun je dan niet eens meer zien, omdat die maar een fractie van die 64.000.000+ zijn, zijn die balkjes maar een aantal pixels groot

[T!mothy]

Ik lees al die termen en getallen, maar ik heb moeite het echt in perspectief te brengen. Na even zoeken heb de huidige Archer supercomputer gevonden op plekje 252 van de top500. De nummer 1 van dit moment is best wel indrukwekkend met een piek van 200 PetaFlops vs de huidige 1,6 PetaFlops van de Archer. De Archer 2 wordt dus 28 PetaFlops, een grote verbetering. De Frontier valt daarentegen weer in de categorie mindblowing met zijn (of haar) 1500 Petaflops (1,5 ExaFlops).

[Verwijderd]

Waarom lijkt dat ding op een rij frisdrank automaten, doe mij maar de cray 1 of cdc7600 look.

[Toerq]

nou die oude die mogen ze hier wel afleveren heb er wel een leuke bestemming voor

[JorisNoordweg]

But does it run Crysis?

[SRI]

denk dat met al die cpus je nog steeds betere prestaties haalt dan met een hedendaagse high end graphics kaart

[Verwijderd]

Enorm veel overhead. 1/3de van de GPU’s zou veel efficiënter zijn.

[j1b2c3]

Zo lang het maar geen Global Thermonuclear War wil spelen vind ik het prima

[Fermion]

Crysis Hyper-converged Epyc Mod.