IBM en Google steunen universiteiten bij distributed computing

Google en IBM gaan hardware, software en diensten leveren aan universiteiten om het gebruik van gedistribueerde rekenkracht te stimuleren. Studenten moeten zo eerder in aanraking komen met de technologie.

De bedrijven hebben het Academic Cluster Computing Initiative in het leven geroepen om studenten toegang te geven tot clustersystemen. 'Om komende problemen het hoofd te bieden is het nodig,' zo verklaart Christophe Bisciglia, software-ontwikkelaar bij Google, 'dat studenten en onderzoekers in staat zijn duizenden machines te programmeren om gigantische hoeveelheden data in een oogwenk te verwerken.' Nu kosten de gedistribueerde systemen nog zoveel dat slechts enkelen aan specifieke universiteiten ermee kunnen werken.

Onderdeel van het initiatief is de levering van een cluster van enkele honderden computers, bestaande uit servers van Google, IBM Bladecenters en IBM System X-systemen. De servers draaien Linux, Xen en Hadoop, een opensourceplatform voor een gedistribueerd bestandssysteem dat wordt beheerd door de Apache Software Foundation. Studenten kunnen de clusters via internet benaderen om hun programmeerprojecten op het gebied van parallelle berekeningen te testen.

'Ons doel is om de programmeurs van de toekomst software te laten schrijven die de wereldwijde groei van internet en miljarden veilige transacties per dag kan ondersteunen', aldus Samuel Palmisano, ceo van IBM. De Universiteit van Washington neemt als eerste deel aan het initiatief, gevolgd door vijf andere Amerikaanse universiteiten. De bedoeling is dat het project in een later stadium wordt uitgebreid naar andere instellingen.

Reacties (12)

[Destralak]

Dit is echt fijn ik vraag me af hoeveel de universiteit aan zo'n project moet meebetalen, en of hogescholen misschien hier ook mee van kunnen profiteren.
Het is namelijk ook zo (ik studeer Informatica) dat we er wel enige theorie over krijgen, maar het in de praktijk niet door te voeren is.

Ohja, voor de onwetenden: http://nl.wikipedia.org/wiki/Distributed_computing

[Reactie gewijzigd door Destralak op 24 juli 2024 22:54]

[Niemand_Anders]

Studenten doen hiermee hardware kennis van IBM op. Ze weten wat de IBM systemen kunnen. Als zij dan later instromen bij het bedrijfsleven, zullen zij hun voorkeur uitspreken voor een IBM systeem.

Op die manier is Microsoft met Windows ook ooit op de zakelijke markt terrecht gekomen waar toen Novell (netware) heer en meester was.

Daarnaast kweekt IBM op deze manier goodwill. Daarnaast is IBM al langere tijd op het gebied van clusters actief.

[VisionMaster]

Ik denk eerder dat het gaat lijken op Grid computing of anders eerder een gedistribueerd cluster. http://nl.wikipedia.org/wiki/Grid_computing

Een verschil is dat het breder gebruikt kan worden dan voor 1 bepaalde toepassing, zoals de meeste eenvoudig te installeren gedistribueerde software projecten. BOINC uitgesloten natuurlijk, maar ook dat is niet helemaal generiek.

Misschien dat Google en IBM gedistribueerde MPI problemen door slimme en vrijdenkende student willen laten oplossen. De efficientie daar in is nog altijd een moeilijk probleem om echt goed toe doen. Misschien dat ze dat soort dingen ook misschien willen bevorderen.

In Nederland hebben we DAS3 als gedistribueerd cluster speeltuin voor de studenten en onderzoekers. Linkie op Tweakers nieuws: Nederlandse universiteiten krijgen supercomputerclusters

[Verwijderd]

Hier hetzelfde.. toevallig Saxion Enschede ??

Bij Orientatie Informatica hebben ze er al zovaak over gehad, maar echt wat laten zien kunnen zie niet echt.. Slechts was leuke pics in een Powerpoint presentatie..

Zou wel heel vet zijn om daar van te kunnen meegenieten een x..

[OddesE]

Onderdeel van het initiatief is de levering van een cluster van enkele honderden computers

Is dit niet een beetje onzin? Me dunkt dat als de software goed geschreven is dat het dan niet uitmaakt of je 3, 4 of honderden PC's in het cluster hebt?

EDIT: Wel qua rekenkracht natuurlijk, maar qua algoritmes en programmacode?

[Reactie gewijzigd door OddesE op 24 juli 2024 22:54]

[StefSybo]

Door te testen op een cluster van enkele honderden nodes kan je de schaalbaarheid van je code veel beter testen. Het kan natuurlijk dat een bepaald algoritme op 4 cpu's (bijna) 4 keer zo snel is als op 1 cpu, maar dat het bij meer dan 10 cpu's niet meer verder schaalt. Door te testen op een groter cluster kan je dat soort effecten beter bestuderen.

[Comp_Lex]

Je kunt dat soort effecten ook gewoon van te voren uit rekenen hoor:

http://en.wikipedia.org/wiki/Amdahl_law

[VisionMaster]

Proefje:
Jij bent de enige manager van een bedrijf en je hebt een project voor 100.000 werkuren.

Probeer 5 werknemers bezig te houden met werk, nu met 10 mensen in je kleine bedrijf, nu met 100 mensen, daarna met 1000 mensen. Je bent de enige manager en bent het enige aanspreekpunt voor al het werk en de problemen.

See my point? Zeker bij niet 100% rechtlijnige opdrachten is het een flinke uitdaging.

Linksom, rechtsom, verspreid eerst, verhak je werk, doe pre-processing, doe het in meerdere runs om je resolutie te vergroten. Verdeel het op een cluster, moet je rekening houden met anderen, heb je latency in je berichten uitwisselen... dat soort dingen.

[Reactie gewijzigd door VisionMaster op 24 juli 2024 22:54]

[Bleet]

Gaan ze ons (DPC) ook meehelpen? Anders wordt het een klein beetje oneerlijk he.

[SPee]

Waarom gebruiken ze nooit de al beschikbare desktop PC's

Een beetje uni of hoge school heeft een mediatheek met computers waarop leerlingen kunnen werken. Waarom zetten ze daar geen extra programma op zodat een klein deel van het systeem als clusternode gebruikt wordt

[martijnvanegdom]

Omdat dat geen zoden aan de dijk zet als je echt wil rekenen.

[PHiXioN]

Prima zet van Google en IBM toch? Aangezien een groot deel van de betreffende studenten ooit bij dat soort bedrijven gaat werken, is het goed dat ze er alvast in investeren.