IBM komt met open source in opslagbranche

Bij C|Net lezen we dat IBM het open-sourceprincipe zal toepassen op software die bedoeld is voor de nieuwe Storage Tank-technologie. Al vijf jaar wordt er aan dit project gewerkt, onder de codenaam Golden Retriever. Het idee achter Storage Tank is om meer uit bestaande opslagsystemen te krijgen en ervoor te zorgen dat deze makkelijker te beheren zijn. Om dit te bereiken is het onder andere zo dat de 'metadata', zoals de fysische locatie en de grootte van bestanden, niet in het opslagsysteem zelf wordt bijgehouden, maar op externe servers. Een voordeel hiervan is bijvoorbeeld dat er zo maar liefst een miljard bestanden opgeslagen kan worden. Daarnaast zal het systeem in staat zijn om bepaalde typen bestanden op speciaal daarvoor ingerichte apparaten op te slaan, en dus niet zomaar ieder bestand simpelweg als één van de zoveel bestanden te zien.

Door gebruik te maken van het principe van open source hoopt IBM het ontwikkelproces van de bij het opslagsystemen behorende software te versnellen. Daarnaast hoopt de computergigant zich zo bij de toplaag van de programmeurs op een positieve manier te onderscheiden. De protocollen waarmee gecommuniceerd wordt met de hardware liggen vast, maar hoe deze precies geïmplementeerd worden staat nog open. Anderen kunnen op deze manier hun eigen metaservers ontwikkelen, wat naar de wens van IBM teweeg zal brengen dat de Storage Tank-technologie binnenkort de opslagwereld zal overheersen:

But for servers with multiple operating systems to tap into Storage Tank, a piece of software called an agent must be running to communicate with the metadata server. IBM plans to release a sample agent program as open-source software, Pease said. Releasing the example software will permit others to write agents to tap into Storage Tank, Pease said. In addition, IBM will describe the protocols the agents use to communicate with the metadata servers, allowing others to build their own metadata servers if they wish, he said. IBM hopes its strategy will make Storage Tank widely used. "Our goal for Storage Tank is nothing short of world domination," Pease said, only partly joking.

IBM's Almaden labs are working on several technologies besides Storage Tank, showing off several products in a recent media tour of the facility. IBM expects only about 60 percent to 65 percent of its research lab projects to reach the product stage, Menon said. "We don't want to be more successful, because if we're not being crazy enough, we're not being challenged enough," he said.

Reacties (21)

[lucid]

Vooral de opmerking van de wetenschapper bij IBM

..We don't want to be more successful, because if we're not being crazy enough, we're not being challenged enough," "

is een hele hoopvolle.... Gelukkig zijn er gekken met hoge posities in de techworld...anders werd het saai en uitzichtloos.

[MrMr]

Ik ben het met je eens dat het een slecht teken voor de research is als alles in de productie komt, maar de verwachting van IBM dat 60% zover komt is ook al niet veelbelovend: Als je als research groep een wild idee uitprobeert moet je daarna twee (saaie) veilige projecten doen om je doelstelling te halen...

[Verwijderd]

Erg leuk, eindelijk weer eens een stukje vooruitgang in opslag die niet hardware gerelateert is.
Helemaal klasse dat ze het niet voor zichzelf houden (Als is dat natuurlijk ook vanuit een commercieel oogpunt noodzakelijk, niet alles draait op IBM storage natuurlijk, er zijn velen anderen)

Als comment op eenieder die commentaar heeft op netwerk plat, een netwerk hoeft niet meer plat te gaan, amateurs !!
Zelfs al dondert de stroom er af, dan wordt de data nog ondervangen, moet je thuis eens proberen om je computer uit te zetten zonder dat je iets hebt opgeslagen, volgens alle comments over netwerk plat.

Stand alone PC's zijn zeer gevaarlijk, je bent zo je data kwijt, vele malen gevaarlijker dan wel netwerk ook.

[dasiro]

zal het dan niet veel langer duren vooraleer een bepaald bestand gevonden is, vermits die data eerst over het netwerk moet worden gevonden ipv op de schijf zelf. besides de data op de server moet toch ook opgeslagen worden.

wel gevaarlijker denk ik: netwerk plat = bye bye data op HD

[Parody]

Voor een gewone thuissituatie misschien wel waar, hoewel de onstabiliteit van netwerken ook weer niet overdreven moet worden. In bedrijfssituaties waar ook met grote regelmaat backups gemaakt worden van die servers is het heel anders. Ik zorg er altijd voor dat de dingen die ik echt wil bewaren op een server terecht komen...

[rootlinux]

Zover ik het verhaal begrijp wordt alleen de metadata met deze techniek op een centrale server opgeslagen zodat alles sneller te localiseren is. De data zelf blift gewoon op de host server staan.

Voor groote bedrijven met terabytes aan opslag kan dit best handig zijn. Hoef je geen honderden servers af om een bestand te vinden maar vindt je het bestand met een gerichte query en surf je gelijk naar de juiste server

[Verwijderd]

hoezo netwerk plat weg data
je hoef alleen te zorgen dat de meta server een zeer goede backup heeft en de rest van de data blijft altijd bewaard dus zal het backuppen ook sneller en goedkoper worden omdat alleen maar de meta server hoeft te doen

[Janoz]

vermits die data eerst over het netwerk moet worden gevonden ipv op de schijf zelf.

De snelheid van netwerken groeit sneller dan de snelheid van HD's.. Over niet al te lange tijd kun je data sneller van het netwerk trekken dan dat je het vanaf je eigen (standaard) HD kunt halen.

[deregtx]

ik had ook een Golden Retriever.

[Verwijderd]

Een steengoed idee! Het enige wat de server hoeft te doen als hij een filerequest krijgt , is bijvoorbeeld een TFTP sessie tussen de client en een van de fysieke fileservers te openen en verder hoeft de metaserver er bijna geen processortijd in te steken.

[Verwijderd]

inderdaad.

op deze manier kan je dus een hoop server load besparen. verder wordt het op deze manier ook makkelijker om je data te backuppen. 1 tapeje voor de metaserver en 1 per file server. mocht er een file server crashen. dan weet iig nog wat je precies kwijt bent en welke data je nog wel hebt. dat scheelt een hoop uitzoek werk.

[Verwijderd]

Prima initiatief.
Het concept van Golden Retriever is uitstekend en feit dat het open-source is/wordt geeft de gehele industrie een kans om er op in te haken.
Dit geeft dus vele mogelijkheden voor zowel grote bedrijven, het MKB en zelfs de thuis gebruikers c.q. tweakers.
Het getuigt van IBM's visie. Imho mogen zij er best wat aan verdienen zodat er meer van dit soort initiatieven van Big Blue komen.

[Verwijderd]

Dit is geen nieuw idee.

Compaq is al een paar jaar met dit bezig, en het is al geimplementeert. compaq noemt het ENSA ( enterprise network storage achitecture ) en OPEN SAN.

Dit zijn oplossingen voor centralized management en configuratie , en hetrogene platformen ( dus multi server , multi operating systems , multi storage vendors ). Ook het metadata verhaal is er al lang, het heet versastor. Dit is het processen van de metadata via servers voor virtualistatie en server free backups. In tegenstelling tot wat hierboven wordt gesuggereert gaat dat via fibre channel, niet het LAN. ( via het LAN is een erg slecht idee : traag , minder redundant en geen standaart scsi support )

[Fostar82]

Je krijgt wel meer netwerkverkeer. En wanneer je netwerk plat ligt kun je ook op de fileserver zelf weinig meer met je bestanden. Stel dat je meta server affikt dan moet er eerst een andere metaserver komen waar je je back-up op zet waarna je weer bij je bestanden kunt komen. Is toch vrij lastig allemaal.

Ook is er meer kans op fouten. Een netwerk is van nature onbetrouwbaar. Door bovenliggende protocollen wordt het geheel redelijk betrouwbaar gemaakt. Maar ondanks foutdetectie en foutcorrectie komt er toch nog wel foute data door. En dat kan net zo makkelijk gebeuren tijdens het bijwerken van je bestanden tables op de meta server. En met een klein foutje daar, kun je zo bijv back-up images verliezen ter grote van een aantal gb's.

[Verwijderd]

Even voor de duidelijkheid: de technologie zelf (storage tank) is volgens dit artikel niet open source, het is slechts de client (agent) waarvan IBM er eentje open-source released, en niet zonder reden:

IBM plans to release a sample agent program as open-source software, Pease said. Releasing the example software will permit others to write agents to tap into Storage Tank

maw. men laat er 1tje open-source de markt op, zodat er na verloop van tijd voor elk OS wel een client beschikbaar is, zonder dat dit IBM geld/ontwikkelingstijd gekost heeft. Imo is dit gewoon een hele slimme marketingtruuk, dat ie werkt zie je hierboven al - men gaat er zondermeer vanuit dat de technologie zelf open source is, zonder even verder te kijken.

Maak de serversoftware opensource IBM, en dan praten we verder