Amsterdams internetknooppunt groeit rap verder

Het Amsterdamse internetknooppunt AMS-IX heeft onlangs een doorvoersnelheid van 233Gbit/s op de klok gezet. Het knooppunt, dat 259 providers bedient, laat inmiddels de andere grote internetexchanges op de planeet ver achter zich.

Zowel in termen van de piekdoorvoersnelheid, de gemiddelde snelheid, het totale verkeer en het aantal leden is het Amsterdamse knooppunt het grootste ter wereld. In december verwerkte AMS-IX gemiddeld maar liefst een petabyte aan data per dag. Het afgelopen jaar is het verkeer er meer dan verdubbeld, een trend die zich nu al vier jaar lang voordoet. Het ligt dan ook in de lijn der verwachting dat de 300Gbit/s-grens nog dit jaar doorbroken zal worden. Het nieuws van het nieuwe record voor AMS-IX werd bekendgemaakt door netwerkfabrikant Foundry Networks, die jubelt dat zijn BigIron RX-serie van ethernetswitches het knooppunt in staat heeft gesteld de huidige verwerkingscapaciteit te bereiken en het mogelijk maakt om de sterke groei bij te benen.

Piekdoorvoersnelheden van de tien grootste internetknooppunten op 21 januari 2007

Reacties (88)

[appies]

Zo blijft Nederland toch gehandhaafd als 'Nederland Distributieland'. Transport, maar dan op een andere manier. Niet slecht dus.

[Verwijderd]

yep, wij importeren/exporteren zo goed als alles. ons laatste import/exportproduct is bitjes, ze gaan per stuk en u kunt ook een treetje van 8 in een keer bestellen. deze staan op de lijst onder de naam Byte

[Verwijderd]

Nog niet zo lang geleden hadden we telefoon, radio en televisie en internet op aparte infrastructuur en over niet al te lange tijd gaat dat allemaal over internet. Hardstikke logisch natuurlijk. Maar je moet dan es zien wat voor een bak verkeer er over internet gaat.

[n4m3l355]

Ik vraag me af of dit wel een goede trend eigenlijk is, als je internet verbinding eruit ligt ben je dus ook alles kwijt. Niet alleen dat is niet zo'n sterke opzet ook dat met name voor west-europa dat alle verkeer door het amsterdamse knooppunt is niet zo goed, mocht er ooit eens een ongeluk gebeuren in welke zin dan ook dan zullen heel veel mensen dit ondervinden. Natuurlijk is er wel een failback maar het zou misschien een beter idee zijn om dit juist te verschuiven zodat er niet zoveel gewicht op 1 punt te liggen komt.
Tijd zal dit wel uitwijzen

[TD-er]

We hebben ook nog een ander single-point-of-failure, die voor mijn gevoel de laatste paar jaar steeds vaker minder stabiel (b)lijkt te zijn.
De stroomvoorziening.
Als die eruit ligt, ligt het er vaak voor een hele wijk of stadsdeel eruit en dan heb je soms zelfs geen GSM verkeer meer (had ik laatst tijdens die storing waarin half europa even zonder zat)

[SunnieNL]

Gelukkig werken dan meestal de oudere telefoons nog wel omdat die de stroom van het vaste telefoonnet afhalen.
Daarom misschien tip om nog zo'n telefoonlijn te kopen en je kpn lijn gewoon te houden

* SunnieNL houdt sowieso niet van triple play vanwege de single point of failure

[ronny]

[reactie op sundace]
Ik denk alleen dat op het moment dat de GSM masten door stroom gebrek uitvallen dat de wijkcentrale van de KPN of de andere verdeelkasten ook uitvallen.
Dus dan zal de telefoon ook niet meer werken.

En ach een keer een uurtje zonder telefoon met toch te overleven zijn niet!

[VisionMaster]

Vorig jaar heeft 2/4 van de AMS-IX (nikhef en sara) een volledige dag op de noodstroom gedraait. Heb jij iets gemerkt? Ik niet, behalve dan dat de rest van het gebouw niet op de noodstroom stond (natuurlijk) en dat we naar huis konden. Dit soort dingen zijn al prima geregeld.

Er was toen een hoofdleiding gesprongen onder de grond. Lang leven de dieseltjes op het terrein

Grappig... gezien dat er voor die gebouwen al een extra voorziening in de planning zat en die binnenkort wordt aangelegd...

[Verwijderd]

jaja .. piet en paul kunnen wel een uurtje zonder GSM. Noodcommunicatie daarentegen (cfr. GPRS based handhelds etc ...) kunnen niet zonder. Het hangt er dus allemaal vanaf waar je het voor gebruikt.

[Verwijderd]

De kans op uitval wordt wel steeds groter op deze manier ja, maar zie ook dit stukje:

nieuws: 'Kans op uitval internet in Nederland gering'

We zijn redelijk redundant uitgevoerd, en zoals VisionMaster al zegt: noodstroom kan een hoop opvangen (UPS voor de korte termijn, zodat ze hiccups kunnen voorkomen in de tijd dat de dieselaggregaten op volle kracht moeten komen).

En ronny: de wijkcentrale van KPN heeft ook redundante stroomvoorzieningen met dieselaggregaten en de hele bende. Dus nee, dat gaat niet down als het GSM netwerk down gaat, dat is compleet los van elkaar.

[Verwijderd]

aan de traffic stats valt me wel op dat het verkeer snachts bijna plat ligt. Ik dacht eigenlijk dat een groot deel van het dataverkeer geautomatiseerd was en 24/7 doorging, maar blijkbaar is toch vooral downloadende burger verantworodelijk is voor de traffic.

[Sissors]

Let wel op dat de schaal van de y-as niet tot 0 door gaat. Hij begint bij ongeveer 80 gbit/seconde, en dat is meteen ook het minimum. Dus als het bijna plat ligt, dan is het nog altijd meer dan wat de knooppunten buiten de top 3 op hun max halen.

[Titulanix]

Mijn 'burger-downloads' lopen vaak 's nachts door en ik neem aan die van andere ook. Uit de grote bult in die grafiek overdag, terwijl het 's avonds afneemt, trek ik eerder de conclusie dat het toch vooral om zakelijk verkeer gaat.

[TD-er]

Een hoop burger-downloads die ook 's nachts door gaan zijn vaak van het type peer-2-peer, en ook heel vaak nog wel regio (land) gebonden. (films met dutch-subs en het grootste deel van de downloads zijn vaak vrij lokaal populair en hoor je via bekenden over, dus blijft veel lokaal)
Ik vermoed dat een hoop van dat verkeer dus niet over de AMS-IX gaat, maar binnen de netwerken van de providers blijft, of over de peerings tussen die providers gaat.

[arjankoole]

Ik vermoed dat een hoop van dat verkeer dus niet over de AMS-IX gaat, maar binnen de netwerken van de providers blijft, of over de peerings tussen die providers gaat.

als het over de peerings zou gaan zou je het juist weer wel bij de AMS-IX terug moeten zien, of in elk geval gedeeltelijk.

[Verwijderd]

Reactie op arjankoole: directe peerings zie je niet terug op de AMS-IX stats, als ik me niet vergis, dus mis je hier nog wel wat aan statistics.

En dan meer algemeen op de thread, zie de weekly stats:

http://www.ams-ix.net/tec...l?log=totalall;png=weekly

en monthly:

http://www.ams-ix.net/tec...?log=totalall;png=monthly

Aan de weekly kan je duidelijk zien dat het in het weekend en 's avonds de pieken zijn qua downloaden. Dus ja, consumerdata neemt toch echt het gros aan verkeer voor zijn rekening. Maar het is inderdaad wel belangrijk om te onthouden dat de grafiek begint bij 80 Gbit/sec, en niet op nul.

[thegve]

Ik zie de dalende lijn ergens in de late avond inzetten, en vooral doorgaan in de nacht. Waarop veel niet-tweakende downloaders hun PC zullen uitzetten. Ik doe dit niet, maar als ik iets download (linux distrootje natuurlijk), dan lopen die meestal in de nacht ook wel ergens af, die lopen niet door de hele nacht.
edit:
Zeg ik om 2AM...

[Pietervs]

Ik had onderhand verwacht dat de AMS-IX het minder druk zou krijgen met de opening van het knooppunt in Enschede en Groningen.
Al in 2000 werd bekend gemaakt dat Groningen (GN-IX) een derde knooppunt zou worden in Nederland, na Enschede (ND-IX). Of zijn die niet doorgegaan?
bron

[arjankoole]

Al in 2000 werd bekend gemaakt dat Groningen (GN-IX) een derde knooppunt zou worden in Nederland, na Enschede (ND-IX). Of zijn die niet doorgegaan?

voor zover ik weet is de Groningen-IX ter gewoon gekomen, Google zit daar geloof ik. (maar ook op de AMS-IX, ben wel eens een kast van hun tegengekomen).

[VisionMaster]

En hoe zit de GN-IX aangesloten op de rest van de wereld ... juist afaik, ligt er een pittige verbinding van en naar groningen.

[vanke014]

Wat nog meer gewicht geeft aan het stijgende verkeer op de AMS-IX is het verdwijnen van Private Peers tussen bepaalde partijen. In praktijk is gebleken dat het exchangen van verkeer over een shared medium (AMS-IX) goedkoper kan zijn, o.a. bij het aanschaffen van poortinterfaces.

[JBplap]

En deze data gaan ze dan straks anderhalf jaar lang bewaren...

Als de plannen van de regering doorgaan dat is,
1 PB per dag...

[elmuerte]

1.359.990.000 GiB in totaal maar. Dat valt toch wel mee (incl data)
Dus laten we gokken dat het 44.564.152.320.000 pakketjes zijn (gem 32k per pakketje).
Dus voor logs is dat *2*128bit (ipv6)*32bit (timestamp?)
is 5.704.211.496.960.000 bytes aan data (bij benadering).
dus +- 5704 TiB

[nhimf]

Je zit een paar nullen te ver

1PB = 1024TB = 1024x1024GB oftewel 1048576 GB

1048576 GB = 1125899906842624 byte

1125899906842624 / 32768 = 34359738368 pakketjes

Dus volgens jouw berekening, omgerekend naar bytes (*2*16*4) = 4398046511104 bytes, oftewel 4 TB

4TB per dag 1,5 jaar lang is 2190TB of 2,2PB

Het is ook PB > TB > GB > MB > kB > B
--

Maar ze zullen echt niet de info van _alle_ pakketjes gaan opslaan, dat is natuurlijk gekkenwerk en totaal overbodig.

[Verwijderd]

Ohja? Dat is anders precies waar de wet om vraagt: _alle_ verkeersgegevens. Ze weten immers pas achteraf wat ze willen hebben...

[Theuno]

Ze vragen echt alleen om de gegevens, niet om de data. Lees het artikel over de wensen van het kabinet nog even.

Daar staat:

Het betreft zogeheten verkeersdata: urls van bezochte webpagina's, e-mailadressen waarnaar gemaild is, telefoonnummers en de tijdstippen waarop verbinding met internetpagina's werd gezocht en gebeld werd.

[Mijzelf]

Ze vragen echt alleen om de gegevens, niet om de data.

Dat zijn volgens mij synoniemen.

Het betreft zogeheten verkeersdata: urls van bezochte webpagina's, e-mailadressen waarnaar gemaild is, telefoonnummers en de tijdstippen waarop verbinding met internetpagina's werd gezocht en gebeld werd.

De bezochte URL's bevinden zich in de data. Dus je moet of alle data gaan filteren of interpreteren, of alles opslaan. Het eerste kost veel processorkracht, het tweede veel opslagruimte.

[Parasietje]

Er moet geen timestamp bij. Er zit al een timestamp in de TCP header.

[Fernoráto]

De data zelf gaan ze niet bewaren. Er moet alleen bewaard worden wat er allemaal opgevraagd is (logs dus), de bestanden zelf niet.

[Jazco2nd]

Hoe moet ik me de AMS-IX eigenlijk voorstellen?
Ze doen niet aan dataopslag dus het zal wel niet een groot park vol servers zijn..
Maar wel een groot park vol switches en extreem dikke kabels? Waar zitten ze eigenlijk in Amsterdam?

[vanke014]

De AMS-IX zit op 4 locaties in Amsterdam, o.a;

- TelecityRedbus 2 (A'dam Z-O)
- Nikhef (A'dam Sciencepark)
- SARA (A'dam Sciencepark)
- GlobalSwitch (A'dam Slotervaart)

Het is eigenlijk een verzameling van een aantal (zeer) dikke switches, waar je als ISP op kan connecten en via dat medium verkeer kan exchangen. In veel gevallen is de uitwisseling gewoonweg gratis, je hebt dan enkel de poortkosten. Dus in principe, een L2 voorziening waar ISP's op connecten.

[Verwijderd]

Je moet wel over een AS-nummer beschikken wil het interessant zijn.

Beetje handmatig gaan routeren op die manier is er niet echt bij hoor.

Leuke reclame vanuit foundry nu ze net de nieuwe serie BigIrons hebben neergezet

Deed Force10 ook bij True, terwijl andere bedrijven die dingen toch al enige tijd eerder draaiden in een wat grotere vorm.

230Gbit/s is niet vreselijk veel trouwens, Level3 doet in Amsterdam zo'n 562Gbit/s (maand of wat geleden) and counting...

[ppotter10]

Wat bedoel je dan met die 562Gbit/s? Ik probeer het te vinden, maar krijg het niet gevonden Zou het nieuwsbericht ook tegenspreken...

[vanke014]

Vanzelfsprekend, al hoewel ik niet denk dat de doorsnee IT-er zich bezig houdt met BGP, IP-space enzovoort.

Level3 heeft een heel leuk netwerk, maar je moet toch toegeven dat door de AMS-IX behoorlijk wat verkeer gaat.



OFT: Gelukkig gebruiken ze ook nog de wat "oudere" MG8 switches, de RX switches hebben nog wat kinderziektes, zodra deze verholpen zijn zullen de overige switches wel vervangen worden.

[siren]

Ik ben er een keertje rondgeleid toen ik nog op mbo kantoorautomatisering deed in 1999 toen hadden ze het nog over de 256 mbit die gelegd zou worden. Ik keek mijn ogen uit daar op het rekencentrum van de universiteit. Veel van de servers die daar staan zijn gewoon grote kasten met 19 inch rekken waar providers of grote website namen op staan sommige waren ongemerkt en waarschijnlijk pr0n. Ze hadden daar ook een oude cray staan en een onyx (sgi) en een heel gave paralelle computer. En heel veel ibm's voor het rekenwerk.
Nu weet je gewoon dat ze dikke pijpen met andere internet exchanges hebben en gewoon dikke serverparken met 19"rekken vol met servers. Alles wat je googled youtubed en hotmail/msn'ed gaat erdoor. Waarschijnlijk hebben die ook een colocatie daar om verkeer met amerika te besparen.

[ep667]

De fout die jij maakt, maken veel mensen. De gedachte, en gek genoeg ook onder veel (zelfbenoemde) 'tweakers' is dat de AMS-IX een plek is waar providers al hun servers ophangen. Sommige (minder integere?) hosters en/of mensen die interessant willen doen zeggen ook dat hun server 'op de AMS-IX' staat. Op zich grappig, dat kan niet echt. Wèl dichtbij de AMS-IX.

Niets is echter minder waar, dat kán weliswaar gebeuren in dezelfde datacenters (NIKHEF, SARA, TeleCity 2, Globalswitch) maar dat hoeft niet. Het enige dat de AMS-IX op die locaties heeft zijn switches waar aanbieders hun spreekwoordelijke kabeltje in kunnen pluggen en daardoor kunnen peeren met de andere aangesloten partijen.

Het heeft dus niets met servers te maken, of het moet zijn dat servers indirect er wel op aangesloten zitten.

[VisionMaster]

zoals door ep667 beschreven weet ik iig van NIKHEF dat hier data-servers niet toegestaan zijn. Volgens mij staan er wel een paar kleine rackjes met disken er in, maar dat is heel heel erg zeldzaam. Bij de andere AMS-IX partners komt dat wel weer wat meer voor. Bij het NIKHEF staan alleen maar routers en dikke switches.

[lasermen]

Of het moeten servers van het Nikhef zelf zijn

Die staan dan wel in de ¨AMS-IX¨

[Verwijderd]

Voor het continueren van een jaarlijkse verdubbeling in verkeer zal, gezien de marktverzading met het aantal breedband aansluitingen, de doorvoersnelheid per aansluiting sterk moeten stijgen

[ACM]

Dat hoeft niet, het gros van de verbindingen wordt echt niet continu vol getrokken met downloads. Als men dus domweg meer reden krijgt de huidige verbindingen vol te trekken, dan zal dat ook zichtbaar zijn.
Voorbeelden hiervan zijn het populairder worden van online muziek/films/tv/etc. Maar ook minder duidelijke zaken zoals de toegenomen spam met afbeeldingen zorgen voor toenames van de verstookte bandbreedte.

[ram.con]

Als de oorzaak-gevolg relatie zó om zou liggen (en de prijs niet zou stijgen) zou dat inderdaad geweldig zijn.

Maar ook zonder die relatie zal de doorvoersnelheid stijgen, alleen al vanwege de nieuwe media en streams over internet , en dan komt de AMS-IX mee zoals vanke014 al zegt

[vanke014]

Stijgende vraag naar dataverkeer komt door de snelheidsverhogingen bij de accessproviders, alsmede IP media (streaming audio/video).

Fiber-To-Home zal de vraag naar dataverkeer enkel doen toenemen, naar mijn inschatting zal de AMS-IX tegen het jaar 2010 een 500 Gbit (0.5 Tbps) te verwerken krijgen.

[sewer]

Hoe kom je aan die schatting? Geextrapoleerd of natte vingerwerk?

Als je de stats bij AMS-IX kijkt, dan zie je dat de dagelijkse traffic load in een jaar tijd bijna verdubbeld is (ongeveer van 120 naar 220). Vanuitgaande van die groei kom je uit op 1,3 Tbps in 2010.

Jouw schatting dat het in 3 jaar iets meer dan verdubbeld lijkt me wel heel conservatief.

[pietje63]

Ik denk wel eerder

Het afgelopen jaar is het verkeer meer dan verdubbeld, een trend die zich nu al vier jaar lang voordoet

Als deze trend zich doorzet halen we dit jaar misschien nog wel de .4tbit, en volgend jaar de .8 tbit....

Nederland loopt nu redelijk voorop qua breedband internet, als ze straks HET doorvoerpunt van Europa blijven dan zie ik geen reden waarom ze de groei niet nog een tijdje aan zouden kunnen houden.

[vanke014]

In principe natte vinger werk, ik ben werkzaam in de IP-diensten, prijzen van co-locatie en footprints in het DC gaan omhoog. Logisch gevolg hiervan is dat de vraag naar ruimte minder is, waardoor de vraag naar IP-verkeer iets zal afnemen.

Vergeet niet dat in de afgelopen 2 jaar ADSL2 geintroduceerd is, de vraag naar IP-verkeer nam vanaf dat moment dus explosief toe.

Meer dan 500 Gbps in 2010 is eventueel mogelijk en zeker niet ondenkbaar, al vereist dit wel een iets andere inrichting van de huidige AMS-IX setup. Het aanbod van 10baseT poorten op de AMS-IX zijn al niet mogelijk meer, ik verwacht dat in 2008 de optie tot een 100baseTX poort verdwenen is.

[Plague]

Ik zou de toename van het internet verkeer eerder toeschrijven aan diensten als YouTube en consorten, dan snelheidsverhogingen van providers.

Met een 4 mbps lijntje kan je al die filmpjes ook al prima streamen, als mede films downloaden.

Ik moet eerlijk zeggen dat 't me niet veel uit zou maken of ik nou 10 of 20 mbit internet zou hebben (heb 20, is gewoon de goedkoopste, Orange).

Waar eerder nog de beperking aan de client-kant lag, zit deze nu aan de server-kant: een server kan maar 50 gelijktijdige 20 mbit verbindingen "serveren", om zijn piek van 1 gbps te halen.

Nu de bottleneck ergens anders zit, wordt het tijd op zoek te gaan naar oplossingen die aan de server-kant weer extra capaciteit creeeren.

[Robinski]

echter zal VDSL de komende jaren misschien wel uitgerold worden.

en eventuele uitrol van glasvezel zal ook zorgen voor bredere aansluitingen bij de mensen thuis.

ook begint TV via internet nu langzaam te komen en begint VoIP ook steeds meer gebruikt te worden.

[Rob1106]

Op basis van wat doe je deze inschatting dan??

[memphis]

Snelheidsverhogingen is niet direct de hoofdzaak maar omdat mensen nu die bandbreedte hebben is het downloaden van films, muziek etc populairder geworden.
Als mensen gewoon de dingen blijven doen als vroegah dan zal het dataverkeer wel meevallen.

[Dolemans]

Het Googelen zal niet over de AMS-IX gaan, dat gaat naar de GN-IX. Het is een publiek geheim dat Google daar een van z'n dataparken heeft staan.

[djidee]

En hier word het bevestigd, wie wil er werken?
Monsterboard

[VisionMaster]

Het beste connectiviteit krijgen ze via de AMS-IX zelf als je daar een router direct op kan inpluggen. De servers zullen dan wel in het datacentrum van groningen staan. Die zijn in het noorden ook flink goed aangesloten op de AMS-IX, dus tja... waar hebben we het over. Uiteindelijk komt het toch weer hier eventjes langs zeilen in amsterdam.

[aval0ne]

Gelukkig moet je sollicteren in het Engels want met zo'n DT fout was je niet ver gekomen.

[Archiebald]

waarom staat google wel op de memberlijst van de ams-ix?

http://www.ams-ix.net/connected/

[vanke014]

Google gebruikt SIG Telehousing te Groningen enkel voor de housing van haar apparatuur (servers).

AMS-IX membership staat daar geheel los van. AMS-IX namelijk geen datacenter.

[Punica-]

Jij bent niet blond, dolemans heeft geen idee waar ie het over heeft.

Google heeft inderdaad servers staan in SIG telehouse te groningen, en heeft inderdaad een aansluiting op de GNIX, maar dat wil niet zeggen dat automatisch alle verkeer maar over de GNIX gaat.

Google heeft veel meer capaciteit zelfs op de AMS-IX, 20Gbit ams tov 1Gbit gnix.

Omdat mijn servers in eindhoven staan wil niet zeggen dat al mijn verkeer maar 'over eindhoven' gaat om het lomp te zeggen(want heb het vermoeden dat het op een andere manier brengen hier geen nut heeft).

[Archiebald]

waarom hebben ze dan een membership als ze (volgens Dolemans) niet over de AMS-IX gaan?
lijkt me dan dat ze juist wel over de AMS-IX gaan?
of ben ik nu heel blond ?