Twitter zet bittorrent in voor uitrollen serverupdates

Twitter heeft zijn serverupdateproces tot 12 seconden weten te verkorten. De systeembeheerders konden deze verbetering treffen door gebruik te maken van bittorrent. Voorheen duurde het uitrollen van een update 40 minuten.

Twitter heeft met de zelfgeschreven bittorrentsoftware een tijdsbesparing van 99,5% gerealiseerd. Door de groei in de afgelopen jaren kampte het sociale netwerk met schalingsproblemen bij serverupdates. Met behulp van een enkele Git-server werden de duizenden servers van updates voorzien. Elke server moest apart de update van de Git-server downloaden en installeren, een tijdrovende bezigheid omdat de server zeer zwaar werd belast. Het bedrijf uit San Francisco vond de oplossing in de opensource-wereld in de vorm van bittorrent.

Ze ontwikkelden Murder, vernoemd naar het poëtische woord voor een groep kraaien. Murder is een tool, geschreven in de programmeertalen Python en Ruby, waarmee de updates worden aangestuurd. Als client is een gemodificeerde versie van BitTornado gebruikt die onder andere lagere toegangstijden kent, een hogere bandbreedte en geen nat-problemen heeft. Elke server downloadt van één peer en dient zelf ook als één peer voor een andere server. Als de eerste server in de 'ketting' het eerste datapakketje van de update heeft ontvangen, begint de tweede server dat pakketje te downloaden. Zo ontstaat er een ketting van data waarmee de nieuwste software snel verspreid kan worden. De Murder-software is opensource en voor iedereen te downloaden.