BlackBerry-gebruikers komen geleidelijk weer online

BlackBerry-diensten komen geleidelijk weer online. Dat melden gebruikers onder meer op de Gathering of Tweakers en via Twitter. De storing die maandag begon, is echter niet voorbij; wanneer iedereen weer online is, is vooralsnog onduidelijk.

De Nederlandse tak van T-Mobile bevestigt dat BlackBerry's langzaam weer online komen. Ook op GoT melden gebruikers dat mails weer binnenkomen. Andere diensten lijken nog niet hersteld te zijn. RIM zelf heeft nog niets laten weten.

Volgens T-Mobile zou het werken als gebruikers de accu uit hun BlackBerry halen. Als de accu er weer inzit en het toestel opnieuw wordt aangezet, zou het kunnen dat de diensten weer gaan werken. Zeker is dat echter allerminst. RIM laat gebruikers vermoedelijk gefaseerd weer online komen. Als iedereen tegelijk online zou komen en alle berichten en mails die tijdens de storing in een keer bezorgd zouden worden, zou de server weer down gaan door de grote toestroom.

De oorzaak van de storing ligt in een defecte core switch. De backup daarvoor deed het evenmin, waardoor veel gebruikers van BlackBerry-diensten in Europa, Afrika en andere delen van de wereld offline waren. De defecte switch staat in de Britse stad Slough. Het is nog altijd onduidelijk wanneer alle gebruikers weer online zullen zijn. BlackBerry's van bedrijven die gebruik maken van BlackBerry Enterprise Server zijn niet getroffen door de storing.

Update 16:42: Terwijl BlackBerry-maker RIM nog altijd niets loslaat over wanneer de storing is opgelost, bevestigt het wel dat de storing zich heeft uitgebreid naar Noord-Amerika. De fabrikant werkt naar eigen zeggen dag en nacht om de storing te verhelpen. Bij sommige gebruikers in Nederland werken sommige diensten, maar veel gebruikers lijken nog altijd geen gebruik te kunnen maken van diensten via BlackBerry Internet Server.

Reacties (92)

[Keypunchie]

Nogal forse Single-Point-of-Failure.

Het klinkt alsof ze bij Blackberry net iets meer moeten decentraliseren. Zelfs met de beste wil van de wereld kunnen dit soort problemen nooit 100% uitgesloten worden. Nu is het effect gewoon te groot (de hele EMEA plat). Dan zul je extra moeten investeren (en zo bizar groot zijn die kosten dan ook weer niet) om regio's van elkaar te isoleren in geval van problemen.

Dus niet de hele EMEA onbereikbaar, maar in het slechtste geval een kleinere regio, bvb "Europa West" of "Europa Zuid".

RIM heeft het al moeilijk met zijn hardware om aansluiting bij de consumenten te houden, maar de Blackberry-diensten zijn een Unique Selling Point van het bedrijf. Als dat ook al als onbetrouwbaar wordt gezien, dan loop je het risico dat de consument je helemaal links laat liggen.

[MartyLooterKing]

Zo groot zijn die kosten dus wel... Weet jij wat een core switch kost wat een dergelijke capaciteit aan kan? Tonnen. Plus je moet er dan gelijk 2 hebben, want je bent redundant bezig...

[don_jorg]

Het lijkt er zelfs op dat het niet eens ligt aan waar je je toestel gebruikt, maar waar je hem gekocht hebt. Ik heb voor mijn vriendin in Venezuela in Nederland een Blackberry gekocht en hier geïnstalleerd.

Zij gebruikt hem in Venezuela, maar heeft de afgelopen dagen ook problemen gehad. Het lijkt dus dat waar je hem registreert, dat daar de servers gebruikt worden.

Gezien het aantal toestellen dat ik vanuit Europa richting Latijns-Amerika zie gaan, is het niet eens 'alleen' EMEA.

[n4m3l355]

Laat ik voorop stellen dat ik geen ICTer ben maar persoonlijk lijkt mij dit toch een uiterst gemakkelijke 'oplossing' zonder te weten wat het probleem is. Wie weet is er een database van hun gehacked, wie weet is het een chantage poging van een persoon cq organisatie, wie weet liet iemand een kop koffie vallen. Het blijft allemaal koffiedik kijken met 'oplossingen' en opmerkingen die kant noch boord raken.
Tevens de opmerking dat de kosten niet groot zijn, zonder daadwerkelijk inzicht te hebben is dit ook een stelling zonder enige basis. Wie weet werken ze wel met regio's echter trekt om een of andere wijze de ene regio de ander mee plat.
Dat het een vervelende situatie is voor de klanten is een zekerheid omgekeerd in 5 jaar tijd zijn dit mijn eerste dagen downtime ik ken genoeg gevallen van soort gelijke afmetingen qua bedrijfsvorm die ook plat gingen. Denk maar aan Akamai, Google, Facebook of recentelijk de RSA servers. Verder zolang het enkel downtime is, ja vervelend, maar heb je geen concrete gevolgschade in tegenstelling tot bv de hack van Sony.

[jeffreytigch]

Je zou denken dat een bedrijf zo groot als RIM toch wel goedwerkende backups/failovers hebben.. Ze zijn nu op de harde manier achtergekomen dat hun Core Switch een SPOF is geworden.

[Brummetje]

Probleem meestal met backup oplossingen is dat deze nooit worden gebruikt of getest.... Dus op het moment dat ze nodig zijn werken ze gewoon niet.

Betere oplossing is dan om het om de zoveel tijd te wisselen... dat het main systeem de backup word en visa versa..

[Verwijderd]

Ik zou eerder verwachten dat ze een permanete mirror van all die RIM servers laten draaien.

[SgtElPotato]

Ik ken wel een aantal bedrijven ( waarbij data de allerhoogste prio heeft ) die 2 identieke servers hebben draaien op 2 verschillende locaties in het land. Met allebei een on-site en off-site backup.

En dan hebben we het over een bedrijf dat in vergelijking met RIM vrijwel niet opvalt. En dus een stuk minder data hoeven te beheren van RIM.

Het is maar waar je de prioriteit neerlegt.

Zoals Metaal ook zet, kans is groot dat er meer aan de hand is dan een defecte core switch als je de down-time zo ziet.

[Reactie gewijzigd door SgtElPotato op 23 juli 2024 06:48]

[erwinb]

Wat ik niet snap, waarom is iedereen die een BES heeft draaien nog afhankelijk van RIM. Wat zou er gebeuren als RIM failliet zou gaan??? kan niemand dan nog zijn BlackBerry gebruiken?
Ben benieuwd of de BlackBerry van Obama hier ook last van heeft.

[Trommelrem]

Het (relatief kleine) programma TeamViewer garandeert dat de servers nog 10 jaar blijven draaien nadat ze eventueel failliet gaan. Hoe ze dat doen, geen idee. Maar als TeamViewer zoiets kan garanderen, dan moet RIM dat ook kunnen.

[Zapato]

En wie kun je dan aanspreken als het niet blijft draaien?

[Trommelrem]

Hier de safeguard agreement.

[Foxl]

Natuurlijk weet ik niet wat "normaal" is in de wereld van RIM, maar hier worden back-up systemen wel degelijk periodiek getest.

Sowieso is het erg twijfelachtig dat 1 defecte core switch + back-up de gehele dienstverlening op meerdere continenten plat kan leggen.

[metaal]

Beschikbaarheid en betrouwbaarheid zijn in praktijk tegenstrijdig, omdat om een hoge beschikbaarheid te verkrijgen vaak redundantie als oplossing wordt gekozen. HIerdoor worden systemen erg complex en dus daalt de betrouwbaarheid.

Ik denk dat dit het probleem is waar RIM nu mee zit, gezien de hoeveelheid downtime. Als het echt een simpele (ok... 'core') switch was geweest, was het vervangen hiervan genoeg geweest om het systeem weer up te krijgen. Dikke kans dat nu zestienhonderd redundante servers elkaar staan te failoveren als een kip zonder kop, en niemand die weet hoe ze de boel weer stabiel kunnen krijgen.

[pancake82]

In mijn optiek nogal naïef om te geloven dat heel Europa, Afrika en Midden oosten op één core switch + backup core switch draait (als ik het artikel moet geloven).
RIM zal ongetwijfeld zijn systemen geclusterd hebben over meerdere locaties.
Een regio kan uitvallen, maar continenten die ineens zonder diensten zitten slaat kant nog wal.
RIM moet met een verklaring komen, maar dit is niet geloofwaardig.

Bijzondere update, het is niet alleen een core switch ???
Op zeker dat RIM last heeft van Hackers zoals Sony ook heeft moeten ondervinden.

[Reactie gewijzigd door pancake82 op 23 juli 2024 06:48]

[Jaco69]

1 switch moet wel voldoende zijn. Een kleine switch doet toch wel 10 Gb/s wat meer dan genoeg is.

Daaraan gekoppeld zal je wel heel wat servers moeten hebben want die hebben toch heel wat minder bandbreedte. Waarschijnlijk zijn er te weinig servers om na een uitval weer op te starten.

[Meelobee]

Lekker zo'n single point of faillure op zo'n omvangrijk netwerk. Je zou toch verwachten dat zo'n core switch wel dubbel redundant is neergezet..

[The Realone]

Als je de moeite had genomen alles te lezen had je gezie dat er onbedoeld een SPOF gecreëerd is en dat het wel degelijk redundant uitgevoerd is. Wat Blackberry echter verweten kan worden is dat die backup niet werkt op het moment dat het nodig was.

[BlueMonday]

wat ik wel zorgelijk vind is de opmerking dat de failover niet reageerde zoals bij een eerdere test -> testprocedure klopt ook niet?

[Kevinp]

Tja, je kan moeilijk (letterlijk) de stekker eruit trekken en hopen dat het werkt.

Je kan iets zo goed mogelijk testen, totdat het echt voorkomt. Dan weet je of je test geslaagd is.

In dit geval is dus de test niet goed opgezet.

[Meelobee]

Dus als er een dubbele redundancy (backup van backup) was geweest dan hadden ze nog een optie gehad nadat de failover niet goed werkte.
In theorie misschien overdreven om het zo op te zetten, maar de praktijk laat blijken van niet

[Jaco69]

Heb je wel eens geprobeerd om een volledig redundante IP configuratie op te zetten met 2 router/switches? Grote kans dat als er iets mis is dat het de configuratie is en niet de hardware.

[freshy98]

Nog een keer lezen.

Backup is er, maar werkte niet.
Melding die ik, ik meen op Crackberry, las was dat RIM aangaf dat de failover die eerder tijdens een test nog werkte het nu niet deed.

En dubbel en redundant zijn het zelfde?

[Verwijderd]

Wij hebben ook redundant core switches. maar het is echt wel mogelijk om 1 totaal uit te zetten zonder dat er iets gebeurd.Je kunt ook een backup in een magazijn zetten, dan is het ook backup. maar moet je deze eerst aansluiten. Het is maar wat je backup noemt.
Ik neem aan dat ze een goed support contract met de fabrikant hebben. Hoewel het er niet op lijkt.


Probleem van BB is dat je altijd afhankelijk bent van BB en alles wat er tussen zit. Heb het altijd een vreemd idee gevonden. Waarom moet alles via de 'proxy' van RIM?
Direct goede plek voor hackers en overheid om informatie van gebruikers te achterhalen.

[TvdW]

Dat is ook zo, maar als een core switch er uitvliegt is er natuurlijk een kans dat de backup core switch er precies op hetzelfde moment uit ligt. Hoe vaker de core switch uitvalt, hoe groter de kans dat deze twee op hetzelfde moment voorkomen. Ik geloof dat dit de Wet van Murphy is.

[ultimasnake]

Maar een backup core zou er natuurlijk alleen uit kunnen vliegen indien ze b.v. beide van dezelfde updates op hetzelfde moment worden uitgevoerd zou je zeggen, mits een bug in de software in beide gevallen het systeem omver trekken (overhead). De wet van Murphy valt echter niet tegen te beschermen nee

[CodeCaster]

Ik vond het mooiste op het nieuws wel zo'n bakvisje dat verontwaardigd verkondigde dat ze moest betalen voor sms'en omdat pingen niet werkte. "Ja je bent gewoon gewend dat berichtjes sturen gratis is"!

[Zapato]

Je betaalt voor Blackberry diensten. Daar bovenop moet je dus nu ook nog SMS betalen.

[MicGlou]

Volgens T-Mobile zou het werken als gebruikers de accu uit hun BlackBerry halen. Als de accu er weer inzit en het toestel opnieuw wordt aangezet, zou het kunnen dat de diensten weer gaan werken. Zeker is dat echter allerminst.

Tja, broodje aap? Typische afscheepdesk reply? Het verwijderen van de accu in je toestel zorgt er echt niet voor dat die switch (of wat dan ook) bij BB niet meer defect is... als het werkelijk zo gezegd is dan kan dat toch niet anders dan berusten op toeval.

[Frank S]

Die switch wordt er niet beter van, maar je serviceboeken worden wel vernieuwd. En als daar essentiële wijzigingen in zijn aangebracht, dan kan het echt wel helpen om op deze manier je systeem compleet te resetten en te verversen.

[Kevinp]

Het is maar goed dat Apple dan dit probleem niet heeft. Je accu verwijderen daar is toch wat lastig .

Anyhow ik snap dat het klote is, maar de kans is groter dat een bb gebruiker storing heeft gehad door z'n telco dan door bb zelf.

[Verwijderd]

accu eruit is hard reset.

iPhone kun je vast ook hard resetten.

[Verwijderd]

Dit hele nieuwsbericht is nergens op gebaseerd. Reacties van mensen dat er mailtjes binnen komen? Dat was gister ook al. Dat zijn gewoon mailtjes van een paar uur geleden.

[Verwijderd]

Mischien dat je Blackberry zich dan opnieuw aan gaat melden op de server in Engeland?
Ken je het berichtje? Your handheld has been registrered to the BlackBerry ....
Maar dat zal waarschijnlijk pas werken als het deel waar jij in zit wordt geactiveerd. Maar het kan zeker helpen.

[Zapato]

Zie dit de afgelopen jaren toch bij meer grote bedrijven gebeuren. Google Gmail 2 dagen offline een jaar of 2 geleden, haalde toen ook teletekst, Microsoft Office 365 enige tijd geleden uit de lucht, Sony PSN een aantal weken uit de lucht. Kennelijk lukt het grote technologie bedrijven ook niet om failure backups helemaal waterdicht te regelen.

[Verwijderd]

We worden steeds afhankelijker van netwerken

[n0hh]

Dit is toch een lelijk smetje op mijn verder probleemloze, jarenlange BlackBerry ervaring. Hopelijk lossen ze dit snel op, want die van mij werkt nog steeds niet.

[Verwijderd]

Natuurlijk een blunder eerste klas van zo'n groot bedrijf.
Er zijn zat systemen waarbij je routers en switches 'on the fly' kan switchen zonder dat er iemand iets merkt. Ronduit schandalig dat dit fout is gegaan.

Ik ben benieuwd hoe aanbieders én RIM dit gaan vergoeden; het is een zakelijk dienst....

[Verwijderd]

is nou eenmaal een risico.

Iedereen is tegenwoordig afhankelijk van netwerken en ja dat kan wel eens misgaan. Mensen moeten niet zo zeiken.

En nee ik heb geen Blackberry maar een Android.

[lars019]

Service status: http://www.rim.com/newsroom/service-update.shtml
We’re aware many of you are experiencing service delays. Restoring full service is our number 1 priority.

[CyberDonky]

Ze hebben denk ik wel hun lesje nu geleerd. Dit kunnen ze niet nog een keer overkomen. Die back-up switch gaan ze zeker nu goed naar kijken, dat is 1 ding wat zeker is

[Pinky-H9]

Sure ?

- Vodafone
- Tmobile
- PSN
etc etc etc dachten dat ook en toch gebeurt het steeds. 100% zekerheid om online te blijven lukt je bijna niet en tja 36 uur in pak em beet 3 jaar ?

3 Jaar = 26280 uur hiervan is er 36 uur geen Crackberry mogelijk geweest. Veel providers zouden jaloers zijn op deze uptime

[CyberDonky]

Ja okee, PSN deed het hem helemaal.