Google Cloud heeft wereldwijd te maken met storing - update

Verschillende onderdelen van Googles cloudplatform Cloud hebben momenteel te maken met een wereldwijde storing. Hierdoor kan het zijn dat websites en diensten die van Google Cloud gebruikmaken, indirect ook getroffen worden door de storing.

Onder meer Google Workstations, Bigtable, Dataproc en Storage zijn wereldwijd niet beschikbaar, zo blijkt uit de statuspagina van Google. De storing lijkt van toepassing te zijn op alle servers van Google in de regio's Amerika, Europa, Azië, het Midden-Oosten en Afrika. Volgens een eerste statusupdate van Google wordt de storing veroorzaakt door een 'serviceprobleem voor identiteits- en toegangsmanagement'. Het probleem zou optreden bij het indienen van api-verzoeken voor deze functionaliteiten. Google werkt aan een oplossing, maar het is vooralsnog niet duidelijk hoe lang de storing gaat duren en wat de onderliggende oorzaak van het probleem is.

Update, 21.20 uur - Verschillende tweakers laten via de submitfunctie weten dat verschillende andere platforms ook niet bereikbaar zijn, mogelijk als gevolg van de Google Cloud Platform-storing. Diensten als Cloudflare, Spotify en de IKEA-website zijn daardoor niet of minder goed bereikbaar. Op Allestoringen.nl is dit ook goed te zien: er is een acute piek aan storingsmeldingen over tientallen games, websites en diensten zichtbaar. Geen van de vermelde bedrijven heeft vooralsnog duidelijkheid gegeven over de oorzaak van de storing.

Bron: Google

Reacties (70)

[drdextro]

Het issue bij Google zat hem in de interne authenticatie IAM. Hierdoor konden services niet meer communiceren met interne diensten. Of als er gebruik werd gemaakt van IAP dan wekte dit ook niet.

De status page geeft ook aan, “all locations recovered except us-central1”. Feitje: Us-central1 is waar alle global services draaien.

Source: ik was on-call en heb de hele avond damage control gedaan

[Reactie gewijzigd door drdextro op 12 juni 2025 22:18]

[captain007]

Cloudflare was door het issue indirect geraakt. Ze hebben inmiddels een uitgebreid artikel geplaatst: https://blog.cloudflare.c...vice-outage-june-12-2025/

Had er zelf ook last van want diensten die weer op Cloudflare werkten gingen daardoor mee in deze hele cascade.

[ABC1234]

Net zoals vorig jaar toen de services down gingen door een stroomstoring op een enkele locatie; is dit opnieuw een bewijs dat Cloudflare niet voldoende redundancy inbouwt.

[J-P]

Ik krijg net in mn prive GMail een mail van Google Cloud over een spoedige verplichte manuele inlog voor gebruikers die gebruik maken van een van deze diensten:

• resourcemanager.organizations.setIamPolicy
• resourcemanager.folders.setIamPolicy
• resourcemanager.projects.setIamPolicy
• billing.accounts.setIamPolicy
• billing.accounts.move
• billing.accounts.removeFromOrganization
• billing.resourceAssociations.create
• billing.resourceAssociations.delete
• resourcemanager.projects.deleteBillingAssignment
• resourcemanager.projects.createBillingAssignment
• resourcemanager.tagValueBindings.delete

Niet echt diensten voor niet zakelijke gebruikers denk ik zo. Ik heb het gevoel dat ze (bijna) zijn gehacked in hun financiële systemen.

[Flytezero]

En CloudFlare ook?
https://www.cloudflarestatus.com/

[player-x]

Het ziet er uit dat ze weer up zijn/komen.

Cloudflare System Status

Broad Cloudflare service outages
Monitoring - All Cloudflare services have been restored and are now fully operational. We are moving the incident to Monitoring while we watch platform metrics to confirm sustained stability.
Jun 12, 2025 - 20:57 UTC

Update - Cloudflare services are recovering quickly around the globe. WARP and Turnstile are operational, though a small residual impact remains and we’re working to eliminate it. The core KV service is restored, bringing dependent products back online. We expect further recovery over the next few minutes and a steady drop in impact.
Jun 12, 2025 - 20:32 UTC

Update - Cloudflare’s critical Workers KV service went offline due to an outage of a 3rd party service that is a key dependency. As a result, certain Cloudflare products that rely on KV service to store and disseminate information are unavailable including:

Access
WARP
Browser Isolation
Browser Rendering
Durable Objects (SQLite backed Durable Objects only)
Workers KV
Realtime
Workers AI
Stream
Parts of the Cloudflare dashboard
Turnstile
AI Gateway
AutoRAG

Cloudflare engineers are working to restore services immediately. We are aware of the deep impact this outage has caused and are working with all hands on deck to restore all services as quickly as possible.
Jun 12, 2025 - 19:57 UTC

Identified - We are starting to see services recover. We still expect to see intermittent errors across the impacted services as systems handle retried and caches are filled.
Jun 12, 2025 - 19:12 UTC

[Lawine93]

Cloudflare CDN volgens mij niet. Die doet het bij mij gelukkig gewoon.

[ABC1234]

Nope. Ook een massive issue met Cloudflare.

[Lawine93]

Klopt, maar op de status pagina staat dat o.a. de CDN nog operational is. Dus daar gelukkig geen problemen, dan doet echt bijna niks het meer.

[ABC1234]

Diverse websites werken niet meer, IKEA had issues, de bijenkorf.

Wellicht is het iets met workers oid. Ik heb er altijd een hekel aan dat ze pretenderen dat de klant een issue heeft, maar Cloudflare ‘gewoon’ up is. Ik had dat nooit gepikt als klant zijnde, doe dan een fatsoenlijke failover pagina.

Overigens valt de impact wel mee, het geeft aan dat veel echt belangrijke websites, banken bijvoorbeeld, niet op Cloudflare zitten.

[dcm360]

Wellicht is het iets met workers oid. Ik heb er altijd een hekel aan dat ze pretenderen dat de klant een issue heeft, maar Cloudflare ‘gewoon’ up is. Ik had dat nooit gepikt als klant zijnde, doe dan een fatsoenlijke failover pagina.

Een gokje van mijn kant: er zullen best veel dingen draaien met Cloudflare Workers die gekoppeld zijn aan iets van Google Cloud. Dan zijn er ineens timeouts, retries en vollopende queues op het platform van Cloudflare, tot op een niveau dat het impact heeft op alles wat daar draait, ook al is het niet direct afhankelijk van Google Cloud.

[georgeboot]

Onze cloudflare workers die niets met Google doen zijn ook allemaal stuk.

Reguliere CDN werkt wel.

[dcm360]

Onze cloudflare workers die niets met Google doen zijn ook allemaal stuk.

En in mijn vorige bericht heb ik daar dus een potentiële verklaring voor

Wat het echt is zullen we binnenkort waarschijnlijk wel achterkomen, Cloudflare heeft best een aardig track-record met (publiekelijk) uiteenzetten wat er aan de hand was.

[Reactie gewijzigd door dcm360 op 12 juni 2025 21:57]

[Opperpanter2]

Als Cloudflare zegt dat het komt door een storing bij een thirdparty, is dat dan niet gweoon de Google storing?

[ABC1234]

Dat lijkt me idd een logische verklaring.

Ze zijn altijd transparant over hun outages, elk jaar zijn er wel een aantal incidenten, hoewel deze zelfs voor Cloudflare begrippen groot is aangezien hij al uren duurt.

[Reactie gewijzigd door ABC1234 op 12 juni 2025 22:14]

[harrytasker]

Bol werkt ook niet.

[ABC1234]

Volgens mij heb ik weleens gelezen dat zij een grote Google Klant zijn, dus van platform. Dus logisch dat ze issues hebben dan.

[Hieronymuski]

Yep, het halve internet is ingestort

[whahas]

Oeps!

[iqcgubon]

Misschien is dit een teken aan de wand dat we niet al in onze eieren in het Cloudflare mandje moeten steken.

[henk717]

Ik verwacht niet dat dit echt google cloud was. Ala het google cloud is verklaard dat niet de overige providers. Toen ik zelf ging kijken was het juist azure en arelion waarvan google cloud relatief weinig op de cisco radar stond.

Wat ik zelf vermoed is dat ofwel microsoft ofwel arelion problemen had, en gezien het google raakte schat ik arelion.

Arelion is het voormalige telia en is ook bekend als twelve99. Een van de Tier 1 providers. Tier 1 provider storingen ging ik specifiek naar zoeken en daar kwam ik bij op thousandeyes terecht. Die pagina had Microsoft met 319 verbindingen down, en arelion met 212. Google had er slechts 6.

Kan een pagina bias zijn natuurlijk maar het zou met niet verbazen als microsoft en arelion intensief samen werken en Google maar een paar verbindingen met hun heeft lopen wat alsnog wereldwijd voor problemen zorgte.

Als er iemand met meer netwerk ervaring is ben ik benieuwd hoe dichtbij ik zit met mijn theorie.

[Douweegbertje]

Geen netwerk expert maar het probleem is niet connectiviteit. Het is IAM, iets wat, net zoals bij AWS eigenlijk een centrale service is. Zo draait alles van ons gewoon prima op GCP, behalve de zaken die IAM benodigd hebben (denk aan auth, pipelines, object store, etc). Dus als dat plat ligt, dan valt vaak veel om.

[skdevil]

Telia of nu arelion is een transit partij. De kans dat dit de boosdoener is acht ik zeer klein. Het gros van het verkeer gaat over exchanges gezien dat verkeer vele malen goedkoper is.
Kan mij ook niet voorstellen dat een toko als Google op slechts 1 tier 1 transit aangesloten zit . Als een partij uitvalt merk je daar als gebruiker weinig van normaal gesproken.

[cricque]

Ik had er ook last van, maar bepaalde dingen werkten gewoon wel zonder problemen bij Google Cloud, 2 services = geen probleem, 2 andere = problemen, toch wel bijzonder. Ik was zelf zo van ... wtf ... dit werkt en dat niet ? Hoe kan dit nu, en toen dacht ik meteen toen ik in de logs gaan kijken was ... dit is een authentication issue. En dus is mijn conclusie niks met netwerk te maken, maar puur IAM, daar kan ik wel inkomen ... de 2 die wel werkten gebruiken dingen onder hetzelfde project, de 2 anderen gebruiken dingen van de andere 2 projecten en daar is dus IAM voor nodig. En als dat niet werkt dan mag je zowat alles vergeten en proberen. Kreeg net een melding van een gebruiker binnen als ik een nieuwe versie ging pushen, zelfs dat lukte niet. Ben is benieuwd hoe mijn billing er gaat uitzien voor vandaag

[cracking cloud]

Heb zelf een aantal spullen draaien in azure en dat werkte nog steeds perfect terwijl cloudflare, Google, Spotify, bol.com etc er allemaal uit lagen.

[HKLM_]

Youtube doet het ook minder goed momenteel.

[Dudwich]

Youtube deed het al een tijdje minder goed.

[JWL92]

Hier lijkt YouTube vandaag juist sneller dan de afgelopen dagen

[evonck]

Komt omdat er niemand meer op zit.

[Radiance]

Wij hebben vanaf een uur of 8 tot op heden YouTube zitten kijken en nul problemen ervaren vanaf een LG tv.

[Kafka]

Zo, niks beters te doen.

[Radiance]

Rondreis door China plannen

[Overheid]

Fijn dat alles zo centraal is. Dat decentraliseren van het internet is nog niet zo'n gek idee.
Tevens dacht ik dat de clusters voor de EU los stonden van de VS ivm. de hier geldende wetgeving?

[readefries]

Er zijn wel verschillende regios/zones waar de drie groten hun datacentra verspreidt hebben. Maar helaas is het juidisch nog steeds VS, en zou de VS bij EU data kunnen.

Schrems start wel telkens rechtzaken om data residency goed voor elkaar te krijgen, maar helaas is de wetgeving nog steeds niet zo ver dat het goed (vanuit privacy perspectief) is geregeld.

[blorf]

Waarom is er geen EU initiafief? Ik vraag me echt af wat er gebeurt als een lokaal bedrijf een PC- en smartphone-vervangende standaard probeert neer te zetten. Dat moet gewoon kunnen. Amerikaanse software-platformen doen niks speciaals wat we hier niet snappen of zo. Het is alleen maar een kwantiteit aan computers op elkaar.

[svennd]

Er zijn alternatieven bv Lidl cloud.

[sdziscool]

Los staan? Sure, maar een issue waarbij alle servers in de US getroffen zouden worden zal ook propageren naar de EU, ze zijn niet echt airgapped qua software volgens mij.

[crhooijer]

Gelukkig werkt mij Synology NAS nog wel

[treris]

Hahahaha same, toch lekker om niet voor alles afhankelijk te zijn van derden.

[Maarten69]

Heerlijk, lekker rustig. Laat het maar weekje duren

[zalazar]

Vind ik ook. Cloud is good

[syl765]

Ja dat is wel wat je steeds meer ziet in het IT landschap. De ene service is afhankelijk gemaakt van 5 andere. Het is één grote brij van afhankelijkheden aan het worden en we blijven er maar zaken tussen duwen omdat het kan lijkt het soms.

[cricque]

Ja, maar er is een grote maar ... Sommige dingen kan je bijna zelf onmogelijk doen. Gaat iedereen zijn eigen cloudflare maken bijvoorbeeld ? Soms heb je ook wel eens externe data nodig en gebruik je een api van een 3de partij, als je dat allemaal zelf moet beginnen te doen (wat uiteraard wel kan) dan is de ontwikkeltijd voor sommige dingen gewoon niet haalbaar. Uiteraard kan je je dan afvragen is dit wel cruciaal ... Maar kijk nu gewoon naar adres validatie ... Je hebt bijvoorbeeld mapbox, google maps en nog vele andere (hier in België zelfs via bpost), dat is toch iets dat je echt niet zelf wilt gaan onderhouden. Gebruik je dat constant nee, maar als verkoper wil ik toch wel graag zeker zijn dat het adres ook bestaat waar ik moet naar shippen. Dus dat is in mijn ogen een onmisbaar iets. En daar is google maps (duurste) ook de simpelste om mee te werken en qua respons ook 1 van de snelste. Ga jij als applicatiebouwer zelf van elk land waarin je actief bent dit bijhouden en updaten ? Ja er zijn andere alternatieven, het kan uiteraard, maar dit komt aan een grote kost qua personeel. Een BTW nummer check is nog zoiets. Dit kan je bij mijn weten niet zelf checken als die btw nummer correct is of niet, zonder een api call te doen. Een gestructureerde mededeling bijvoorbeeld is dan weer dom om dat door een api te laten afhandelen. Een pdf aanmaken ? Op zich is dat niet zo moeilijk, maar er zijn genoeg "make a pdf" api's beschikbaar.
Voor sommige dingen ga je toch zowieso afhankelijk zijn van externe partijen of je moet over "eindeloos" geld beschikken

[Reactie gewijzigd door cricque op 13 juni 2025 07:57]

[Feb74]

Inderdaad o.a warp (cloudflare) werkt niet.

[RVervuurt]

Het halve Internet lijkt er uit te liggen: https://downdetector.com/

[blorf]

Toeval waarschijnlijk, maar zou de piekende euro er iets mee te maken hebben?

[cracking cloud]

Nee. Dat klinkt ook wel een beetje vergezocht, vind je niet?