De storing is inmiddels opgelost en alles werkt weer normaal. We zijn vandaag hard geraakt door de wereldwijde outage van Cloudflare, die direct impact had op onze API en websocket clusters.

Onze back-up servers bleken eveneens niet bereikbaar omdat ook deze via Cloudflare liepen. Dit verklaart waarom onze failover niet actief kon worden en waarom de impact groter was dan verwacht.

We gaan onderzoeken hoe we dit in de toekomst kunnen voorkomen, onder andere door alternatieve back-up routes op te zetten die volledig buiten Cloudflare om draaien. Ons doel is om ook bij wereldwijde storingen de continuïteit van onze diensten te kunnen waarborgen.

We kampen momenteel met grote problemen met onze API en websocket clusters. Cloudflare, een partij die we gebruiken ter beveiliging, heeft wereldwijd ernstige verstoringen en hierdoor worden we direct geraakt.

We hebben hier protocollen voor liggen, maar de impact is groot omdat Cloudflare ook actief is op onze back-up servers. Dat maakt het opschalen en omschakelen lastiger dan normaal.

We zijn op dit moment bezig met het opzetten van extra back-up servers zonder Cloudflare. Deze nieuwe omgeving draait al deels en we werken er hard aan om dit zo snel mogelijk volledig operationeel te krijgen.

Ondertussen blijven we alles nauwlettend monitoren en hopen we uiteraard dat Cloudflare de wereldwijde problemen snel oplost zodat alles weer stabiel wordt.

Zodra er meer duidelijkheid is, updaten we jullie meteen.