In de vroege ochtenduren van vandaag, tussen 3:00 en 4:00 uur, heeft zich een aanzienlijke storing voorgedaan die de resolutie van IP-adressen en -ranges verstoorde. De storing was te herleiden naar het hoofdkwartier van Eurofiber Cloud Infra, waaronder het Dataplace datacenter valt. Tijdens onderhoudswerkzaamheden werden meerdere updates doorgevoerd op de netwerkapparatuur van Eurofiber en vervolgens opnieuw opgestart. Dit leidde onverwacht tot een verstoring van de routingtabellen, waardoor de IP-resolutie ernstig werd aangetast. Complete netwerkranges van ons en andere aangesloten partijen waren hierdoor tijdelijk en/of gedeeltelijk niet bereikbaar, wat leidde tot brede impact op de beschikbaarheid van diensten en verbindingen.

Zodra de verstoring werd opgemerkt, hebben de technici van Eurofiber Cloud Infra met spoed ingegrepen in hun datacenter in Amsterdam. Zij hebben zich gericht op het herstel van de netwerkarchitectuur en het herconfigureren van de routingtabellen. Om 8:00 uur waren de getroffen IP-ranges opnieuw opgenomen in de routing (per IP-range handmatig ingevoerd), waardoor de connectiviteit werd hersteld. Hierdoor konden alle netwerkverbindingen, inclusief die van onze organisatie, weer stabiel functioneren. Dit herstelproces omvatte het opnieuw laden van de configuratie en het valideren van de routingregels voor alle getroffen adressen en ranges.

Wij willen hierbij benadrukken dat deze storing geen enkele relatie had met onze eigen servers, switches of andere netwerkapparatuur. Evenmin was er een verband met de geplande kernelupdates die wij afgelopen nacht op ons eigen netwerk hebben uitgevoerd. Dit incident was exclusief het gevolg van wijzigingen en onderhoudswerkzaamheden binnen de infrastructuur van Eurofiber Cloud Infra.

Deze storing had, naast de impact op ons, ook gevolgen voor andere grote organisaties en partijen die gebruikmaken van de infrastructuur van Eurofiber. De verantwoordelijkheid voor deze verstoring ligt volledig bij Eurofiber Cloud Infra. Hoewel het probleem inmiddels is opgelost, zullen wij aanvullende gesprekken voeren met de betrokken partijen om inzicht te krijgen in de exacte oorzaak en het voorkomen van soortgelijke incidenten in de toekomst.

Storingen zoals deze zijn helaas nooit volledig te voorkomen. Wij zetten ons echter maximaal in om de impact van eventuele verstoringen te minimaliseren en de continuïteit van onze diensten te waarborgen. Dit incident was de meest omvangrijke storing in de afgelopen acht á negen jaar, en ondanks dat het buiten onze controle lag, blijven wij alert en proactief om onze klanten zo goed mogelijk te ondersteunen.

Indien er aanvullende informatie beschikbaar komt, zullen wij dit nieuwsbericht verder bijwerken.

Update 1: Beperkte connectiviteit met IPv6-ranges

Hoewel de connectiviteit van alle IPv4-ranges binnen ons netwerk volledig is hersteld en probleemloos resolvet, ondervinden wij op dit moment nog hinder met betrekking tot de IPv6-ranges. Dit probleem heeft onze hoogste prioriteit en is reeds gemeld bij Eurofiber Cloud Infra, die momenteel werkt aan een oplossing voor de routering en connectiviteit van de getroffen IPv6-ranges.

Wij vragen om begrip en geduld terwijl Eurofiber Cloud Infra werkt aan het herstellen van de volledige functionaliteit. We verzoeken vriendelijk om voorlopig geen aanvullende tickets in te dienen met betrekking tot dit specifieke probleem, aangezien wij actief bezig zijn met het monitoren van de situatie en de communicatie met de betrokken technici.

Update 2: het IPv6-probleem is inmiddels ook opgelost

Inmiddels krijgen we de bevestiging vanuit Eurofiber Cloud Infra dat de IPv6-connectiviteit ook weer is opgelost en dat alles weer correct resolved. Wij gaan dit zelf ook nog verder testen, maar de eerste resultaten geven inderdaad aan dat IPv6 nu ook weer correct resolved.

Update 3: maandag of dinsdag zal Eurofiber met een uitleg komen

Meerdere klanten heb gevraagd om een uitgebreide samenvatting/rapport inzake de storing bij Eurofiber Cloud Infra die veroorzaakt werd door een (onaangekondigde) update binnen hun infrastructuur. Wij begrijpen dit maar al te goed en hebben dit verzoek dan ook direct ingedient bij Eurofiber Cloud Infra hedenochtend. Naar verwachting zal a.s. maandag of dinsdag een uitleg c.q. rapport beschikbaar komen vanuit Eurofiber Cloud Infra. Helaas kunnen wij dit niet bespoedigen, daar wij ook afhankelijk zijn van Eurofiber Cloud Infra, daar deze problemen niet door ons handelen en/of onze apparatuur is veroorzaakt.