Historische storingen

16 December 2011: Geachte IsiConneXion klant, momenteel ondervinden wij problemen met de Internetverbindingen waar u mogelijk ook last van heeft. We zijn druk bezig om de problemen zo snel mogelijk te verhelpen. Heeft U vragen, neem contact op met via email Dit e-mailadres is beschermd tegen spambots. U heeft Javascript nodig om het te kunnen zien. of bel 045-566 5835. Met vriendelijke groet NOC IsiConneXion.

UPDATE 18.22 uur: [storing hersteld] Er is een kortstondige landelijke storing van EuroFiber opgetreden, waardoor een deel van het Amsterdamse internetverkeer kortstondig een dip heeft ondervonden. Omdat meerdere providers hier hinder van ondervonden hebben, kan er mogelijk gedurende enkele seconden packetloss zijn opgetreden. De oorzaak binnen EuroFiber is nog niet bekend; indien meerdere storingen te verwachten zijn vanuit EuroFiber zal IsiConneXion het internetverkeer preventief herrouteren over de andere beschikbare Internet Exchanges. Onze excuses voor het ongemak. Inmiddels zijn RFO's aangevraagd en zullen op verzoek toegezonden worden.

15 december 2011: Omstreeks 13.29 uur is een korte onderbreking op de Internet Exchange in Amsterdam opgetreden. Alle internetvekeer is via de overige beschikbare Exchanges per direct omgeleid. Tijdens het herrouteren kan korststondig packetloss zijn opgetreden. Onze excuses voor het ongemak. Meerdere peerings (andere providers) zijn getroffen door deze storing, mogelijk een kortstondige stroomuitval in Amsterdam. UPDATE 13.33: het internetverkeer is inmiddels hersteld over Amsterdam.

UPDATE 14.40: het internetverkeer is kortstondig (circa 30 seconden) onderbroken bij meerdere providers Amsterdam als gevolg van EuroFiber werkzaamheden.

UPDATE 16:21: Op dit moment is er een uitval van een Blade-server bij NL-IX. De defecte Blade-server is op dit moment uitgeschakeld en een back-up is geactiveerd bij NL-ix. Vooralsnog is geen verdere verstoring van de dienstverlening te verwachten.

Op 2 maart 2011 zijn in Amsterdam verschillende storingen opgetreden tussen00:44 en 2:16 uur. De volgende peerings zijn getroffen:

1&1 Internet AG           
Cable & Wireless Nether   
Giganews, Inc.           
InterNLnet               
Open Peering             
Solcon Internetdiensten  
TDC A/S                   
UPC Broadband Operation   
Vialtus Solutions         
Virgin Media Limited      
Yahoo! Europe Ltd

Op 2 maart 2011 tussen 14.52 en 14.54 uur is wederom een korte verstoring in Amsterdam opgetreden waarbij het verkeer op AMSIX hinder heeft ondervonden.

In bovengenoemde periode is het internetverkeer omgeleid over Haarlem en Muenster. Inmiddels is de storing in Amsterdam hersteld en is het internetverkeer over Amsterdam beschikbaar.

Onze excuses voor de eventuele overlast; IsiConneXion heeft inmiddels RFO's aangevraagd.

UPDATE: Vanwege onderhoud in het netwerk van EuroFiber zijn ook komende nacht (3 maart tussen 00.00 en 06.00 uur) onderbrekingen in het EuroFiber netwerk als gevolg van software-upgrades te verwachten. Tijdens deze onderbrekingen zal internetverkeer over andere beschikbare Exchanges geleid worden; IsiConneXion zal alles in het werk stellen om de eventuele overlast tot een minimum te beperken.

UPDATE 3 maart 2011: Wederom zijn er problemen in Amsterdam op het AMSIX platform ontstaan tussen 04:20 en 05:04 uur. AMSIX heeft een peering-member afgesloten vanwege het announceren van een onjuiste route.

Opmerking: NOC van AMSIX is inmiddels uitvoerig met de hardware-vendor in overleg om tot een oplossing te komen. Weliswaar is er geen directe impact op de dienstverlening van IsiConneXion, mogelijk kan internetverkeer tussen IsiConneXion en bovengenoemde peerings wel hinder ondervinden.

Woensdagnacht 27 januari 2010 om 03.56 uur zijn wij getroffen door een storing veroorzaakt door Eurofiber in Amsterdam. Het verkeer vanuit Amsterdam is vervolgens automatisch afgesloten geworden. U bent per SMS geïnformeerd worden over de storing. Om 04.59 uur is het Amsterdamse verkeer terug in de lucht gekomen en heeft IsiConneXion de feed vanuit Amsterdam weer opengezet. Momenteel loopt een RfO bij Eurofiber naar de aanleiding en oplossing van de (ver)storing. Wij zullen hier nader over berichten.

29,september woensdag +/- 08.20 uur.  IsiConneXion constateert wegvallende internetverbindingen vanuit Amsterdam. Het verkeer vanuit Amsterdam wordt onmiddellijk 'handmatig' afgesloten en enkel routes via Duitsland zijn dan beschikbaar. Wij zullen het verkeer vanuit Amsterdam 'monitoren', wanneer dit weer stabiel is zetten we de routes naar Amsterdam weer open.  09.00 - alle Amsterdamse routes zijn dichtgezet om klapperend en dus tijdelijk wegvallend verkeer te voorkomen. Wanneer het verkeer weer stabiel lijkt te zijn en Eurofiber dit bevestigd zullen wij de Amsterdamse routes weer bijschakelen.

Oorzaak incident: Eurofiber werkzaamheden met impact classificering low hebben geresulteerd in een storing in de regio Zuid Nederland. Deze storing heeft geleid tot tweemaal een korte onderbreking op de dienstverlening waardoor IsiConneXion alle verkeer richting Amsterdam naar Frankfurt heeft omgeleid. Verbindingen van klanten buiten de regio zuidoost Nederland kunnen hinder ondervonden hebben vanwege de routering door het MPLS netwerk. 

Noot IsiConneXion: Het kan natuurlijk niet zo zijn dat ze overdag een MPLS node toevoegen in hun netwerk met als impact low. Wij hebben onze klacht bij Eurofiber ingediend hieromtrent.

vrijdag 24 september - 08.30 uur - NLIX meldt dat er problemen zijn met de ethernet verbinding tussen Limburg en Amsterdam. De BGP sessies van IsiConneXion ondervinden hiervan last. IsiConneXion is thans bezig met de herroutering verbinding naar Duitsland terug op te zetten. Afgelopen nacht had Eurofiber nl. onderhoud op dezelfde lijn en IsiConneXion had al tot 07.00 uur vanochtend preventief via Duitsland ge-rerouteerd. De storing is bij Eurofiber aangemeld.

09.15 uur we zien het internetverkeer via AMS-ix weer opkomen. Wij gaan de status verifieren bij Eurofiber om vervolgens een beslissing over verdere routeringen te nemen.

09.17 uur Eurofiber meldt dat tijdens het onderhoud van vannacht een regel in de configuratie vergeten is waardoor internetverkeer is gaan ' klapperen' . De problemen volgens Eurofiber zouden opgelost moeten zijn. IsiConneXion gaat dit verifieren alvorens de verbindingen terug te routeren over Amsterdam.

09.30 uur IsiConneXion verifieert de uitleg van Eurofiber en schakelt terug over de routes naar Amsterdam.

6 september, 08.02 uur Een deel van het Amsterdamse internetverkeer is kortstondig niet beschikbaar doordat een groot aantal peerings op Nlix en AMSix down zijn gegaan. Verkeer over Joint-transit is onveranderd actief gebleven. Storing is door NL-ix nader onderzocht en heeft van meerdere ISP's vergelijkbare storing ontvangen. De oorzaak is gelegen in het EuroFiber netwerk dat kortstondig alleen upstream verkeer heeft verwerkt zonder downstream. Deze unidirectionele communicatie heeft ervoor gezorgd dat een groot aantal peerings zijn gesloten. Inmiddels is het EuroFiber verkeer weer hersteld en is door NLix een casus aangemaakt bij EuroFiber, temeer omdat vele ISP's hiervan last hebben ondervonden. De oorzaak van deze verstoring is een defecte switch, lokatie Eindhoven. Zodra het rapport van EuroFiber binnen is, zal dit verder gecommuniceerd worden.

12.00 uur heeft Eurofiber (aangekondigd) de switch vervangen, dit heeft een down-time van +/- 5 minuten veroorzaakt. IsiConneXion heeft om 12.00 uur tijdelijk al het verkeer ge-herrouteerd via Duitsland, Frankurt.

12.10 uur de verstoringen zijn opgeheven en de verbindingen zijn terug geherrouteerd vanuit Amsterdam

2010 - september 4, 13.22 uur door het uitbranden van een coreswitch (lokatie: steunpunt van Eurofiber Sittard, NS-station). Alle internetverkeer ten zuiden van Sittard ondervindt hinder van deze storing. IsiConneXion heeft evenwel het verkeer (tijdelijk) via Frankfurt Duitsland  ge-herrouteerd.  Om 14.58 is de storing opgeheven. Er is vanuit Eindhoven een nieuwe switch vervoerd en geinstaleerd in Sittard.

25 augustus: 19.14 uur tot 20.06 uur- AMS-IX meldt een spontane nog niet verklaarde storing op Nikhef. IsiConneXion klanten kunnen last hebben gehad van 'packet-loss' tijdens het routeren naar andere peerings.

Op 17 augustus om 23.09 uur constateert Nl-ix problemen met de core-switch in Telecity3 (TC3). Om 23.46 meldt NL-ix dat er packet-loss en BGP drops optreden tussen Hikhef en TC3 (Amsterdam).

18 augustus - 00.41 uur  een reload zou de problemen opgelost hebben. NL-ix heeft onderzocht wat de oorzaak van de storing is en deze is gelegen in een defecte core-switch die in de nacht van 19 augustus tussen 02.00 en 06.00 uur vervangen is. IsiConneXion heeft vanaf 18 augustus, 17.00 uur (op dat moment werd de core-switch bij NL-ix weer gereboot)  tot 19 augustus 06.00 uur al haar internetverkeer via Munster, Duitsland ge-herrouteerd.

op donderdag 10 juni is omstreeks 18.20 uur een landelijke internetstoring vanuit Eurofiber veroorzaakt. Hiervan hebben een 45-tal Nederlandse Internet ServiceProvidors en hun klanten last gehad. Binnen het IsiConneXion netwerk is het verkeer nadat de storing is gedetecteerd automatisch omgeleid via Duitsland. Tijdens deze omschakeling (herroutering) kunnen korte onderbrekingen in het internetverkeer zijn opgetreden.

Rond 21.20 uur is het internetverkeer vanuit Amsterdam weer op gang komen, waarop onze hoofdroutes automatisch terug opgeschakeld zijn. Ook dit kan wederom een kort oponthoud betekent hebben.

11 juni 201005.25 uur: De verbindingen naar Amsterdam zijn wederom weggevallen. Het blijkt opnieuw exact hetzelfde probleem te zijn, de betreffende hardware wordt alsnog vervangen.

09.00 uur Oplossing storing wordt officieel gereedgemeld

kortdurende interrupties als gevolg van storing bij Eurofiber tussen 08:30 en 9:00

probleem in het ethernet-netwerk van Eurofiber met kortdurende interrupties in internetperformance