Time: February 17th 2012 22:23:00(CEST)
Expected Downtime: Unknown

Location: Wuppertal Germany

Reason: Hardware failure

*******************************



Dear Customer,



At the moment we experience some troubles in (part of) our network.



We are doing our utmost to solve this issue a.s.a.p.

As soon as we have more information available, we will publish it here.



Please be patient while we are working on this problem.



Regards,

LeaseWeb BV



[update 22:33]

One of the core routers in Frankfurt has a failing linecard.

The card is rebooting continuously.

We have moved traffic away from the card and expected everything to stabilize while we work on a replacement.

However a router in Wuppertal was experiencing high load due to the flapping interfaces.

This caused additional issues.

We are still troubleshooting.



[update 22:59]

One of the routers has become totally unresponsive.

We are still working on the issue.



[update 23:39]

The router is responsive again.

We are bringing back customer uplinks.



[update 00:50]

All Ports are reconnected, if you still encounter problems please send us an email to [email protected]

Spare part for adding redundancy back on Core Router is ordered, ETA is 02:15



[update 03:00]

Supplier confirmed that the spare Part is not in Stock, we are now in progress to find another solution to bring back redundancy in the meanwhile



[update 05:30]

All Lines are back with redundancy



Sehr geehrte Kunden,



zur Zeit haben wir eine Störung in teilen unseres Netzwerkes.

Wir arbeiten daran dies so schnell wie möglich zu beheben.



Mit freundlichen Grüssen



LeaseWeb



[update 22:33]



Bei einem unserer Core Router ist eine Linecard ausgefallen und rebootet sich permanent.

Der Traffic wurde von dieser Linecard umgeroutet, leider müssen wir feststellen das ein Router aufgrund der sich rebootenden Linecard nicht mehr zu erreichen ist. Zur Zeit arbeiten wir an der Fehlerdiagnose.



[update 23:39]

Der in Wuppertal ausgefallene Router is wieder erreichbar. Kunden Uplinks werden wieder aktiviert.



[update 00:50]



Alle Kunden Uplinks sind wieder aktiv.

Sollten sie weiterhin Probleme feststellen senden sie uns bitte eine mail an [email protected]



Das Ersatzteil für den Core Router is bestellt und wird vorraussichtlich um 02:15 bei uns eintreffen



[update 03:00]

Der Lieferant hat bestätigt das das Ersatzteil nicht vorrätig ist. Wir fahren nun fort eine andere Lösung zu finden um die redundanz wieder herzustellen



[update 05:30]

Alle Leitung sind wieder Redundant angeschlossen