24 apr

[20120508] Leaseweb Germany Router Software Upgrade [Update]

Startdate: May 8th 2012 02:00:00 (CEST)
Enddate: May 8th 2012 07:00:00 (CEST)

Dear Customer,

During this maintenance window we will upgrade the software on two of the High Volume routers at Databurg.

This will will cause a Downtime of up to 45min. per router.

The maintenance will take place between 02:00 and 07:00 CEST on the 8th of May 2012.

Regards,
LeaseWeb

Sehr verehrte Kunden,

während der Wartungsarbeiten wird die Software zweier Router im Datacenter Databurg ersetzt.

Dies hat einen Ausfall von bis zu 45min. pro Router zur Folge

Die Wartungsarbeiten finden am 8. Mai zwischen 02:00 und 07:00 Uhr MESZ statt.

Mit freundlichen Grüssen

Leaseweb

20 apr

[Onderhoud] Spoed onderhoud routers Steenbergen – Voltooid

Zoals u weet heeft onze netwerk provider vorige week onderhoud uitgevoerd aan het netwerk. Bij dit onderhoud is er een probleem aangetroffen op enkele lijnkaarten in de PER1 en PER2 routers. Deze routers worden gebruikt om onze cabinets aan te sluiten op het netwerk

Hoewel er geen problemen zijn opgetreden, wil onze netwerk leverancier deze lijnkaarten zo spoedig mogelijk vervangen, en een bijbehorende aanpassing doen aan het IOS van de desbetreffende routers.

Het vervangen gebeurd gedurende een spoed onderhoudsvenster in de nacht van donderdag op vrijdag (19 op 20 april). De werkzaamheden beginnen om 0:00 en duren uiterlijk tot 1:30. Het stappen plan is als volgt:

1) Eén voor één vervangen van de lijnkaarten op de PER2 router (downtime: ca 5 minuten)

2) Aanpassing van het IOS, gevolgd door een reload van de PER2 router (downtime: ca 10 minuten)

3) Eén voor één vervangen van de lijnkaarten op de PER1 router (downtime: ca 5 minuten)

4) Aanpassing van het IOS, gevolgd door een reload van de PER1 router (downtime: ca 10 minuten)

We gaan ervan uit dat u nauwelijks hinder zal ondervinden van deze werkzaamheden omdat onze cabinets redundant verbonden zijn met beide routers. Shared en private rack klanten zonder redundante uplink zullen wel enige hinder ondervinden gedurende het onderhoudsvenster.

In het geval van vragen of opmerkingen kunt u vanzelfsprekend contact met ons opnemen.

Het onderhoud is succesvol voltooid.

24 okt

[EvoSwitch] Router upgrade

We will perform a software upgrade on two (2) standard (primary) HSRP- and six (6) high volume routers in the Evoswitch datacenter. Since we use HSRP to provide redundancy on the standard network there is no impact, however during the swap from standby to active you can notice some packet-loss. If you have a private rack please make sure that redundancy is working correctly. With the high volume network you will notice an interruption during the reload of the router.

The affected ranges are below:
Standard network, number one
– 94.75.194.0/24
– 94.75.195.0/24
– 94.75.196.0/24
– 85.17.128.0/17
– 82.192.79.0/24
– 95.211.62.0/23
– 95.211.32.0/21
– 62.212.64.0/20
– 95.211.48.0/21
– 95.211.56.0/22
– 85.17.68.0/22
– 95.211.64.0/21
– 82.192.68.0/22
– 85.17.87.0/24
– 85.17.88.0/23
– 85.17.92.0/22
– 82.192.86.0/24
– 80.65.32.0/20
– 82.192.71.0/24
– 195.140.240.0/22
– 62.221.192.0/18
– 94.75.194.0/24
– 94.75.195.0/24
– 94.75.196.0/24
– 178.18.20.0/22
– 94.126.32.0/21
– 91.215.156.0/24
– 31.186.168.0/23
– 193.27.72.0/23
– 93.190.220.0/24
– 91.224.38.0/23
– 212.7.204.0/23
– 95.211.40.0/21
– 62.212.78.0/23
– 159.255.192.0/22

Standard network, number two
– 95.211.128.0/22
– 95.211.132.0/23
– 82.192.91.0/24

High volume, number one
– sh 85.17.190.0/23
– 85.17.132.0/24
– 85.17.136.0/24
– 85.17.147.0/24
– 85.17.90.0/24
– 95.211.88.0/23
– 95.211.90.0/24
– 85.17.72.0/23
– 82.192.78.0/24
– 62.212.71.0/24
– 85.17.172.0/24

High volume, number two
– 94.75.220.0/22
– 94.75.216.0/23
– 94.75.229.0/24
– 94.75.240.0/24
– 94.75.253.0/24
– 94.75.234.0/24
– 62.212.84.0/24
– 95.211.92.0/23
– 85.17.84.0/24
– 212.7.192.0/22

High volume, number three
– 85.17.80.0/22
– 85.17.76.0/22
– 85.17.4.0/24
– 213.142.144.0/22
– 213.142.136.0/21
– 217.19.1.0/24
– 91.215.158.0/23
– 178.22.122.0/24
– 80.253.248.0/22

High volume, number four
– 94.75.218.0/23
– 94.75.232.0/24
– 94.75.250.0/24
– 95.211.105.0/24
– 95.211.60.0/23
– 212.7.206.0/23
– 212.7.210.0/24
– 46.182.120.0/22
– 46.182.124.0/22
– 31.31.32.0/22
– 31.31.36.0/22

High volume, number five
– 94.75.236.0/23
– 95.211.80.0/21
– 95.211.96.0/22
– 95.211.100.0/23
– 85.17.74.0/23
– 109.69.56.0/22
– 212.7.196.0/22
– 212.7.209.0/24
– 46.243.6.0/23

High volume, number six
– 85.17.24.0/21
– 82.192.94.0/23
– 62.212.85.0/24
– 82.192.84.0/24
– 83.149.70.0/23
– 62.212.72.0/23
– 62.212.88.0/23
– 95.211.137.0/23
– 212.7.212.0/24

The maintenance will take place on the 25th of October between 06:00 and 07:00 CEST.

16 okt

Storing aan mpr2.ams02.pcextreme.nl

Op het ogenblik heeft PCextreme een onbekende storing aan haar secundaire router (mpr2.ams02.pcextreme.nl), onze engineers zijn de oorzaak aan het onderzoeken.

Update 16:45: De oorzaak van de storing is gevonden, beide routers namen door een reeds bekende bug in de Brocade firmware beide de VRRP master state aan. Op dit moment hebben wij mpr2.ams02.pcextreme.nl uit productie gehaald. Wij trachten zo spoedig mogelijk met Brocade in contact te komen om dit probleem te escaleren.

Update 19:03: Als gevolg van deze storing zal PCextreme vannacht onderhoud uitvoeren.

Om het probleem zo snel mogelijk te verhelpen en het verkeer weer doorgang te laten vinden hebben wij de interfaces op mpr2.ams02.pcextreme.nl uitgezet.

Komende nacht (16 op 17 Oktober 2011) zal PCextreme tussen 0:00 en 5:00 onderhoud uitvoeren. Tijdens dit onderhoud zullen wij de interfaces op mpr2.ams02.pcextreme.nl weer activeren, hierdoor zal de redundancy weer worden hersteld. Gezien het probleem wordt veroorzaakt door een bug in de firmware van mpr1.ams02.pcextreme.nl zullen wij ook de firmware van mpr1.ams02.pcextreme.nl updaten.

Wij verwachten tijdens dit onderhoud geen downtime, er kunnen echter wel korte onderbrekingen ontstaan als gevolg van het overschakelen tussen de routers.

23 jul

Router outage. [Update]

Time: July 23rd 2011 13:14:00(CEST)
Expected Downtime: Unknown

Location: Evoswitch

Reason: Under investigation

*******************************

Dear Customer,

At the moment we experience some troubles in (part of) our network.

Affected IP ranges:

95.211.128.0/22
95.211.132.0/23
82.192.91.0/24

We are doing our utmost to solve this issue a.s.a.p.
As soon as we have more information available, we will publish it here.
Please be patient while we are working on this problem.

Regards,
LeaseWeb BV

[update 13:18]

The router is back online, and all servers are reachable again.
The crash is being investigated.

05 jul

Evoswitch high volume router upgrade

Startdate: July 12th 2011 06:00:00(CEST)
Enddate: July 12th 2011 07:00:00(CEST)

Dear customer,

During this maintenance window we will upgrade the software on one of our high volume routers at Evoswitch in Haarlem. The maintenance will take place between 6:00 and 7:00 CEST (UTC+2) on the 12th of July 2011.

You may see up to 15-20 minutes downtime.

Affected IP ranges:

62.212.82.0/23

62.212.85.0/24

82.192.84.0/24

82.192.94.0/23

83.149.70.0/23

83.149.124.0/22

85.17.24.0/21

95.211.136.0/21

212.7.212.0/23

2001:1AF8:4000::/40

Kind regards,

Leaseweb NOC

01 jul

Router blade crash

Time: July 1st 2011 17:45:00(CEST)
Location: Frankfurt/Wuppertal

Reason: Hardware/software failure

*******************************



Dear Customer,



One of the blades of our peering router in Frankfurt crashed. The crash was probably caused by a software bug. The blade rebooted and it is up again.

There could be possible temporary packet loss to some destinations. Most of the traffic was not affected.



We are investigating the cause of the crash.



Regards,

LeaseWeb BV

20 jun

[Emergency] High volume router maintenance

Startdate: June 21st 2011 07:00:00(CEST)
Enddate: June 21st 2011 07:30:00(CEST)

Dear customer,



We need to replace some modules on one of our high volume routers. Only customers which ip’s are listed below will be impacted when we move their uplink to another module.



During the move which will take a few minutes per ports the servers will be offline.



The maintenance will take place between 7:00 and 7:30 on Tuesday 21 Jun 2011 CET (UTC+1).



The affected IP ranges:



85.17.28.64/26



Kind regards,



Leaseweb NOC

05 mrt

KPN storing meerdere regio’s

KPN lijkt momenteel problemen te hebben op haar netwerk. Vermoedelijk gaat het om DNS problemen. Mocht u problemen ondervinden, vermeldt het hieronder als reactie.

Update 1:  problemen lijken verder te gaan dan DNS problemen. Nog geen reactie zichtbaar van KPN.

Update 2: het lijkt er meer op te wijzen, dat een bepaalde router binnen het KPN netwerk niet meer goed functioneert en daardoor zogenaamde ‘packet loss‘ genereert.