03 dec

ADSL van KPN / XS4ALL Only / Business DSL Storing Gendt

Als gevolg van een storing kunnen klanten met een ADSL van KPN, XS4ALL
Only en Business DSL verbinding in Gendt momenteel geen verbinding
maken of problemen ondervinden met de ADSL/BDSL verbinding.

Technici zijn op de hoogte en werken aan een oplossing om het probleem
zo snel mogelijk te verhelpen.

Onze excuses voor het ongemak

03 dec

EvoSwitch Hall 1/2 problems [Update]

Time: December 3rd 2009 02:05:00(CEST)
Expected Downtime: Unknown
Location: EvoSwitch
Reason: under investigation
*******************************

Dear Customer,

At the moment we experience some troubles in (part of) our network.

We are doing our utmost to solve this issue a.s.a.p.
As soon as we have more information available, we will publish it here.

Please be patient while we are working on this problem.

Regards,
LeaseWeb BV

[UPDATE 02:20] All services are back online again, we are currently investigating the cause if this issue.

[UPDATE 02:58] It seems some feeds had a short power dip. This is not certain yet. We are still investigating.

[UPDATE 03:12] Some colocation customers are causing ethernet loops, these interfaces are being shut now.

[UPDATE 03:17] to clarify, the loops did not start the problems, it seems that the colocation customers switches are causing loops after the power dip.
All looping interfaces have been shutdown.

[UPDATE 03:39] Four extra engineers are at the datacenter. And some more underway. If your server is still not online please contact support via email.

[UPDATE 07:20] A customer in Hall 2 who was replacing equipment caused a loop.

[UPDATE 07:40] The customer who caused the loop has been taken offline

03 dec

Mail Woes!

Customers have been noticing issues with mail sending and webmail responsiveness.

Mail sending:

We’re still working on networking issues that have cropped up after our data center consolidation move and some saturation this morning has caused issues with our mail machines in the homie cluster.  We are looking into adding capacity to help alleviate these woes.

Webmail:

Several of our webmail machines are being nitpicky this morning and it is being investigated by our admin team. This should hopefully be resolved shortly.

Update 9:37 PST: Our webmail machines mount a filer that recently had several disks explode, the disks have been replaced but things will be slow (mainly attachments) while it’s rebuilding those volumes.  We are at 7% right now and will continue to provide updates as it progresses.  This filer is also connected to wiki.dreamhost.com and our dreambook service so things will be sluggish there as well. Sorry folks!

Update 10:02 PST: Webmail is back up and running fine now that we have disabled attachments, the wiki will be slow on loading images but should otherwise be speedy. Rebuild is at 11%.

Update 13:05 pm PST: One volume is beating the other out at 37% while the other is still at 26%

Update 14:02 pm PST: To clarify an earlier statement, attachments in webmail are going to be disabled while the volumes rebuild on the troubled filer.  This means that if you’re expecting an important attachment and rely on our webmail services, it might be a good idea to set up a desktop based IMAP client.  Once the volumes have been rebuilt and things are stable — which shouldn’t happen any later than this evening — we will post a final update here.

Update Dec.4 9:57 PST: Both volumes have reconstructed and attachments have been reactivated for webmail.

03 dec

EvoSwitch Hall 1/2 problems [Update]

Time: December 3rd 2009 02:05:00(CEST)
Expected Downtime: Unknown
Location: EvoSwitch
Reason: under investigation
*******************************

Dear Customer,

At the moment we experience some troubles in (part of) our network.

We are doing our utmost to solve this issue a.s.a.p.
As soon as we have more information available, we will publish it here.

Please be patient while we are working on this problem.

Regards,
LeaseWeb BV

[UPDATE 02:20] All services are back online again, we are currently investigating the cause if this issue.

[UPDATE 02:58] It seems some feeds had a short power dip. This is not certain yet. We are still investigating.

[UPDATE 03:12] Some colocation customers are causing ethernet loops, these interfaces are being shut now.

[UPDATE 03:17] to clarify, the loops did not start the problems, it seems that the colocation customers switches are causing loops after the power dip.
All looping interfaces have been shutdown.

[UPDATE 03:39] Four extra engineers are at the datacenter. And some more underway. If your server is still not online please contact support via email.

03 dec

EvoSwitch Hall 1/2 problems [Update]

Time: December 3rd 2009 02:05:00(CEST)
Expected Downtime: Unknown
Location: EvoSwitch
Reason: under investigation
*******************************

Dear Customer,

At the moment we experience some troubles in (part of) our network.

We are doing our utmost to solve this issue a.s.a.p.
As soon as we have more information available, we will publish it here.

Please be patient while we are working on this problem.

Regards,
LeaseWeb BV

[UPDATE 02:20] All services are back online again, we are currently investigating the cause if this issue.

[UPDATE 02:58] It seems some feeds had a short power dip. This is not certain yet. We are still investigating.

02 dec

BIT-2ABCD: Uitgebreide noodstroomtests in December

BIT-2ABCD: Uitgebreide noodstroomtests in December
Geachte relatie,

BIT test iedere maand volgens een vaste procedure de
noodstroomvoorziening. Tijdens deze test wordt de netspanning niet
daadwerkelijk afgeschakeld, maar worden de zekeringen voor de
netwachters verwijderd, waardoor het systeem ‘denkt’ dat er een
stroomstoring is. Nadat hierdoor de aggregaten zijn gestart, wordt er
wel daadwerkelijk automatisch omgeschakeld en worden de aggregaten
belast getest. Deze test wordt afzonderlijk, na elkaar voor de A en de B
feed uitgevoerd.

Twee keer per jaar testen we de noodstroomvoorziening door het lichtnet
volledig af te schakelen. Deze procedure zal in plaats van de normale
testprocedure uitgevoerd worden. Uiteraard blijven we onze standaardtests voor de noodstroomvoorziening elke maand uitvoeren.

De eerste uitgebreide tests zullen plaatsvinden op:

* 8 december voor BIT-2BCD
* 15 december voor BIT-2A

De overschakeling naar aggregaat zal voor de servers in de serverruimte
opgevangen worden door de UPS’en. Tijdens het overschakelen zal de
voeding naar de koelinstallatie kortstondig onderbroken worden, hierdoor
is het mogelijk dat er een lichte stijging van de temperatuur in de
serverruimtes plaatsvindt.

Meerdere BIT engineers zullen hierbij aanwezig zijn. Engineers van
onze aggregaat leverancier, Bredenoord, zullen bij deze eerste test ook
aanwezig zijn.

Mocht u vragen hebben naar aanleiding van dit onderhoud, dan kunt u
contact opnemen met onze afdeling Customer Care op 0318 648 688 of via
[email protected].

02 dec

BIT-2ABCD: Uitgebreide noodstroomtests in December

BIT-2ABCD: Uitgebreide noodstroomtests in December
Geachte relatie,

BIT test iedere maand volgens een vaste procedure de
noodstroomvoorziening. Tijdens deze test wordt de netspanning niet
daadwerkelijk afgeschakeld, maar worden de zekeringen voor de
netwachters verwijderd, waardoor het systeem ‘denkt’ dat er een
stroomstoring is. Nadat hierdoor de aggregaten zijn gestart, wordt er
wel daadwerkelijk automatisch omgeschakeld en worden de aggregaten
belast getest. Deze test wordt afzonderlijk, na elkaar voor de A en de B
feed uitgevoerd.

Twee keer per jaar testen we de noodstroomvoorziening door het lichtnet
volledig af te schakelen. Deze procedure zal in plaats van de normale
testprocedure uitgevoerd worden. Uiteraard blijven we onze standaardtests voor de noodstroomvoorziening elke maand uitvoeren.

De eerste uitgebreide tests zullen plaatsvinden op:

* 8 december voor BIT-2BCD
* 15 december voor BIT-2A

De overschakeling naar aggregaat zal voor de servers in de serverruimte
opgevangen worden door de UPS’en. Tijdens het overschakelen zal de
voeding naar de koelinstallatie kortstondig onderbroken worden, hierdoor
is het mogelijk dat er een lichte stijging van de temperatuur in de
serverruimtes plaatsvindt.

Meerdere BIT engineers zullen hierbij aanwezig zijn. Engineers van
onze aggregaat leverancier, Bredenoord, zullen bij deze eerste test ook
aanwezig zijn.

Mocht u vragen hebben naar aanleiding van dit onderhoud, dan kunt u
contact opnemen met onze afdeling Customer Care op 0318 648 688 of via
[email protected].

02 dec

Onderhoud IPv6 tunnel server

In verband met een capaciteitsuitbreiding van de IPv6 tunnelserver zullen in de genoemde
periode bestaande tunnels worden onderbroken en kunt u mogelijk hinder ondervinden bij
het opzetten van nieuwe tunnels.

Onze excuses voor de overlast