In de nacht van woensdag 23 november op donderdag 24 november rond 0:00 zullen we een configuratie update uitvoeren op de firewall van segment 2. We verwachten geen downtime, u hoeft zelf niets te doen.

We ondervonden zojuist tussen 0:37 en 1:09 problemen aan segment 2. Sites die gehost worden op dit segment hebben hier hinder van ondervonden. Inmiddels is het segment weer up. Het e.e.a. is ontstaan door een netwerkprobleem. Clusters 36, 48, 53, 54, 55, 57, 58, 59, 60,61, 62, 63, 64, 65, 66, 67, 68, 69, 70, 71, 72 zijn hierdoor onbereikbaar geweest.

Controleer op het Service Panel of uw site gehost wordt op segment 2.

[15-11-11, 01:45 uur] Het onderhoud is succesvol en vlot verlopen. De mailsystemen zijn een kleine drie kwartier in meer of mindere mate offline geweest; om 00:45 uur was alles weer online. Inmiddels hebben we alle testen afgerond en kunnen we het onderhoud afronden.

In de nacht van 14 november op 15 november staat de migratie van onze inkomende mailservers gepland.

In de nacht van 14 november op 15 november staat de migratie van onze inkomende mailservers gepland.

We hebben zojuist een korte storing van zo’n 2 minuten aan databaseserver 18 op segment 1 ondervonden. De oorzaak was een gecrashte server. Er bleek een bug in de database server te zitten. Deze hebben we direct kunnen fixen en moet niet meer voorkomen.

Inmiddels draaien alle sites weer naar behoren. Onze excuses voor het ongemak.

Update 8.34: de databaserver in kwestie (DB23) is weer te vinden onder het juiste IP-nummer. Excuses voor het ongemak. We zijn bezig extra testen in te voeren om dit eerder te zien.

Plaatsing 8.18: Door klein regulier onderhoud vannacht is een databaseserver (DB23) niet bereikbaar door een configuratiefout. Een deel van de IP adressen was niet geconfigureerd, waardoor de andere systemen hen niet konden bereiken. Omdat de databaseserver het zelf wel deed, hebben we het niet eerder gemerkt in de monitoring. We herstellen dit zo snel mogelijk, onderzoeken daarna hoe het heeft kunnen gebeuren en implementeren verbeteringen voor de volgende keer.

Update 8.34: de databaserver in kwestie (DB23) is weer te vinden onder het juiste IP-nummer. Excuses voor het ongemak. We zijn bezig extra testen in te voeren om dit eerder te zien.

Plaatsing 8.18: Door klein regulier onderhoud vannacht is een databaseserver (DB23) niet bereikbaar door een configuratiefout. Een deel van de IP adressen was niet geconfigureerd, waardoor de andere systemen hen niet konden bereiken. Omdat de databaseserver het zelf wel deed, hebben we het niet eerder gemerkt in de monitoring. We herstellen dit zo snel mogelijk, onderzoeken daarna hoe het heeft kunnen gebeuren en implementeren verbeteringen voor de volgende keer.

UPDATE 02:16: Het onderhoud is succesvol afgerond. Alle servers en diensten zijn weer online/beschikbaar. Mocht u tegen problemen aanlopen kunt u contact opnemen met [email protected]

In de nacht van 8 op 9 november zullen wij onderhoud uitvoeren aan een aantal Magento clusters. Tijdens dit onderhoud worden de betreffende clusters verhuisd van Segment 1 naar Segment 2. Deze verhuizing wordt uitgevoerd ter voorbereiding op de komende kerstdrukte, zodat we de serverbelasting kunnen verspreiden over meerdere segmenten.

We ondervonden zojuist wederom kort problemen aan databaseserver 2, op segment 2. Sites die gehost worden op deze server kunnen hier hinder van ondervonden hebben. Inmiddels is de server weer up. Alle andere databaseservers hebben geen problemen ondervonden.

De problemen werden veroorzaakt door een zware, langlopende query van een van de klanten op deze server. De betreffende klant hebben we zojuist uitgezet.

Controleer op het Service Panel of uw site gehost wordt op deze databaseserver.

We ondervonden juist wederom kort problemen met database 36 (4 min), hierdoor werkten mogelijk websites die van deze server gebruik maakten niet naar behoren.

We zijn inmiddels weer terug geschakeld naar de primaire databaseserver. Deze is inmiddels weer up-to-date.

De oorzaak bleek te liggen in een klant die op een bug in MySQL stuitte, waardoor de server niet meer reageerde. Deze klant is per direct naar een server verplaatst, om verder overlast te voorkomen.