Actuele Byte storingen en onderhoud
Noodonderhoud Secundaire Loadbalancer afgerond.
Update 16.55: Secundairy loadbalancer is weer van de partij. Onderhoud probleemloos afgerond.
Bij de noodwerkzaamheden van vanmiddag is de tweede loadbalancer niet meer netjes in de juiste configuratie. We plannen direct noodonderhoud in voor 16.45. Het is niet te verwachten dat hierdoor problemen/downtime ontstaan (want de primairy loadbalancer doet alles).
Maandagmiddag 15 november had het gehele Byte netwerk last van een zeer zware DDoS aanval. Hierdoor waren alle sites op ons platform gedurende langere tijd niet bereikbaar. Deze aanval heeft al onze klanten geraakt. We begrijpen dat dit zeer vervelend is en vinden het dan ook van groot belang dat u op de hoogte bent van wat het probleem was en wat we hebben gedaan om dit op te lossen! Hieronder leest u een kort verslag van deze middag.
Momenteel lijkt provider Byte problemen te melden. Berichten melden ons een mogelijk DDoS aanval. Mocht u er last van hebben of meer informatie, laat dan een reactie hieronder achter.
[update 12-11-2010, 07:00] De reboot is uitgevoerd met de verwachte korte downtime voor de mail als gevolg. Het onderhoud is zonder problemen verlopen en al onze diensten zouden weer operationeel moeten zijn.
Morgenochtend 12 november zal tussen half 7 en half 8 de primaire fileserver van de mail gereboot worden in verband met een upgrade van het besturingssysteem. Dit zal ervoor zorgen dat u gedurende korte tijd (enkele minuten) geen mail op kunt halen. Uiteraard zal nieuwe mail direct na het onderhoud alsnog gewoon bezorgd worden, en er zal geen dataverlies optreden.
Morgenochtend 12 november zal tussen half 7 en half 8 de primaire fileserver gereboot worden in verband met een upgrade van het besturingssysteem. Dit zal ervoor zorgen dat u gedurende korte tijd (enkele minuten) geen mail op kunt halen. Uiteraard zal nieuwe mail direct na het onderhoud alsnog gewoon bezorgd worden, en er zal geen dataverlies optreden.
Om nog onbekende redenen liep vannacht de schijf van database server 10 tot 100% vol. Omdat de server vervolgens niets meer weg kon schrijven. De server besloot daarop te wachten tot er weer meer ruimte vrijkwam, en toen dat uiteindelijk niet gebeurde crashte deze. Hij startte vervolgens weer automatisch op, bleef toen weer wachten en crashte daarna weer. Deze cyclus bleef zich herhalen totdat wij vanochtend om 07:15 de schijf van de database server vergroot hadden.
Hoewel wij uiteraard het schijfgebruik en de status van de server 24/7 in de gaten houden bleek dat wij hier pas om 07:00 over bericht werden. Wij gaan vandaag nog uitzoeken waarom hier niet, zoals gewenst, vannacht direct alarm over is geslagen.
In verband met een ernstig veiligheidslek hebben we de software van onze FTP-servers een update moeten geven. Deze update is getest voor zover mogelijk en zou geen problemen moeten geven. Merkt u desondanks iets vreemds, laat het ons zo spoedig mogelijk weten!
In verband met een ernstig veiligheidslek hebben we de software van onze FTP-servers een update moeten geven. Deze update is getest voor zover mogelijk en zou geen problemen moeten geven. Merkt u desondanks iets vreemds, laat het ons zo spoedig mogelijk weten!
[Update 05-11-2010, 00:55] Het onderhoud is succsvol afgerond. Sites op cluster 2 hebben zijn hoogstens twee minuten verminderd bereikbaar geweest. Wij hebben weer veel geleerd ;).
Origineel bericht:
Op vrijdag 5 november tussen 00.00uur en 01.00uur ’s ochtends zal Byte een failovertest uitvoeren op één van de fileserver clusters.
Update 15:25: Het probleem is opgelost en de mail draait weer op volledige capaciteit