Stroomproblemen LCL Diegem 31 maart

Deze namiddag werd het LCL datacenter in Diegem getroffen door een algemene stroomstoring. LCL Diegem is één van de grootste datacenters van het land, en is ook het datacenter waar Openminds een ruimte huurt, en van waaruit het merendeel van onze diensten draaien.

In onze ruimte hebben we een twee compleet gescheiden stroomfeeds, en deze zijn allebei voorzien van noodbatterijen en een generator via het LCL datacentrum. Alle stroomcomponenten worden elke maand volledig getest op volle belasting. Technisch is alles dus voorzien om een continue stroom te leveren. Dit is tot vandaag altijd gelukt, nog nooit was de stroom weggevallen in het datacentrum sinds de startdag.

Deze middag heeft zich rond kwart na vier een eerste stroomstoring voorgedaan, waarbij een groot deel van onze apparatuur offline ging. Na een korte tijd kwam de stroom even terug, maar twintig minuten later was alles terug offline. Pas enkele uren later werd het probleem volledig verholpen.

We doen er alles aan om onze dienstverlening zo stabiel en redundant mogelijk te maken. Zo is ons netwerk volledig redundant uitgevoerd, hebben de meeste servers twee netwerkverbindingen, gebruiken we overal RAID-setups en we hebben we dagelijkse backups van alle servers. Helaas is de stroomvoorziening volledig buiten onze controle; hier moeten we vertrouwen op onze leverancier, en kunnen we zelf niets extra voorzien om dit beter te maken. Aangezien LCL een van de grootste datacenters van het land is, werden heel wat van ons collega’s concurrenten ook getroffen door deze panne.

Over de precieze oorzaak van de storing alsook de ingrepen die zullen plaatsvinden om dit in de toekomst te vermijden, wachten we nog op een officiële communicatie van LCL, de uitbater van het datacenter. We berichten jullie hierover van zodra we meer informatie hebben.

We excuseren ons dan ook bij onze klanten en benadrukken dat wij in overleg met de uitbater van het datacenter naar oplossingen zullen zoeken om ervoor te zorgen dat dit in de toekomst niet meer kan voorvallen. Geen enkele mail ging verloren ten gevolge van deze outage, aangezien onze backup mail infrastructuur in Nederland alle e-mail berichten opving. Hoewel een aantal harddisks sneuvelden, is er geen data verloren gegaan, dankzij de RAID-setup in al onze machines.

Wij excuseren ons nogmaals voor het ongemak, en danken onze klanten voor hun begrip, geduld en vertrouwen in Openminds. Wanneer je vragen hebt, aarzel niet om ons te contacteren: dringende problemen kunnen telefonisch, minder dringende liefst via email.

Geschreven op 31/03/2008

Door Frank Louwers

Tags: datacenter, problemen

Reageer