Feb 5, 2025, 04:23 – 08:35
Affected services: sämtliche Services
Aufgrund eine Netzwerkstörung im Datacenter unseres Housing-Anbieters METANET sind heute früh seit 04:23AM sämtliche Services ausgefallen. Seit 08:35 Uhr funktioniert alles wieder und METANET meldet aktuell noch:
https://support.metanet.ch/statusMessage-592.html
Aufgrund einer Netzwerkstörung sind unsere Server derzeit nicht erreichbar. Unsere Datacenter-Spezialisten arbeiten mit unseren SysAdmins an der Behebung der Störung.
Wir beobachten die Situation weiterhin und werden dieses Ticket schliessen, sobald die definitive Störungs-Behebung von METANET bestätigt ist.
Seit 08:35 Uhr sind sämtliche Services wieder verfügbar und unser Monitoring hat keine weiteren Ausfälle mehr gemeldet. Einzig ein paar Kunden haben uns noch kleinere Unterbrüche vor 11 Uhr gemeldet.
METANET hat weitere Details zu diesem Vorfall veröffentlicht:
Ursache
Technische Probleme an der Kühlanlage unseres Datacenter-Partners.
Ursachenanalyse
Technische Probleme bei den Kühlanlagen unseres Datacenter-Partners führten in der Nacht zu einem plötzlichen, drastischen und anhaltenden Temperaturanstieg, woraufhin ein Teil unserer Systeme automatisch heruntergefahren wurde. Beim anschliessenden Neustart zeigte sich, dass mehrere zentrale Komponenten (Switches) nicht mehr einwandfrei funktionierten. Um die Systeme stabil und sicher wiederherzustellen, war der Ersatz dieser Hardware notwendig, was die (Wieder-) Inbetriebnahme leider verzögerte.
Massnahmen
Neben der technischen Analyse in Zusammenarbeit mit dem Rechenzentrumsbetreiber evaluieren wir Massnahmen, um vergleichbare Vorfälle künftig zu vermeiden. Zusätzlich optimieren wir unsere Kommunikationsprozesse – insbesondere für Szenarien, in denen auch unsere Statusseite betroffen ist. Eine Option ist, diese unabhängig vom restlichen System zu hosten, um künftig auch in solchen aussergewöhnlichen Fällen schneller und zuverlässiger informieren zu können.
Alle Systeme sind mittlerweile wieder vollständig verfügbar.
Für die entstandenen Unannehmlichkeiten bitten wir um Entschuldigung.
Wir möchten betonen, dass wir prinzipiell nicht von METANET-Services abhängig sind und unsere gesamte Server-Infrastruktur in einem eigenen Rack im Housing von METANET betreiben, in deren hochsicheren Datacenter in Zürich. Treten aber so schwerwiegende Probleme auf Netzwerk-Ebene auf, in diesem Fall sogar der Ausfall zentraler Switches, sind wir selbstverständlich auch davon betroffen. Glücklicherweise ein seltener Fall!
Wir hoffen, dass METANET diesmal sein Versprechen für eine bessere Kommunikation umsetzt. Es war auch für uns sehr unangenehm, euch mit der Antwort «Wir warten noch auf die offizielle Bestätigung der Störung» vertrösten zu müssen. Herzlichen Dank für all euer Verständnis!