TUXEDO Computers Website und Onlineshop nicht erreichbar gewesen - Hintergründe - TUXEDO Computers

Wie ihr bereits festgestellt hattet, waren unsere Website und der dazugehörige Shop leider einige Zeit nicht mehr erreichbar! Wir mussten unaufschiebbare Wartungsarbeiten an den Servern durchführen, die sich als schwieriger erwiesen haben, als es zunächst schien. Einzig unsere Website mit Onlineshop waren betroffen, alle weiteren Dienste waren vollkommen funktionstüchtig!

Dazu einige technische Hintergründe

Unser Shopsystem läuft auf einem Cluster, der aus drei sogenannten Nodes, also drei synchron verbundenen Servern, besteht. Diese sollten in der vergangenen Woche auf Ubuntu 22.04 aktualisiert werden. Dabei traten unvorhersehbare Probleme bezüglich der Abhängigkeiten von Ceph auf, der zugrunde liegenden Clustersoftware. So weit, so unproblematisch, da ein Knoten nach dem anderen aktualisiert werden sollte. Das kostet zwar Zeit, beeinträchtigt den laufenden Betrieb aber nur geringfügig.

Doch als ob der Zeitaufwand nicht schon genug wäre, verabschiedete sich die NVMe-SSD eines der verbleibenden Knoten, während der erste Knoten noch abgekoppelt war. Das Clusterkonstrukt war zusammengebrochen, was zu tagelangen Ausfallzeiten führte - und zu viel Arbeit bei der Wiederherstellung. Zu allem Überfluss waren die neuesten Back-ups des Onlineshops - die stündlich erfolgen - ebenfalls nicht mehr vorhanden, weswegen wir auf eine Sicherung von Ende Dezember zurückgreifen mussten.

Tatsächlich haben wir für das Hosting einen Dienstleister, der auf die Thematik spezialisiert ist und ein 24/7-Management betreibt sowie spezielle Back-up-Strategien anbietet. Offensichtlich hat dies alles aber nicht uns davor bewahrt, dass wir nun eine Woche lang den Ausfall der Website und des Shops beklagen mussten. Zudem wurde seitens des Dienstleisters nicht klar kommuniziert, wie lange die Offline-Zeit dauern würde, sodass wir erst spät an einer Alternative arbeiten konnten.

Unsere anderen Dienste, die wir zu 100 Prozent selbst hosten und betreuen, waren von dem Vorfall nicht betroffen, weswegen wir nun ein paar Entscheidungen getroffen haben.

Die gute Nachricht: Wir sind wieder da!

Die Wiederherstellungsarbeiten an unserem Shop sind nun abgeschlossen und wir sind seit dem 6. Mai wieder online. Ihr könnt nun euch wieder über TUXEDOs informieren und Bestellungen tätigen! Sollte eine Anmeldung in eurem Kundenkonto nicht möglich sein, bitten wir euch aus Sicherheitsgründen, die "Passwort-vergessen"-Funktion zu nutzen und ein neues Passwort zu vergeben. Vielen Dank für euer Verständnis!<

Es gibt allerdings ein Aber...

Aufgrund der Kombination des Server- und Datencrash sind ein einige Bestellungen nicht im Webshop verzeichnet worden. Das heißt, dass bei Kunden, die sich seit Anfang des Jahres neu registriert hatten, wohl kein Kundenkonto angelegt und keine dazugehörige Bestellung im Shop gespeichert wurde. Auch bei Kunden, die sich bereits früher registriert hatten, ist wahrheinlich keine Bestellung zwischen Januar und Ende April verzeichnet. Da wir aber einen Import von den Bestellungen zur weiteren Bearbeitung anfertigen und wir eine Kopie der Bestellung per E-Mail erhalten, können wir einige Daten dennoch nachvollziehen und manuell eingeben.

Was wir in Zukunft anders machen werden

Wir haben ein paar harte Lektionen lernen müssen! Vor allem mussten wir erkennen, dass wir am Besten funktionieren, wenn wir die Dinge selber in die Hand nehmen und nehmen können. Daher haben wir zunächst beschlossen, den bisherigen Dienstleister nicht mehr zu nutzen und zusätzliche Server angeschafft, um das Website- und Shop-System selber hosten zu können. Des Weiteren werden wir breiter unsere Back-ups verteilen, als es bisher der Fall war, um auf mehr Kopien im Notfall zurückgreifen zu können. Auch, wie wir bereits seit Langem planen, werden wir uns personell verstärken.

Vielen Dank für eure Geduld!

Trotz aller Widrigkeiten der letzten Tage freuen wir uns, euch wieder einen Onlineshop anbieten zu können und wir bedanken uns ganz herzlich für eure Geduld sowie die mentale Unterstützung, die wir von euch vor allem über die Social-Media-Kanäle erhalten haben!

Euer TUXEDO Computers-Team