Meistens schreiben wir über Vorbeugung: Updates, Firewalls, Berechtigungen, Monitoring, die unauffälligen Routinen, die eine Website vor Ärger bewahren. In diesem Artikel geht es um die andere Seite, den Plan für den Tag, an dem trotzdem etwas schiefgeht. Für jede Website, die wir betreuen, liegt ein solcher Plan schriftlich vor, und wir finden, jedes Unternehmen sollte wissen, was in seinem steht. Bei einer gut gewarteten Website sind Vorfälle nicht wahrscheinlich. Gelassen ist man aber erst, wenn man genau weiß, was im Ernstfall passieren würde.
Was als Vorfall gilt
Ein Vorfall ist jedes Ereignis, das die Verfügbarkeit, die Integrität oder die Vertraulichkeit deiner Website oder ihrer Daten beeinträchtigt. Gemeint ist also weit mehr als ein Einbruch. Ein Deployment, das die Website lahmlegt, ein abgelaufenes Zertifikat, eine volle Festplatte, ein ausgefallener Dienst eines Drittanbieters, ein gekapertes Redakteurskonto, eine verunstaltete Seite, abgeflossene Formulardaten: All das sind Vorfälle. Der Plan behandelt sie alle nach demselben Schema, denn gerade das feste Schema hält die Reaktion ruhig.
Erkennen: innerhalb von Minuten Bescheid wissen
Der Plan greift, bevor überhaupt ein Mensch beteiligt ist. Das Monitoring überwacht die Verfügbarkeit von mehreren Standorten aus, außerdem Antwortzeiten, Fehlerquoten, den Ablauf von Zertifikaten, fehlgeschlagene Logins, unerwartete Änderungen an Dateien und Konfiguration und den Zustand jedes Dienstes, von dem die Website abhängt. Überschreitet ein Signal seinen Schwellenwert, geht eine Warnung an eine zuständige Person, ob tagsüber oder nachts, und die Uhr läuft. Die meisten Vorfälle auf unserer Plattform bemerken wir so, bevor ein Besucher oder Kunde etwas mitbekommt, und ein guter Teil ist behoben, bevor außerhalb des Teams überhaupt jemand davon erfährt.
Einschätzen: die ersten fünfzehn Minuten
Wer Bereitschaft hat, muss schnell drei Fragen beantworten. Was ist betroffen: eine Seite, eine Website, ein Server, ein Dienst? Passiert es noch, oder hat es aufgehört? Und geht es um Daten? Dann ändern sich die rechtlichen Pflichten und der Kreis derer, die informiert werden müssen. Aus den Antworten ergibt sich der Schweregrad, und der Schweregrad entscheidet, wer noch hinzugezogen wird und wie schnell der Kunde von uns hört.
Bei allem, was Besucher oder Daten betrifft, erfährt der Kunde innerhalb einer Stunde, was wir wissen, was wir tun und wann er wieder von uns hört. Diese Nachricht geht auch dann raus, wenn das Bild noch unvollständig ist. Vertrauen beschädigt nicht die lückenhafte Information, sondern das Schweigen.
Eindämmen: verhindern, dass es schlimmer wird
Bevor wir irgendetwas reparieren, sorgen wir dafür, dass sich der Vorfall nicht ausbreitet. Wie genau, hängt von der Art ab. Ein gekapertes Konto wird gesperrt und seine Sitzungen werden beendet. Ein verdächtiger IP-Bereich wird an der Edge blockiert. Eine Integration, die sich falsch verhält, wird abgeschaltet. Eine Website, die gerade angegriffen wird, lässt sich innerhalb einer Minute hinter eine Wartungsseite oder strengere Firewall-Regeln stellen. Weil jede Website in einem eigenen, isolierten Container mit schreibgeschütztem Code läuft, bleibt ein Vorfall dort, wo er passiert. Den größten Teil der Eindämmung erledigt also die Architektur für uns.
Wiederherstellen: zurück zu einem sauberen Stand
Bei der Wiederherstellung zahlt sich Vorbereitung am sichtbarsten aus. Jedes Release, das wir ausrollen, bleibt erhalten. Hat ein Deployment das Problem verursacht, ist das Zurückrollen also ein einziger Schritt und dauert Sekunden. Wurden Inhalte oder Daten beschädigt, spielen wir ein Backup zurück, dessen Wiederherstellung wir bereits erprobt haben, und zwar in einer Zeit, die wir schon kennen. Wurde Code manipuliert, kann die Manipulation dank der schreibgeschützten Laufzeitumgebung das ausgerollte Release nicht erreicht haben. Wir rollen neu aus dem Repository aus, und die Website ist sauber.
Bei der Wiederherstellung geht es noch nicht darum, alles zu verstehen. Es geht darum, dass Besucher so schnell wie möglich wieder auf einer funktionierenden, vertrauenswürdigen Website landen. Das Verstehen kommt danach.
Aufklären: was wirklich passiert ist
Läuft die Website wieder stabil, rekonstruieren wir den Ablauf. Genau dafür bewahren wir Logs auf, und zwar dort, wo die Website selbst sie nicht verändern kann. Mit ihnen verfolgen wir einen Vorfall vom ersten Signal bis zur eigentlichen Ursache. Wir klären, was ihn möglich gemacht hat, ob dieselbe Schwachstelle auch anderswo besteht und mit welcher Änderung wir sie dauerhaft schließen. Waren personenbezogene Daten betroffen, stellen wir hier auch fest, um welche Daten es geht, wessen Daten es sind und ob die Schwelle erreicht ist, ab der Behörden und Betroffene informiert werden müssen. So kann der Kunde seine Pflichten innerhalb der gesetzlichen Fristen erfüllen.
Laufend informiert
Kunden hören in jeder Phase von uns: wenn wir den Vorfall erkennen, wenn wir ihn eindämmen, wenn die Website wiederhergestellt ist und wenn wir die Ursache kennen. Die Updates laufen über das Kundenportal und zusätzlich per Direktnachricht, damit alles dokumentiert ist. Müssen Besucher oder deine Kunden informiert werden, helfen wir beim Formulieren: in klaren Worten, was passiert ist, was es für sie bedeutet und was sie tun sollten. Gut geschrieben stärkt eine ehrliche Mitteilung das Vertrauen, statt es aufzubrauchen.
Danach: die Auswertung
Innerhalb weniger Tage schreiben wir eine kurze Auswertung: zeitlicher Ablauf, Ursache, Auswirkung, was funktioniert hat, was nicht und welche Änderungen wir vornehmen. Sie geht an den Kunden, und wenn sich die Erkenntnis verallgemeinern lässt, setzen wir sie auf jeder Website um, die wir betreiben. Schuldige sucht die Auswertung nicht. Sie soll dafür sorgen, dass dasselbe nirgends ein zweites Mal passiert und dass wir den nächsten Vorfall, egal welcher Art, ein wenig besser bewältigen als diesen.
Warum der Plan schriftlich vorliegen muss
Jeder dieser Schritte wird zur Routine, sobald er geplant ist. Stressig werden Vorfälle durch Improvisation: entscheiden, wen man anruft, wo die Backups liegen, wie man zurückrollt, was man den Leuten sagt, und das alles unter Druck. Ein schriftlicher Plan, eingeübt durch Wiederherstellungsübungen und Rollback-Tests, macht aus einer möglichen Krise ein Verfahren. Er gehört zu den unauffälligeren Teilen von Managed Hosting und zu den wertvollsten.
Wenn du wissen möchtest, was an einem schlechten Tag mit deiner Website passieren würde, frag uns. Wir gehen den Plan mit dir durch, und wenn du noch keinen hast, helfen wir dir, ihn zu schreiben.
