Ein schwerer Bug hat es in die Produktion geschafft. Deine Suite war grün. Was machst du?

Behandle es in zwei Phasen. Sofort: reproduzieren, Auswirkung und Umfang bewerten, die Eindämmung unterstützen (Rollback oder Flag aus) und kommunizieren. Danach: herausfinden, warum das Testen ihn verpasst hat, ob ein Fall fehlte, ob es eine Lücke zwischen Umgebungen war oder eine ungetestete Integration, dann einen Regressionstest auf der niedrigsten sinnvollen Schicht ergänzen und die Klasse der Lücke beheben, nicht nur den Einzelfall.

Erste Phase ist Eindämmung, und ich analysiere da noch gar nichts. Reproduzieren, die exakten Bedingungen festnageln und quantifizieren: wie viele Nutzer, welche Pfade, werden Daten beschädigt oder nur falsch angezeigt, denn das ändert die Dringlichkeit komplett. Dann die schnellste sichere Eindämmung unterstützen, meist ausflaggen oder zurückrollen, und dafür sorgen, dass die Leute mit Kundenkontakt wissen, was sie sagen sollen. Die Analyse kommt, wenn es aufgehört hat wehzutun. Die Frage, die ich stelle, ist nicht, wer ihn verpasst hat, sondern welche Eigenschaft unseres Prozesses ihn durchgelassen hat. Meist ist es eines von wenigen Dingen: niemand hat an den Fall gedacht, das ist eine Testdesign-Lücke; der Fall existierte, aber die Umgebung war anders, das ist eine Daten- oder Konfigurationslücke; oder er saß in einer Integration, für die sich niemand zuständig fühlte. Der letzte, den ich hatte, war ein Rundungsfehler bei einer Währung, der nur für eine in unseren Testdaten fehlende Locale auftrat, der echte Fix war also kein einzelner Testfall, sondern Locale-Abdeckung in der Datenstrategie. Dann ergänze ich einen Regressionstest auf der niedrigsten Schicht, die ihn gefangen hätte, und prüfe, ob dieselbe Lückenklasse anderswo existiert.