DIE FRAGE
Why does the same outage keep recurring?
Schlagen Sie vor, was zu tun ist, und beurteilen Sie dann, ob jede Maßnahme jede Grundursache verändern würde.
Versiegelt vor 23 Tagen: Dieser Raum weiß nicht mehr, wer darin saß; nur seine Leitung ist noch genannt. Was er ergeben hat, bleibt.
30 am Tisch (29 simuliert) · Maßnahmen vorgeschlagen: 3, zu Grundursachen: 6. Fügen Sie eine hinzu und beurteilen Sie dann, ob jede Maßnahme jede Ursache verändert.
Ansicht als Gast. Benutzernamen eingeben, um beizutreten und mitzumachen.
Zuerst die Grundursachen bewerten
warum
Die eigene Praxis der Methode, bevor eine Maßnahme vorgeschlagen wird: Jede Grundursache wird mit 1–5 bewertet, danach, wie machbar es ist, sie anzugehen, wie viel Wirkung das hätte und wie wahrscheinlich sie sich ohne Eingreifen von selbst erledigt. Vorrang haben Grundursachen mit hoher Wirkung, hoher Machbarkeit und geringer Wahrscheinlichkeit, sich von selbst zu erledigen — Priorität = Wirkung + Machbarkeit − Wahrscheinlichkeit. Die Bewertungen werden über die Gruppe gemittelt und mit der Zahl der Bewertenden angezeigt.
1 = niedrig, 5 = hoch. Ihre eigenen Bewertungen; die Durchschnitte der Gruppe daneben.
| Grundursache | machbar | Wirkung | erledigt sich selbst | Priorität |
|---|---|---|---|---|
| The service map in the wiki is two years old | – | – | – | – |
| One engineer knows how the payment path actually works | – | – | – | – |
| Feature flags are never cleaned up, so nobody knows which paths are live | – | – | – | – |
| The on-call rota has the same two people on it most weeks | – | – | – | – |
| Rollbacks take longer than the outage they are meant to end | – | – | – | – |
| Alerts fire so often that on-call mutes them | – | – | – | – |
Würde jede Maßnahme jede Grundursache verändern?
Am Rand: die Maßnahmen, die vorgeschlagen wurden. Oben: die Grundursachen, die die Landkarte gefunden hat. Jedes Feld ist eine Abstimmung über eine Frage — würde diese Maßnahme jene Ursache maßgeblich verringern? Eine Seite muss 75 % der abgegebenen Stimmen erreichen, um es zu entscheiden; sonst bleibt das Feld uneinig. Jedes Feld zeigt, wie seine Stimmen ausgefallen sind — ja / schlimmer / nein — und ein Feld ist entschieden, wenn eines davon drei Viertel erreicht.
warum
Entschieden bei 75 % der abgegebenen Stimmen, wie jede andere Frage hier. Uneinig heißt: Es wurde abgestimmt, und keine Seite hat diese Schwelle erreicht — das ist ein Ergebnis, keine Warteschlange, und es bleibt uneinig, bis genug Leute ihre Meinung ändern. Ein Feld, das niemand entscheidet, bleibt unentschieden; es wird nie zu einem Nein. Jedes Paar einzeln zu beurteilen verhindert, dass einer beliebten Maßnahme Wirkungen zugeschrieben werden, die sie gar nicht hat.
| MASSNAHME | GRUNDURSACHEN · verringert die Maßnahme links dieses Problem? | |||||
|---|---|---|---|---|---|---|
| The service map in the wiki is two years old | One engineer knows how the payment path actually works | Feature flags are never cleaned up, so nobody knows which paths are live | The on-call rota has the same two people on it most weeks | Rollbacks take longer than the outage they are meant to end | Alerts fire so often that on-call mutes them | |
| No production deploy after 14:00 on Fridays unless the on-call engineer agrees diskutieren | ✗ nein, tut sie nicht 3 ja / 0 schlimmer / 26 nein | ⚑ die Gruppe ist uneinig 21 ja / 0 schlimmer / 8 nein | noch nicht entschieden | noch nicht entschieden | noch nicht entschieden | noch nicht entschieden |
| Give the shared schema one named owner and a migration tool with rollback diskutieren | ✗ nein, tut sie nicht 6 ja / 0 schlimmer / 23 nein | ✓ ja, sie verringert dies 24 ja / 0 schlimmer / 5 nein | noch nicht entschieden | noch nicht entschieden | noch nicht entschieden | noch nicht entschieden |
| Reserve one engineer-week per sprint for post-mortem actions, first in the sprint, not last diskutieren | ✗ nein, tut sie nicht 4 ja / 0 schlimmer / 25 nein | ✗ nein, tut sie nicht 3 ja / 0 schlimmer / 26 nein | noch nicht entschieden | noch nicht entschieden | noch nicht entschieden | noch nicht entschieden |
Bisher größte Hebelwirkung
Give the shared schema one named owner and a migration tool with rollback verringert 1 von 6 Grundursachen
DIE MASSNAHMEN AUF DER LANDKARTE
Angezeigt: alle Maßnahmen, die der Raum beurteilt hat. Wirkt direkt auf 1 von 6 Grundursachen. Nicht direkt angegangen: 5.
Abgelesen aus den Feldern, die der Raum in der Phase Maßnahmen entschieden hat, aus nichts anderem. Eine grüne Grundursache wird durch mindestens eine der angezeigten Maßnahmen verringert; auf eine graue wirkt keine davon direkt; ein roter Rand bedeutet, dass eine davon sie verschlimmert.
Diese Ansicht teilen: als Bild · als Live-Landkarte für eine andere Website
Jede Zahl auf der Landkarte markiert eine Grundursache, die diese Maßnahme verringert.
① No production deploy after 14:00 on Fridays unless the on-call engineer agrees
② Give the shared schema one named owner and a migration tool with rollback
③ Reserve one engineer-week per sprint for post-mortem actions, first in the sprint, not last
Was wir als Folge erwarten
Vorhersagen zu den Maßnahmen: was jede ändern soll, wie man es misst und wann es überprüft wird. Am Datum schreibt jemand, der im Raum war, daneben, was tatsächlich passiert ist.
warum
Eine Landkarte sagt, welche Maßnahmen welche Ursachen verändern. Sie sagt nicht, ob jemand sie umgesetzt hat oder ob sich etwas geändert hat. Ein Eintrag hier ist eine Vorhersage mit einem Datum und etwas Messbarem, geschrieben, nachdem die Landkarte feststand. Wenn das Datum kommt, wird daneben festgehalten, was tatsächlich passiert ist, und die Vorhersage bleibt, wie sie war: Eine falsche ist die nützliche Sorte. Niemand hat über irgendetwas davon abgestimmt, und es ändert nichts an dem, was der Raum gefunden hat.
fällig am 23 Jan 2027
MaßnahmeNo production deploy after 14:00 on Fridays unless the on-call engineer agrees
wir erwartenthe same cause stops coming back once fixing it is in the sprint
gemessen anrepeat outages with the same cause, per quarter
Schätzungender Raum: 3 (Median aus 15, Spanne 1 bis 6)