Przegląd po incydencie
Incydent: Finalizacja zakupu niedostępna przez 47 minut
Data incydentu: 11 października 2027
Ważność: Wysoki
Lider incydentu: Hamza Idrissi
Autor przeglądu: Anna Berg
Data przeglądu: 14 października 2027
Ten przegląd nie służy obwinianiu. Jego celem jest nauka i poprawa systemów oraz procesów, a nie obwinianie ludzi.
Podsumowanie
11 października od 14:03 do 14:50 klienci nie mogli płacić. Zmiana w bazie danych zapełniła dysk i usługa płatności przestała działać.
Wpływ
Około 310 nieudanych prób płatności. Szacowana utrata sprzedaży: 9 000 EUR. 42 zgłoszenia do wsparcia. Nie utracono danych.
Przebieg zdarzeń
14:03 Alert o nieudanych płatnościach
14:08 Inżynier dyżurny rozpoczyna analizę
14:21 Znaleziono przyczynę: dysk jest pełny
14:38 Usunięto stare logi, usługa została uruchomiona ponownie
14:50 Płatności działają, incydent zamknięty
Przyczyny
Bezpośrednia przyczyna: dysk osiągnął 100 procent.
Przyczyny źródłowe: brak alertu o użyciu dysku, pliki logów nigdy nie były rotowane, zmiany nie testowano z rzeczywistymi wolumenami danych.
Co poszło dobrze
Alert o płatnościach zadziałał w 3 minuty. Zespół współpracował i informował klientów na stronie statusu.
Co poszło źle lub było kwestią szczęścia
Znalezienie przyczyny zajęło 18 minut, ponieważ panel nie pokazywał użycia dysku. Procedura operacyjna była nieaktualna.
Działania następcze
| Działanie | Właściciel | Termin |
|---|---|---|
| Dodać alert o dysku przy 80 procent | Hamza Idrissi | 21 października |
| Skonfigurować rotację logów | Daniel Roche | 21 października |
| Zaktualizować procedurę operacyjną | Anna Berg | 28 października |
Wnioski dla innych zespołów
Wszystkie usługi powinny mieć alerty o dysku i rotację logów.