Eftergennemgang af hændelse
Hændelse: Kassen var utilgængelig i 47 minutter
Dato: 11. oktober 2027
Alvorlighedsgrad: Høj
Hændelsesleder: Hamza Idrissi
Gennemgang udarbejdet af: Anna Berg
Gennemgangsdato: 14. oktober 2027
Denne gennemgang er uden skyldsplacering. Formålet er at lære og forbedre systemer og processer, ikke at give personer skylden.
Sammenfatning
Den 11. oktober fra 14:03 til 14:50 kunne kunder ikke betale. En databaseændring fyldte disken, og kasseservicen stoppede.
Konsekvenser
Omkring 310 mislykkede betalingsforsøg. Anslået tabt salg på EUR 9,000. 42 supporthenvendelser. Ingen data gik tabt.
Tidslinje
14:03 Alarm om mislykkede betalinger
14:08 Vagthavende ingeniør begynder at undersøge
14:21 Årsag fundet: disken er fuld
14:38 Gamle logfiler fjernet, tjenesten genstartet
14:50 Betalinger virker, hændelsen er lukket
Årsager
Direkte årsag: disken nåede 100 procent.
Baggrundsårsager: ingen alarm for diskforbrug, logfiler blev aldrig roteret, ændringen blev ikke testet med reelle datamængder.
Hvad gik godt
Betalingsalarmen udløstes efter 3 minutter. Teamet arbejdede sammen og holdt kunderne informeret på statussiden.
Hvad gik dårligt, eller var heldigt
Det tog 18 minutter at finde årsagen, fordi dashboardet ikke viste diskforbrug. Driftsvejledningen var forældet.
Opfølgende handlinger
| Handling | Ansvarlig | Forfaldsdato |
|---|---|---|
| Tilføj en diskalarm ved 80 procent | Hamza Idrissi | 21. oktober |
| Opsæt logrotation | Daniel Roche | 21. oktober |
| Opdater driftsvejledningen | Anna Berg | 28. oktober |
Læring for andre
Alle tjenester bør have diskalarmer og logrotation.