Revisione post-incidente
Incidente: Checkout non disponibile per 47 minuti
Data: 11 ottobre 2027
Gravità: Alta
Responsabile dell'incidente: Hamza Idrissi
Revisione redatta da: Anna Berg
Data della revisione: 14 ottobre 2027
Questa revisione è senza colpe. Il suo scopo è imparare e migliorare sistemi e processi, non attribuire responsabilità alle persone.
Sintesi
L'11 ottobre dalle 14:03 alle 14:50 i clienti non hanno potuto pagare. Una modifica al database ha riempito il disco e il servizio di checkout si è fermato.
Impatto
Circa 310 tentativi di pagamento non riusciti. Perdita stimata di vendite pari a 9.000 EUR. 42 ticket di assistenza. Nessun dato perso.
Cronologia
14:03 Avviso per pagamenti non riusciti
14:08 L'ingegnere di turno inizia a indagare
14:21 Trovata la causa: disco pieno
14:38 Rimossi i vecchi log, servizio riavviato
14:50 Pagamenti funzionanti, incidente chiuso
Cause
Causa diretta: il disco ha raggiunto il 100 per cento.
Cause profonde: nessun avviso sull'uso del disco, i file di log non venivano mai ruotati, la modifica non è stata testata con volumi di dati reali.
Cosa ha funzionato
L'avviso sui pagamenti è scattato in 3 minuti. Il team ha collaborato e ha tenuto informati i clienti sulla pagina di stato.
Cosa è andato storto o è stato solo fortuna
Trovare la causa ha richiesto 18 minuti perché la dashboard non mostrava l'uso del disco. La procedura operativa era obsoleta.
Azioni successive
| Azione | Responsabile | Scadenza |
|---|---|---|
| Aggiungere un avviso sul disco all'80 per cento | Hamza Idrissi | 21 ottobre |
| Attivare la rotazione dei log | Daniel Roche | 21 ottobre |
| Aggiornare la procedura operativa | Anna Berg | 28 ottobre |
Lezioni per gli altri team
Tutti i servizi dovrebbero avere avvisi sul disco e rotazione dei log.