Revisión postincidente
Incidente: Pago no disponible durante 47 minutos
Fecha: 11 de octubre de 2027
Gravedad: Alta
Responsable del incidente: Hamza Idrissi
Revisión escrita por: Anna Berg
Fecha de la revisión: 14 de octubre de 2027
Esta revisión no busca culpables. Su objetivo es aprender y mejorar los sistemas y los procesos, no señalar a personas.
Resumen
El 11 de octubre, de 14:03 a 14:50, los clientes no pudieron pagar. Un cambio en la base de datos llenó el disco y el servicio de pago se detuvo.
Impacto
Unos 310 intentos de pago fallidos. Pérdidas estimadas de 9.000 EUR. 42 tickets de soporte. No se perdieron datos.
Cronología
14:03 Alerta por pagos fallidos
14:08 El ingeniero de guardia empieza a investigar
14:21 Se encuentra la causa: disco lleno
14:38 Se eliminan registros antiguos y se reinicia el servicio
14:50 Los pagos funcionan, incidente cerrado
Causas
Causa directa: el disco llegó al 100 por cien.
Causas subyacentes: no había ninguna alerta de uso del disco, los archivos de registro nunca se rotaban y el cambio no se probó con volúmenes de datos reales.
Lo que funcionó bien
La alerta de pagos saltó en 3 minutos. El equipo trabajó unido y mantuvo informados a los clientes en la página de estado.
Lo que falló o fue cuestión de suerte
Encontrar la causa llevó 18 minutos porque el panel no mostraba el uso del disco. El manual de operaciones estaba desactualizado.
Acciones de seguimiento
| Acción | Responsable | Fecha límite |
|---|---|---|
| Añadir una alerta de disco al 80 por ciento | Hamza Idrissi | 21 de octubre |
| Configurar la rotación de registros | Daniel Roche | 21 de octubre |
| Actualizar el manual de operaciones | Anna Berg | 28 de octubre |
Lecciones para otros equipos
Todos los servicios deberían tener alertas de disco y rotación de registros.