Closed | Nov 20, 2020 | 11:00 GMT+01:00
REMARQUE Ce rapport ne concerne que le service de paiement E-commerce et non IP ou GPRS qui a fait l'objet d'un autre Rapport
Veuillez trouver ci joint le rapport d'incident du 19/11/2020 concernant les services de paiement E-commerce
------------------------------------------------------------------
Rapport d’incident
------------------------------------------------------------------
--- Date ---
Début de l’incident :9h18 19/11/2020
Clôture de l’incident : 9h00 20/11/2020
--- Impact ---
Service impacté
· Service de paiement ( Back Office – Service de Paiement )
Horodatage
· 9h18 19/11/2020 : lenteurs d’accès au service
· 9h30 19/11/2020 – 10h15 19/11/2020 : Indisponibilité totale d’un site de production 9h30 - 50 % du trafic traité
· 10h15 19/11/2020 – Service Nominal
· 10h40 19/11/2020 – 10h45 19/11/2020 coupure totale des deux sites
· 10h45 19/11/2020 – reprise du trafic 50% à 80% Service du flux traité
· 10h57 19/11/2020 – Service Nominal
· 15h09 19/11/2020 – 15h24 19/11/2020 Service perturbé - 50 % du trafic traité
· 15h24 19/11/2020 – Service Nominal
--- Cause ---
Défaillance matérielle sur le Firewall ayant entrainée une défaillance d’un site de production.
Cette défaillance a engendré des perturbations en chaîne :
Engorgement du système de log suivi d’une diminution du traitement des entrées IP SSL allant jusqu’à la saturation et donc l’indisponibilité du service.
--- Actions pendant l’incident ---
· 10h15 19/11/2020 – bascule de l’ensemble des flux sur le deuxième site de production
· 10h40 19/11/2020 – Remise en service du site impacté par l’incident
· 10h40 19/11/2020 – Trafic remis en équilibrage sur les deux sites de production
· 15h24 19/11/2020 – Remise en service du site impacté par l’incident
--- Plan d’actions ---
Objectif : Réduire les risques d’un nouvel incident induit par le système de centralisation des log
· Analyse du système de centralisation des log.
· Définition d’un nouveau schéma de centralisation des log.
--- Statut des services ---
Services Opérationnels
--- Incident ---
Clos avec actions de fond pour que l’incident ne se reproduise pas
Monitoring | Nov 19, 2020 | 15:44 GMT+01:00
Début 9h30 19/11/2020
Service Up 10h15
Nouvelle perturbation 15h15 - Fin perturbation 15h40
Fin:
Impact :
Perturbation de l’ensemble des services de paiement ( Paiement en ligne / Back office marchant / Back Office Acquéreur)
Cause :
défaillance d’un site de production ( Site de Toulouse ) – En cours d’analyse
Actions finalisée
Bascule de l’ensemble des flux sur le site de production de Bordeaux ( 10h15 )
Remise en service du site de TOULOUSE (10h57 )
Statut des services
Service nominal
Open | Nov 19, 2020 | 15:29 GMT+01:00
Date :
Début 9h30 19/11/2020
Service Up 10h15
Nouvelle perturbation 15h15
Fin:
Impact :
Perturbation de l’ensemble des services de paiement ( Paiement en ligne / Back office marchant / Back Office Acquéreur)
Cause :
défaillance d’un site de production ( Site de Toulouse ) – En cours d’analyse
Actions finalisée
Bascule de l’ensemble des flux sur le site de production de Bordeaux ( 10h15 )
Remise en service du site de TOULOUSE (10h57 )
Statut des services
Perturbation majeure
Monitoring | Nov 19, 2020 | 10:57 GMT+01:00
Date :
Début 9h30 19/11/2020
Fin :
L'ensemble des services est désormais en mode nominal. ( Surveillance en cours )
Le rapport est en cours de rédaction.