Incident

Incident sur les services Lyra / Incident on Lyra services

Closed | Nov 20, 2020 | 11:00 GMT+01:00

REMARQUE Ce rapport ne concerne que le service de paiement E-commerce et non IP ou GPRS qui a fait l'objet d'un autre Rapport

Veuillez trouver ci joint le rapport d'incident du 19/11/2020 concernant les services de paiement E-commerce

------------------------------------------------------------------
Rapport d’incident
------------------------------------------------------------------

--- Date ---

Début de l’incident :9h18 19/11/2020
Clôture de l’incident : 9h00 20/11/2020

--- Impact ---

Service impacté

· Service de paiement ( Back Office – Service de Paiement )

Horodatage

· 9h18 19/11/2020 : lenteurs d’accès au service
· 9h30 19/11/2020 – 10h15 19/11/2020 : Indisponibilité totale d’un site de production 9h30 - 50 % du trafic traité
· 10h15 19/11/2020 – Service Nominal
· 10h40 19/11/2020 – 10h45 19/11/2020 coupure totale des deux sites
· 10h45 19/11/2020 – reprise du trafic 50% à 80% Service du flux traité
· 10h57 19/11/2020 – Service Nominal
· 15h09 19/11/2020 – 15h24 19/11/2020 Service perturbé - 50 % du trafic traité
· 15h24 19/11/2020 – Service Nominal


--- Cause ---

Défaillance matérielle sur le Firewall ayant entrainée une défaillance d’un site de production.
Cette défaillance a engendré des perturbations en chaîne :
Engorgement du système de log suivi d’une diminution du traitement des entrées IP SSL allant jusqu’à la saturation et donc l’indisponibilité du service.

--- Actions pendant l’incident ---

· 10h15 19/11/2020 – bascule de l’ensemble des flux sur le deuxième site de production
· 10h40 19/11/2020 – Remise en service du site impacté par l’incident
· 10h40 19/11/2020 – Trafic remis en équilibrage sur les deux sites de production
· 15h24 19/11/2020 – Remise en service du site impacté par l’incident


--- Plan d’actions ---

Objectif : Réduire les risques d’un nouvel incident induit par le système de centralisation des log

· Analyse du système de centralisation des log.
· Définition d’un nouveau schéma de centralisation des log.

--- Statut des services ---

Services Opérationnels

--- Incident ---

Clos avec actions de fond pour que l’incident ne se reproduise pas

Affected components

  • E-commerce technical platform : Back-Office merchant, Embedded Form, Redirected payment page (form HTTPS), Webservices

Monitoring | Nov 19, 2020 | 15:44 GMT+01:00

Début 9h30 19/11/2020
Service Up 10h15
Nouvelle perturbation 15h15 - Fin perturbation 15h40
Fin:

Impact :

Perturbation de l’ensemble des services de paiement ( Paiement en ligne / Back office marchant / Back Office Acquéreur)

Cause :

défaillance d’un site de production ( Site de Toulouse ) – En cours d’analyse

Actions finalisée

Bascule de l’ensemble des flux sur le site de production de Bordeaux ( 10h15 )
Remise en service du site de TOULOUSE (10h57 )


Statut des services

Service nominal

Open | Nov 19, 2020 | 15:29 GMT+01:00

Date :

Début 9h30 19/11/2020
Service Up 10h15
Nouvelle perturbation 15h15
Fin:

Impact :

Perturbation de l’ensemble des services de paiement ( Paiement en ligne / Back office marchant / Back Office Acquéreur)

Cause :

défaillance d’un site de production ( Site de Toulouse ) – En cours d’analyse

Actions finalisée

Bascule de l’ensemble des flux sur le site de production de Bordeaux ( 10h15 )
Remise en service du site de TOULOUSE (10h57 )


Statut des services

Perturbation majeure

Monitoring | Nov 19, 2020 | 10:57 GMT+01:00

Date :

Début 9h30 19/11/2020
Fin :

L'ensemble des services est désormais en mode nominal. ( Surveillance en cours )

Le rapport est en cours de rédaction.

Status Page powered by Admin Labs