IELO - Routeur d'accès injoignable, secteur Elbeuf (76) / Unreacheable access router, Elbeuf (76) – Détails de l'incident

# REASON FOR OUTAGE (RFO)
## Power Supply Failure — Elbeuf NRO Router

---

## 1. Incident Identification

**Incident reference** : #313184
**Start date/time** : 21:04 — 30/01/2026 (UTC+1)
**End date/time** : 22:19 — 30/01/2026 (UTC+1)
**Actual intervention duration** : 1 hour 15 minutes (OPEN / IN PROGRESS states)
**Total time on hold** : 0 hour 00 minute (no hold period)
**Total incident duration** : 1 hour 15 minutes
**Report date** : 03-02-2026

---

## 2. Nature of the Incident

Critical hardware failure: complete failure of the power supply unit (PSU) of the access router at the Elbeuf NRO, resulting in the total unavailability of the equipment and the interruption of the associated optical services. The incident is hardware-related and has no connection to any planned maintenance or configuration error.

---

## 3. Impact on End Users

The router unavailability caused the following impacts over the period 21:04 – 22:19:

**Affected equipment** : Access router at the Elbeuf NRO
**Type of impact** : Total unavailability of optical services served by this NRO
**Network connectivity** : Complete loss of IP and LLDP connectivity on all interfaces
**Impact duration** : 1 hour 15 minutes (21:04 to 22:19 UTC+1)
**Affected subscribers** : All subscribers connected to the Elbeuf NRO

---

## 4. Context and Conditions

The incident occurred outside any planned maintenance window, in the evening (21:04 UTC+1), with no prior warning or indication of hardware degradation. The router was operating normally until the incident was detected.

Initial remote diagnostic findings included:

- 1G management link exhibiting unstable behaviour (UP/DOWN cycling).
- SFP+ 10G link reported as DOWN despite an optical signal being emitted.
- Complete absence of received LLDP PDUs — indicating no active software processing.
- Overall behaviour consistent with a boot loop or hardware failure.

These symptoms led to the immediate dispatch of the on-call technician for an on-site intervention.

---

## 5. Root Cause

> **Confirmed root cause**: Complete failure of the power supply unit (PSU) of the Elbeuf NRO access router. The on-site diagnosis carried out at 22:10 conclusively established that the PSU was out of service (failed), preventing the router from booting correctly and causing all symptoms observed remotely.

---

## 6. Corrective Action and Resolution

**Primary action** : Physical replacement of the failed PSU with a spare unit.
**Post-intervention checks** : Verification of router IP reachability, restoration of all network interfaces, and confirmation of nominal equipment operation.
**Precautionary measure** : Deployment of a standby backup router left on site.
**Final outcome** : Services fully restored at 22:19 UTC+1. Router reachable, all interfaces UP, nominal operation confirmed.

---

## 7. Incident Responsibility

**Classification** : Operator infrastructure incident — hardware failure
**Responsibility** : Internal — ageing or intrinsic defect of the router PSU
**Customer responsibility** : None
**Third-party / partner responsibility** : None
**Datacenter involvement** : Not applicable

---

## 8. Chronological Summary of Events

**21:04** : DETECTION — Elbeuf NRO access router unreachable. Remote diagnosis: management copper link UP/DOWN, SFP+ 10G down (optical signal present), no LLDP PDUs received. Boot loop or hardware failure suspected.

**21:09** : ASSIGNMENT — On-call technician dispatched: departure for site confirmed with spare parts.

**21:23** : INVESTIGATION — ETA confirmed at 22:10. Router configuration backup transmitted to the technician as a precaution. Estimated travel time: 21:20 → 22:10.

**22:10** : INTERVENTION — Technician on site. On-site diagnosis confirmed: router PSU out of service (failed). Estimated repair time: 10 minutes.

**22:19** : RESOLUTION — PSU replacement completed. Post-reboot checks passed: router reachable, interfaces UP, services restored. Backup router deployed as a precautionary measure.

---

## 9. Conclusion

On 30 January 2026, at 21:04 (UTC+1), the sudden failure of the Elbeuf NRO access router's power supply caused a complete service outage across the area served by this NRO, affecting all connected subscribers for a duration of 1 hour 15 minutes. Thanks to the rapid response of the on-call technician, the failed PSU was replaced on site and services were fully restored at 22:19. A precautionary measure (standby backup router) was put in place to secure the site.

# REASON FOR OUTAGE (RFO)
## Panne alimentation — Routeur NRO Elbeuf

---

## 1. Informations d'identification de l'incident

**Référence incident** : #313184
**Date/heure de début** : 21:04 — 30/01/2026 (UTC+1)
**Date/heure de fin** : 22:19 — 30/01/2026 (UTC+1)
**Durée réelle d'intervention** : 1 heure 15 minutes (états OUVERT / EN COURS)
**Durée totale en pause** : 0 heure 00 minute (aucune mise en attente)
**Durée totale de l'incident** : 1 heure 15 minutes
**Date de rédaction** : 03-02-2026

---

## 2. Nature de l'incident

Panne matérielle critique : défaillance complète de l'alimentation électrique (PSU) du routeur d'accès du NRO d'Elbeuf, entraînant l'indisponibilité totale de l'équipement et l'interruption des services optiques associés. L'incident est de type matériel, sans lien avec une intervention planifiée ou une erreur de configuration.

---

## 3. Impact pour le client final

L'indisponibilité du routeur a entraîné les impacts suivants sur la période 21:04 – 22:19 :

**Équipement impacté** : Routeur d'accès du NRO d'Elbeuf
**Type d'impact** : Indisponibilité totale des services optiques desservis par ce NRO
**Connectivité réseau** : Perte de connectivité IP et LLDP sur toutes les interfaces
**Durée d'impact** : 1 heure 15 minutes (21:04 à 22:19 UTC+1)
**Périmètre abonnés** : Ensemble des abonnés raccordés sur le NRO d'Elbeuf

---

## 4. Contexte et conditions

L'incident est survenu en dehors de toute fenêtre de maintenance planifiée, en soirée (21h04 UTC+1), sans préavis ni indicateur préalable de dégradation matérielle. Le routeur était en production normale jusqu'à la détection de l'incident.

Les premiers éléments de diagnostic à distance ont mis en évidence :

- Lien de management 1G en comportement instable (UP/DOWN cyclique).
- Liaison SFP+ 10G signalé DOWN malgré la présence d'un signal optique émis.
- Absence totale de PDU LLDP reçus — indiquant l'absence de traitement logiciel actif.
- Comportement global évocateur d'un crash en boucle (boot loop) ou d'une défaillance matérielle.

Ces symptômes ont conduit à une mobilisation immédiate du technicien de permanence pour une intervention sur site.

---

## 5. Cause racine (Root Cause)

> **Cause racine confirmée** : Défaillance complète de l'unité d'alimentation électrique (PSU) du routeur d'accès du NRO d'Elbeuf. Le diagnostic terrain effectué à 22h10 a établi de façon certaine que l'alimentation était hors service (HS), empêchant le routeur de démarrer correctement et générant l'ensemble des symptômes observés à distance.

---

## 6. Action corrective et résolution

**Action principale** : Remplacement physique de l'alimentation défaillante par une unité de rechange.
**Vérifications post-intervention** : Contrôle de l'accessibilité IP du routeur, remontée de toutes les interfaces réseau, validation du fonctionnement nominal de l'équipement.
**Mesure conservatoire** : Déploiement d'un routeur de secours laissé en standby sur site.
**Résultat final** : Services pleinement restaurés à 22:19 UTC+1. Routeur joignable, toutes interfaces UP, comportement nominal confirmé.

---

## 7. Responsabilité de l'incident

**Qualification** : Incident infrastructure opérateur — défaillance matérielle
**Responsabilité** : Interne — vieillissement ou défaut intrinsèque du bloc PSU du routeur
**Responsabilité client** : Aucune
**Responsabilité tiers / partenaire** : Aucune
**Implication d'un datacenter** : Non applicable

---

## 8. Synthèse chronologique des événements

**21:04** : DÉTECTION — Routeur d'accès du NRO d'Elbeuf injoignable. Diagnostic à distance : lien 1G cuivre UP/DOWN, SFP+ 10G down (signal présent), aucun PDU LLDP. Hypothèse de crash en boucle ou panne hardware.

**21:09** : PRISE EN CHARGE — Mobilisation du technicien de permanence : confirmation du départ pour le site avec le matériel de rechange.

**21:23** : INVESTIGATION — ETA annoncé à 22:10. Transmission au technicien d'un backup de la configuration du routeur à titre préventif. Temps de trajet estimé : 21:20 → 22:10.

**22:10** : INTERVENTION — Arrivée sur site. Diagnostic terrain confirmé : alimentation du routeur hors service (HS). Temps de manipulation estimé à 10 minutes.

**22:19** : RÉSOLUTION — Remplacement de l'alimentation effectué. Checks post-reboot OK : routeur joignable, interfaces UP, services restaurés. Routeur de secours déployé en mesure conservatoire.

---

## 9. Conclusion

Le 30 janvier 2026, à 21h04 (UTC+1), la défaillance soudaine de l'alimentation du routeur d'accès du NRO d'Elbeuf a provoqué une interruption totale des services de la plaque desservie par ce NRO, affectant l'ensemble des abonnés raccordés sur le site pour une durée de 1 heure 15 minutes. Grâce à une mobilisation rapide du technicien de permanence, le remplacement de l'alimentation défaillante a été réalisé sur site et les services ont été pleinement restaurés à 22h19. Une mesure conservatoire (routeur de secours en standby) a été mise en place pour sécuriser le site.

L'incident est désormais terminé.

This incident has been resolved.

Notre technicien a remplacé un élément défectueux de l'équipement. Celui-ci est de nouveau joignable et fonctionnel.

---

Our field Engineer replaced a faulty component of the access router. It is now reacheable and working again.

Notre technicien sera sur site aux environs de 22h15 (heure de Paris).

---

Our field engineer should be on-site near 10:15pm (Paris time).