IELO - Historique des incidents

Rhône/Alples connaît une panne majeure

Remarque : Les incidents signalés sur cette interface ne concernent que les incidents génériques impactant les services de ielo.

Standard ielo - Opérationnel

Portail ielo - Opérationnel

Backbone - Opérationnel

Porte de collecte - Opérationnel

API - Opérationnel

Historique des incidents

01/08

Incident fibre Fecamp (76)
  • Résolu
    Résolu

    Les vérifications sont à présent terminées.

    L’ensemble de nos équipements a été rétabli et nos services sont de nouveau opérationnels.
    L’incident est désormais clos.
    Nous vous prions de nous excuser pour la gêne occasionnée.

    Cordialement,
    Support IELO



    The checks are now complete.


    All our equipment has been restored, and our services are operational again.
    The incident is now closed.
    We apologize for any inconvenience caused.

    Regards,
    Support IELO

  • Identifié
    Identifié

    Nos techniciens ont pu identifier la cause de cette coupure.

    Un défaut sur l’arrivée d’énergie a provoqué l’isolement du POP.

    Les réparations ont été effectuées, et des vérifications sur le POP sont en cours.

    Prochain point d’avancement : 13h

    Cordialement,
    Support IELO


    Our technicians have identified the cause of this outage.

    A power supply fault caused the POP to become isolated.

    Repairs have been completed, and checks on the POP are currently underway.

    Next update: 1:00 PM

    Regards,
    Support IELO

  • Mettre à jour
    Mettre à jour
    Bonjour, Une équipe est en route, avec une ETA estimée à 11h30. Un prochain point d’avancement sera communiqué à 12h00 (heure locale). Cordialement, Support IELO --- --- ### Hello, A team is on its way, with an ETA estimated at 09:30 UTC. A new progress update will be provided at 10:00 UTC. Regards, Support IELO
  • Détecté
    Détecté

    Bonjour,

    Un incident est actuellement en cours dans le secteur de Fécamp (76).
    Nous avons détecté l’isolement de l’un de nos POP à 9h30. Les investigations se poursuivent.

    Un nouveau point d’avancement sera communiqué à 11h00 (heure locale).

    Cordialement,
    Support IELO



    Hello,

    An incident is currently ongoing in the Fécamp area (76).
    We detected one of our POPs isolated at 07:30 UTC. Investigations are still ongoing.

    A new update will be provided at 09:00 UTC.

    Regards,
    Support IELO

01/07

WDM backbone - Rhône-Alpes area
  • Résolu
    Résolu

    Bonsoir,

    Les services sont stables depuis 19h32. Nous procédons à la clôture de cet incident.

    Cordialement,


    Good evening,

    The services have been stable since 7:32 PM. We are proceeding with the closure of this incident.

    Best regards,

  • Surveillé
    Surveillé

    L'incident est terminé, nos équipes ont observé une coupure suite à un câble contraint en chambre télécom, nous avons procédé aux réparations nécessaires,

    L'incident est désormais terminé, nous gardons le lien en monitoring

    ---

    The incident is now resolved. Our teams observed an outage caused by a damaged cable in the telecommunications room. We have carried out the necessary repairs.

    The incident is now resolved. We are continuing to monitor the connection.

  • Identifié
    Identifié

    Nos équipes terrain sont actuellement arrivées sur la zone de coupure, des investigations sont en cours afin de localiser précisément la coupure.

    Nous vous tiendrons informés dès que de nouveaux éléments seront disponibles




    Our field teams have now arrived at the site of the outage, and investigations are underway to determine the exact location of the outage.

    We will keep you informed as soon as new information becomes available.

  • Mettre à jour
    Mettre à jour

    Nos équipes techniques seront sur le site de la zone inspectée dans un délai estimé de 30 à 40 minutes, en fonction des conditions de circulation.


    Our technical teams are expected to arrive at the inspected site within 30 to 40 minutes, depending on traffic conditions.

  • Détecté
    Détecté

    Bonjour,

    Nous rencontrons actuellement une interruption de service sur notre backbone WDM.

    • ⏱ Identification de l’interruption : 15h38

    • 📢 Notification équipe terrain : 15h39

    • 📍 Localisation : région lyonnaise

    • ⏳ ETA : inconnu pour le moment

    Nos équipes sont mobilisées pour rétablir le service dans les meilleurs délais.
    Nous vous tiendrons informés dès que de nouveaux éléments seront disponibles (ETA/Diagnostic).


    INT version :
    Hello,

    We are currently experiencing a service interruption on our WDM backbone.

    • ⏱ Service interruption started: 13:38 UTC

    • 📢 VDR notification: 13:39 UTC

    • 📍 Location: Lyon area

    • 🛠 Handled by: our Regional Technical Center

    • ⏳ ETA: unknown at this time

    Our teams are actively working to restore services as quickly as possible.
    We will provide further updates as soon as new information becomes available (ETA/Diagnostic).

NRO injoignable - Paris 13
  • Résolu
    Résolu
    25 juillet 2025 – 10h15 (heure locale) Bonjour, Nos équipes techniques se sont rendues sur notre POP afin de confirmer un défaut d’alimentation électrique. Une coupure d’énergie totale sur les deux voies a été constatée sur site, impactant plusieurs opérateurs. En parallèle, l’hébergeur, préalablement notifié de la suspicion de défaut, a envoyé ses techniciens. Suite à leur intervention, l’alimentation électrique a été rétablie. Depuis, l’ensemble de nos équipements a été récupéré, et nos services sont de nouveau opérationnels. L’incident est désormais clos. Nous vous prions de nous excuser pour la gêne occasionnée. Cordialement, Support IELO --- 25 July 2025 – 08:15 UTC Hello, Our technical teams were dispatched to our POP to confirm a suspected power issue. A complete power outage on both feeds was confirmed on site, affecting multiple operators. In parallel, the hosting provider, previously informed of the suspected electrical issue, sent technicians to the site. Following their intervention, power has been fully restored. All of our equipment is now back online and services have resumed. This incident is now closed. We apologize for any inconvenience caused. Best regards, IELO Support
  • Détecté
    Détecté

    Un NRO du réseau d'accès IELO sur la zone Paris 13ème arrondissement est actuellement injoignable.
    Nos équipes sont sur zone à la recherche du point de coupure.

    ---

    An optical access network node is currently unreachable in Paris 13th district.
    Our team is currently searching the cut point.

Coupure liaison core WDM entre Marolles-Sur-Seine et Saint-Denis-lès-Sens
  • Postmortem
    Postmortem

    NFORMATIONS D’IDENTIFICATION DE L’INCIDENT

    Début d’incident : 03:44 08/07/2025 UTC+2

    Fin d’incident : 09:13 08/07/2025 UTC+2

    NATURE DE L’INCIDENT

    Rupture physique d’une fibre optique sur la dorsale WDM reliant Marolles-sur-Seine (77) à Saint-Denis-lès-Sens (89), entraînant une perte totale de signal sur un port 100 G d’un nœud WDM backbone.

    IMPACT POUR LE CLIENT FINAL

    Indisponibilité complète du trafic entre Marolles-sur-Seine, Montereau et Sens pendant 5 h 29.

    Isolement du POP intermédiaire de Montereau et perte de redondance entre les boucles Île-de-France et Bourgogne.

    Interruption de service sur les VLANs client exclusivement transmis sur ce chemin (jusqu’à 100 Gb/s cumulés).

    CONTEXTE ET CONDITIONS

    Le tronçon affecté est installé dans une tranchée partagée avec l’infrastructure de l’autoroutier. La rupture se situe au point de démarcation entre ses fourreaux et la gaine de notre réseau, dans un regard d’accès en accotement.

    CAUSE RACINE

    Sectionnement de la fibre par la faune (traces de morsures de rongeur constatées). Lors de la première ouverture du regard, la gaine de secours a aussi été arrachée, rompant le second brin et isolant complètement le POP intermédiaire.

    ACTION CORRECTIVE ET RÉSOLUTION

    Coordination immédiate avec le centre de contrôle de l’autoroutier pour un accès sécurisé.

    Ouverture et assainissement du regard : retrait des débris et pose temporaire de protections anti-rongeurs.

    Ré-épissurage des deux fibres coupées et remise en place du breakout.

    Tests OTDR et BER pour validation optique, puis rétablissement du port 100 G.

    Surveillance renforcée pendant 20 minutes avant passage en statut Monitoring.

    RESPONSABILITÉ DE L’INCIDENT

    Faune sauvage : cause première de la coupure.

    Exploitant autoroutier : maintenance de l’intégrité du regard.

    IELO : supervision et coordination des réparations.

    CHRONOLOGIE DES ÉVÉNEMENTS

    03:44 – Détection automatique : perte de signal, alarme critique.

    04:16 – Ouverture d’incident auprès de l’autoroutier ; demande d’accès urgente.

    04:36 – Confirmation de prise en charge ; équipe terrain dépêchée.

    06:12 – Arrivée sur site ; breakout endommagé et fibres sectionnées constatés.

    06:25 – Analyse OTDR : rupture localisée à 37,8 km du site de Sens.

    06:30 – Mise en place du chantier et sécurisation.

    06:35–07:13 – Ré-épissurage des deux brins et remise en conformité du breakout.

    07:13 – Fin des travaux physiques ; lancement des tests optiques.

    08:30 – Information envoyée aux clients impactés.

    09:13 – Tests validés ; liens opérationnels ; clôture technique de l’incident.

    09:33 – Passage en phase Monitoring (24 h).

    CONCLUSION

    Le 8 juillet 2025 à 03 h 44, une coupure fibre provoquée par la faune a interrompu la liaison WDM entre Marolles-sur-Seine et Saint-Denis-lès-Sens, isolant le POP de Montereau. La collaboration rapide entre IELO et l’exploitant autoroutier a permis de ré-épissurer et protéger les fibres ; le service a été rétabli à 09 h 13 après 5 h 29 d’indisponibilité, puis placé sous surveillance renforcée.

    ──────────────────────────────────────────────

    Core WDM Link Outage – Marolles-sur-Seine ↔ Saint-Denis-lès-Sens

    INCIDENT IDENTIFICATION

    Incident start: 03:44 08/07/2025 UTC+2

    Incident end: 09:13 08/07/2025 UTC+2

    NATURE OF THE INCIDENT

    Physical break of an optical fibre on the core WDM backbone connecting Marolles-sur-Seine (77) to Saint-Denis-lès-Sens (89), leading to total signal loss on a 100 G port of a backbone WDM node.

    IMPACT ON END CUSTOMERS

    Complete service outage on the Marolles-sur-Seine – Montereau – Sens path for 5 h 29.

    Isolation of the intermediate Montereau PoP and loss of redundancy between the Île-de-France and Burgundy rings.

    Traffic interruption for all customer VLANs carried exclusively on this route (up to 100 Gb/s aggregate).

    CONTEXT AND CONDITIONS

    The affected span is installed in a trench shared with the motorway manager’s infrastructure. The break occurred at the demarcation point between its ducts and the operator’s own conduit, inside a roadside hand-hole.

    ROOT CAUSE

    Fibre cut by wildlife (rodent bite marks observed). During the first opening of the hand-hole the spare sheath was also torn, severing the second fibre and fully isolating the Montereau PoP.

    CORRECTIVE ACTION AND RESOLUTION

    Immediate coordination with the motorway manager’s control centre to secure access.

    Hand-hole cleaning: debris removal and temporary anti-rodent protection.

    Re-splicing of the two severed fibres and breakout re-installation.

    OTDR and BER tests to validate optical performance, followed by restoration of the 100 G port.

    Enhanced monitoring for 20 minutes, then transition to Monitoring status.

    INCIDENT RESPONSIBILITY

    Wildlife: primary cause of the cut.

    Motorway manager: upkeep of hand-hole integrity.

    IELO: supervision and coordination of repair works.

    TIMELINE OF EVENTS

    03:44 – Automatic detection: signal loss, critical alarm triggered.

    04:16 – Incident opened with the motorway manager; urgent access requested.

    04:36 – Confirmation from the motorway manager; field team dispatched.

    06:12 – On-site arrival; damaged breakout and severed fibres observed.

    06:25 – OTDR analysis: break located 37.8 km from the Sens site.

    06:30 – Worksite set-up and securing.

    06:35–07:13 – Re-splicing of both fibres and breakout restoration.

    07:13 – Physical works completed; optical tests initiated.

    08:30 – Information notice sent to impacted customers.

    09:13 – Tests validated; links operational; technical closure of incident.

    09:33 – Transition to Monitoring phase (24 h).

    CONCLUSION

    On 8 July 2025 at 03:44, a wildlife-induced fibre cut disrupted the WDM link between Marolles-sur-Seine and Saint-Denis-lès-Sens, isolating the Montereau PoP. Swift collaboration between IELO and the motorway manager enabled re-splicing, protection and service restoration by 09:13, after 5 h 29 of unavailability, followed by enhanced monitoring.

  • Résolu
    Résolu
    ## **Informations d’identification de l’incident** **Début Incident :** 03 :44 08/07/2025 UTC+2 **Fin d’incident :** 09 :13 08/07/2025 UTC+2 ## **Nature de l’incident** Rupture physique d’une fibre optique sur la dorsale WDM reliant Marolles-sur-Seine (77) à Saint-Denis-lès-Sens (89), provoquant la perte totale de signal sur un **port 100 G** d’un **nœud WDM backbone**. --- ## **Impact pour le client final** * **Indisponibilité complète** du trafic entre Marolles-sur-Seine, Montereau et Sens pendant **5 h 29**. * Isolement du **POP intermédiaire de Montereau** et perte de redondance entre les boucles Île-de-France et Bourgogne. * Interruption de service sur les VLANs client exclusivement transmis sur ce chemin (jusqu’à **100 Gb/s** cumulés). --- ## **Contexte et conditions** Le tronçon affecté est posé en tranchée partagée avec l’infrastructure autoroutière. La rupture se situe au point de démarcation entre les fourreaux de l’autoroutier et la gaine de notre réseau, dans un regard d’accès en accotement. --- ## **Cause racine (Root Cause)** Sectionnement de la fibre par la faune (traces de morsure de rongeur constatées). Lors de la première ouverture du regard, la gaine de secours a également été arrachée, rompant le second brin et isolant complètement le POP intermédiaire. --- ## **Action corrective et résolution** 1. **Coordination immédiate** avec le PC autoroutier pour un accès sécurisé. 2. **Ouverture et assainissement** du regard : retrait des débris et pose temporaire de protections anti-rongeurs. 3. **Ré-épissurage** des deux fibres coupées et remise en place du breakout. 4. **Tests OTDR et BER** pour validation optique, suivis du rétablissement du port 100 G. 5. **Surveillance renforcée** pendant 20 minutes, puis passage en statut _Monitoring_. --- ## **Responsabilité de l’incident** * **Faune sauvage** : cause première de la coupure. * **Exploitant autoroutier** : maintien de l’intégrité du regard. * **IELO** : supervision et coordination des réparations. --- ## **Synthèse chronologique des événements** | **Heure (UTC+2)** | **Événement** | | ------------------- | ---------------------------------------------------------------------------- | | **03 :44** | Détection automatique – perte de signal, alarme critique. | | 04 :16 | Ouverture d’incident auprès de l’autoroutier, demande d’accès urgente. | | 04 :36 | Confirmation de prise en charge par APRR – attente de l’équipe terrain. | | 06 :12 | Arrivée sur site ; constat d’un breakout endommagé et fibres sectionnées. | | 06 :25 | Analyse OTDR : rupture localisée à 37,8 km du site de Sens. | | 06 :30 | Installation du chantier et sécurisation. | | **06 :35 – 07 :13** | Ré-épissurage des deux brins et remise en conformité du breakout. | | **07 :13** | Fin des travaux physiques – lancement des tests optiques. | | 08 :30 | Communication d’information envoyée aux clients impactés. | | **09 :13** | Validation des tests : liens opérationnels, clôture technique de l’incident. | | 09 :33 | Passage en phase _Monitoring_ (24 h). | --- ## **Conclusion** Le 8 juillet 2025 à 03 h 44, une coupure fibre provoquée par la faune a interrompu la liaison WDM entre Marolles-sur-Seine et Saint-Denis-lès-Sens, isolant le POP de Montereau. Grâce à la collaboration rapide entre IELO et l’exploitant autoroutier, les fibres ont été ré-épissurées et protégées ; le service a été rétabli à 09 h 13 après 5 h 29 d’indisponibilité, puis placé sous surveillance renforcée. --- ## **Incident Identification** **Incident start :** 03 :44 08/07/2025 UTC+2 **Incident end :** 09 :13 08/07/2025 UTC+2 ## **Nature of the Incident** Physical break of an optical fibre on the core WDM backbone connecting Marolles-sur-Seine (77) to Saint-Denis-lès-Sens (89), causing total loss of signal on a **100 G port** of a **backbone WDM node**. --- ## **Impact on End Customers** * **Complete service outage** on the Marolles-sur-Seine ↔ Montereau ↔ Sens path for **5 h 29**. * Isolation of the **intermediate Montereau PoP** and loss of redundancy between the Île-de-France and Burgundy rings. * Traffic interruption for all customer VLANs carried exclusively on this route (up to **100 Gb/s** aggregated). --- ## **Context and Conditions** The affected span is installed in a trench shared with the motorway infrastructure. The break occurred at the demarcation point between Motorway operator ducts and the operator’s own conduit, inside a roadside hand-hole. --- ## **Root Cause** Fibre cut by wildlife (rodent bite marks observed). During the first opening of the hand-hole the spare sheath was also torn, severing the second fibre and completely isolating the Montereau PoP. --- ## **Corrective Action and Resolution** 1. **Immediate coordination** with Motorway operator control centre to secure access. 2. **Hand-hole cleaning**: debris removal and temporary anti-rodent protection. 3. **Re-splicing** of the two severed fibres and re-installation of the breakout. 4. **OTDR and BER tests** to validate optical performance, followed by restoration of the 100 G port. 5. **Enhanced monitoring** for 20 minutes, then transition to _Monitoring_ status. --- ## **Incident Responsibility** * **Wildlife**: primary cause of the cut. * **Motorway operator**: upkeep of hand-hole integrity. * **IELO**: supervision and coordination of repair works. --- ## **Timeline of Events** | **Time (UTC+2)** | **Event** | | ----------------- | ------------------------------------------------------------------ | | **03:44** | Automatic detection – signal loss, critical alarm triggered. | | 04:16 | Ticket opened with Motorway operator, urgent access requested. | | 04:36 | Motorway operator confirmation – field team dispatched. | | 06:12 | On-site arrival; damaged breakout and severed fibres observed. | | 06:25 | OTDR analysis: break located 37.8 km from Sens site. | | 06:30 | Worksite set-up and securing. | | **06:35 – 07:13** | Re-splicing of both fibres and breakout restoration. | | **07:13** | Physical works completed – optical tests initiated. | | 08:30 | Information notice sent to impacted customers. | | **09:13** | Tests validated: links operational, technical closure of incident. | | 09:33 | Transition to _Monitoring_ phase (24 h). | --- ## **Conclusion** On 8 July 2025 at 03:44, a wildlife-induced fibre cut disrupted the WDM link between Marolles-sur-Seine and Saint-Denis-lès-Sens, isolating the Montereau PoP. Swift collaboration between IELO and the motorway operator enabled re-splicing, protection and service restoration by 09:13, after 5 h 29 of unavailability, followed by reinforced monitoring.
  • Surveillé
    Surveillé

    Date : 8 juillet 2025
    Heure de détection : 03h44 (heure locale)
    Statut : Monitoring
    Durée : ~5h30

    Une alerte critique a été détectée sur notre réseau le 8 juillet à 03h44. La perte de liaison a été confirmée à cette heure.

    L’analyse par réflectométrie a localisé la rupture de fibre à 37,8 km du site de Sens (89) en direction de Montereau (77), précisément à la jonction entre les infrastructures autoroutières et celles de IELO. Cette configuration a nécessité une coordination immédiate avec l’opérateur autoroutier.

    Chronologie des actions :

    • 04h16 : Déclaration de l’incident à l’opérateur autoroutier et demande d’intervention.

    • 04h36 : Prise en compte confirmée par l’opérateur.

    • 06h12 : Inspection sur site : dégradation du cable de fibre attribuée à un rongeur. Lors de l’intervention, la seconde adduction a également été impactée. Une seconde équipe a été mobilisée en anticipation.

    • 09h13 : Liaison réparée par les équipes autoroutières. Incident clôturé.

    Nous restons mobilisés pour surveiller la stabilité de la liaison et éviter toute récidive.



    English :

    Date: July 8, 2025
    Detection Time: 01:44 UTC
    Status: Monitoring
    Duration: ~5h30

    A critical alert was detected on our network on July 8 at 01:44 UTC. The fiber link was confirmed down at that time.

    Optical reflectometry identified a cut at 37.8 km from the Sens site (89) towards Montereau (77), right at the boundary between highway infrastructure and IELO’s private network. Coordination with the highway operator was therefore required.

    Timeline of actions:

    • 02:16 UTC: Incident reported to the highway operator, intervention requested.

    • 02:36 UTC: Acknowledgement received from the highway operator.

    • 04:12 UTC: On-site diagnosis: fiber breakout damage attributed to rodent activity. During the operation, the second duct was also compromised. A backup team was dispatched proactively.

    • 07:13 UTC: Repair completed by the highway teams. Incident resolved.

    We continue to monitor the link for stability and to prevent recurrence.

  • Identifié
    Identifié

    Bonjour,

    Nous venons de relancer le fournisseur autoroutier ; l'intervention est toujours en cours.
    Nous reviendrons vers vous dès que nous aurons un ETR.

    Cordialement,

    ---

    Hello,

    We have followed up with the highway provider; the intervention is still ongoing.
    We will get back to you as soon as we have an ETA.

    Best regards,

  • Détecté
    Détecté

    Nous subissons actuellement une coupure sur notre réseau WDM entre Marolles-Sur-Seine et Saint-Denis-lès-Sens.
    La zone approximative de coupure a été localisée par tir d'OTDR en zone autoroutière. Le mainteneur autoroutier est prévenu et une équipe se rend sur zone pour affiner la localisation et effectuer les réparations.

    ---

    We are currently facing a fiber cut on our WDM network between Marolles-Sur-Seine and Saint-Denis-lès-Sens.
    The cut zone has been identified by OTDR shot to be in motorway zone. Motorway maintainer has been called, and a field team is being sent on site to repair the cut.

01/07 à 01/09

Suivant