IELO - Historique des incidents

Tous les systèmes sont opérationnels

Remarque : Les incidents signalés sur cette interface ne concernent que les incidents génériques impactant les services de ielo.

Standard ielo - Opérationnel

Portail ielo - Opérationnel

Backbone - Opérationnel

Porte de collecte - Opérationnel

API - Opérationnel

Historique des incidents

01/03

Aucun incident signalé ce mois-ci

01/02

Incident Générique région parisienne
  • Résolu
    Résolu

    Bonjour,

    Nous avons le plaisir de vous informer que l'incident est désormais résolu. Nos équipes ont achevé les réparations et l'intégralité des liaisons impactées sont à nouveau opérationnelles.

    Si vous constatez que votre lien reste coupé, nous vous remercions de bien vouloir nous le signaler via la plateforme IELO.

    Cordialement,

    -----

    Hello,

    We are pleased to inform you that the incident has now been resolved. Our teams have completed the repairs and all affected connections are back online.

    If you notice that your link is still down, please let us know via the IELO platform.

    Best regards,

  • Mettre à jour
    Mettre à jour

    La majorité des liaisons a déjà été rétablie. Les liens restants sont en cours de finalisation.

    Nos équipes travaillent activement afin de restaurer vos services dans les plus brefs délais.

    Cordialement,

    L'équipe Support IELO


    Most services have already been restored. The remaining links are currently being finalized.

    Our teams are working hard to restore your services as quickly as possible.

    Best regards,

    The IELO Support Team

  • Mettre à jour
    Mettre à jour

    L'intervention suit son cours. Nous reviendrons vers vous pour un nouvel update dans une heure.

    Cordialement,

    L'équipe Support IELO


    The intervention is ongoing. We will get back to you with another update within an hour.

    Best regards,

    The IELO Support Team

  • Mettre à jour
    Mettre à jour

    Nos équipes débutent les soudures sur les fibres.

    ---

    Our field team is beginning to splice the fibers.

  • Mettre à jour
    Mettre à jour

    Bonjour,

    Le tirage est toujours en cours.

    ---

    Hello,

    Cable pulling is still ongoing.

  • Mettre à jour
    Mettre à jour

    Bonsoir,

    Le câble est malheureusement endommagé.
    Le tirage d’un nouveau câble est donc indispensable.

    Notre équipe terrain est actuellement en train d’effectuer le repérage pour le passage du nouveau câble.

    Cordialement,


    Good evening,

    Unfortunately, the cable is damaged.
    Installing a new cable is therefore necessary.

    Our field team is currently carrying out the site survey to identify the route for the new cable.

    Kind regards,

  • Identifié
    Identifié

    Bonsoir,

    La coupure de la fibre optique a été causée par l’activité de rongeurs au niveau d’une case d’adduction, entraînant des dommages physiques au câble.
    Notre équipe terrain évalue actuellement la situation afin de déterminer si un nouveau tirage de câble sera nécessaire

    Cordialement


    Hi,

    The fiber optic cut was caused by rodent activity at a box, resulting in physical damage to the cable.
    Our field team is currently assessing the situation to determine whether a new cable pull will be necessary

    Best regards


  • Mettre à jour
    Mettre à jour

    Bonsoir,

    ETA: 01h30


    Cordialement


    Hello


    ETA: 1:30 AM

    Best regards

  • Détecté
    Détecté

    Bonsoir,

    Un incident générique est actuellement en cours en région parisienne et impacte votre service.

    Nos équipes ont été mobilisées afin de résoudre le problème dans les meilleurs délais.

    Prochaine mise à jour : 01h00.

    Cordialement,


    Good evening,

    A generic incident is currently ongoing in the Paris region and is impacting your service.

    Our teams have been mobilized to resolve the issue as quickly as possible.

    Next update: 01:00 AM

    Kind regards,

01/01

Routeur d'accès injoignable, secteur Elbeuf (76) / Unreacheable access router, Elbeuf (76)
  • Mettre à jour
    Mettre à jour
    # REASON FOR OUTAGE (RFO)
    ## Power Supply Failure — Elbeuf NRO Router
    
    ---
    
    ## 1. Incident Identification
    
    **Incident reference** : #313184
    **Start date/time** : 21:04  30/01/2026 (UTC+1)
    **End date/time** : 22:19  30/01/2026 (UTC+1)
    **Actual intervention duration** : 1 hour 15 minutes (OPEN / IN PROGRESS states)
    **Total time on hold** : 0 hour 00 minute (no hold period)
    **Total incident duration** : 1 hour 15 minutes
    **Report date** : 03-02-2026
    
    ---
    
    ## 2. Nature of the Incident
    
    Critical hardware failure: complete failure of the power supply unit (PSU) of the access router at the Elbeuf NRO, resulting in the total unavailability of the equipment and the interruption of the associated optical services. The incident is hardware-related and has no connection to any planned maintenance or configuration error.
    
    ---
    
    ## 3. Impact on End Users
    
    The router unavailability caused the following impacts over the period 21:04  22:19:
    
    **Affected equipment** : Access router at the Elbeuf NRO
    **Type of impact** : Total unavailability of optical services served by this NRO
    **Network connectivity** : Complete loss of IP and LLDP connectivity on all interfaces
    **Impact duration** : 1 hour 15 minutes (21:04 to 22:19 UTC+1)
    **Affected subscribers** : All subscribers connected to the Elbeuf NRO
    
    ---
    
    ## 4. Context and Conditions
    
    The incident occurred outside any planned maintenance window, in the evening (21:04 UTC+1), with no prior warning or indication of hardware degradation. The router was operating normally until the incident was detected.
    
    Initial remote diagnostic findings included:
    
    - 1G management link exhibiting unstable behaviour (UP/DOWN cycling).
    - SFP+ 10G link reported as DOWN despite an optical signal being emitted.
    - Complete absence of received LLDP PDUs  indicating no active software processing.
    - Overall behaviour consistent with a boot loop or hardware failure.
    
    These symptoms led to the immediate dispatch of the on-call technician for an on-site intervention.
    
    ---
    
    ## 5. Root Cause
    
    > **Confirmed root cause**: Complete failure of the power supply unit (PSU) of the Elbeuf NRO access router. The on-site diagnosis carried out at 22:10 conclusively established that the PSU was out of service (failed), preventing the router from booting correctly and causing all symptoms observed remotely.
    
    ---
    
    ## 6. Corrective Action and Resolution
    
    **Primary action** : Physical replacement of the failed PSU with a spare unit.
    **Post-intervention checks** : Verification of router IP reachability, restoration of all network interfaces, and confirmation of nominal equipment operation.
    **Precautionary measure** : Deployment of a standby backup router left on site.
    **Final outcome** : Services fully restored at 22:19 UTC+1. Router reachable, all interfaces UP, nominal operation confirmed.
    
    ---
    
    ## 7. Incident Responsibility
    
    **Classification** : Operator infrastructure incident  hardware failure
    **Responsibility** : Internal  ageing or intrinsic defect of the router PSU
    **Customer responsibility** : None
    **Third-party / partner responsibility** : None
    **Datacenter involvement** : Not applicable
    
    ---
    
    ## 8. Chronological Summary of Events
    
    **21:04** : DETECTION  Elbeuf NRO access router unreachable. Remote diagnosis: management copper link UP/DOWN, SFP+ 10G down (optical signal present), no LLDP PDUs received. Boot loop or hardware failure suspected.
    
    **21:09** : ASSIGNMENT  On-call technician dispatched: departure for site confirmed with spare parts.
    
    **21:23** : INVESTIGATION  ETA confirmed at 22:10. Router configuration backup transmitted to the technician as a precaution. Estimated travel time: 21:20  22:10.
    
    **22:10** : INTERVENTION  Technician on site. On-site diagnosis confirmed: router PSU out of service (failed). Estimated repair time: 10 minutes.
    
    **22:19** : RESOLUTION  PSU replacement completed. Post-reboot checks passed: router reachable, interfaces UP, services restored. Backup router deployed as a precautionary measure.
    
    ---
    
    ## 9. Conclusion
    
    On 30 January 2026, at 21:04 (UTC+1), the sudden failure of the Elbeuf NRO access router's power supply caused a complete service outage across the area served by this NRO, affecting all connected subscribers for a duration of 1 hour 15 minutes. Thanks to the rapid response of the on-call technician, the failed PSU was replaced on site and services were fully restored at 22:19. A precautionary measure (standby backup router) was put in place to secure the site.
  • Postmortem
    Postmortem
    # REASON FOR OUTAGE (RFO)
    ## Panne alimentation — Routeur NRO Elbeuf
    
    ---
    
    ## 1. Informations d'identification de l'incident
    
    **Référence incident** : #313184
    **Date/heure de début** : 21:04  30/01/2026 (UTC+1)
    **Date/heure de fin** : 22:19  30/01/2026 (UTC+1)
    **Durée réelle d'intervention** : 1 heure 15 minutes (états OUVERT / EN COURS)
    **Durée totale en pause** : 0 heure 00 minute (aucune mise en attente)
    **Durée totale de l'incident** : 1 heure 15 minutes
    **Date de rédaction** : 03-02-2026
    
    ---
    
    ## 2. Nature de l'incident
    
    Panne matérielle critique : défaillance complète de l'alimentation électrique (PSU) du routeur d'accès du NRO d'Elbeuf, entraînant l'indisponibilité totale de l'équipement et l'interruption des services optiques associés. L'incident est de type matériel, sans lien avec une intervention planifiée ou une erreur de configuration.
    
    ---
    
    ## 3. Impact pour le client final
    
    L'indisponibilité du routeur a entraîné les impacts suivants sur la période 21:04  22:19 :
    
    **Équipement impacté** : Routeur d'accès du NRO d'Elbeuf
    **Type d'impact** : Indisponibilité totale des services optiques desservis par ce NRO
    **Connectivité réseau** : Perte de connectivité IP et LLDP sur toutes les interfaces
    **Durée d'impact** : 1 heure 15 minutes (21:04 à 22:19 UTC+1)
    **Périmètre abonnés** : Ensemble des abonnés raccordés sur le NRO d'Elbeuf
    
    ---
    
    ## 4. Contexte et conditions
    
    L'incident est survenu en dehors de toute fenêtre de maintenance planifiée, en soirée (21h04 UTC+1), sans préavis ni indicateur préalable de dégradation matérielle. Le routeur était en production normale jusqu'à la détection de l'incident.
    
    Les premiers éléments de diagnostic à distance ont mis en évidence :
    
    - Lien de management 1G en comportement instable (UP/DOWN cyclique).
    - Liaison SFP+ 10G signalé DOWN malgré la présence d'un signal optique émis.
    - Absence totale de PDU LLDP reçus  indiquant l'absence de traitement logiciel actif.
    - Comportement global évocateur d'un crash en boucle (boot loop) ou d'une défaillance matérielle.
    
    Ces symptômes ont conduit à une mobilisation immédiate du technicien de permanence pour une intervention sur site.
    
    ---
    
    ## 5. Cause racine (Root Cause)
    
    > **Cause racine confirmée** : Défaillance complète de l'unité d'alimentation électrique (PSU) du routeur d'accès du NRO d'Elbeuf. Le diagnostic terrain effectué à 22h10 a établi de façon certaine que l'alimentation était hors service (HS), empêchant le routeur de démarrer correctement et générant l'ensemble des symptômes observés à distance.
    
    ---
    
    ## 6. Action corrective et résolution
    
    **Action principale** : Remplacement physique de l'alimentation défaillante par une unité de rechange.
    **Vérifications post-intervention** : Contrôle de l'accessibilité IP du routeur, remontée de toutes les interfaces réseau, validation du fonctionnement nominal de l'équipement.
    **Mesure conservatoire** : Déploiement d'un routeur de secours laissé en standby sur site.
    **Résultat final** : Services pleinement restaurés à 22:19 UTC+1. Routeur joignable, toutes interfaces UP, comportement nominal confirmé.
    
    ---
    
    ## 7. Responsabilité de l'incident
    
    **Qualification** : Incident infrastructure opérateur  défaillance matérielle
    **Responsabilité** : Interne  vieillissement ou défaut intrinsèque du bloc PSU du routeur
    **Responsabilité client** : Aucune
    **Responsabilité tiers / partenaire** : Aucune
    **Implication d'un datacenter** : Non applicable
    
    ---
    
    ## 8. Synthèse chronologique des événements
    
    **21:04** : DÉTECTION  Routeur d'accès du NRO d'Elbeuf injoignable. Diagnostic à distance : lien 1G cuivre UP/DOWN, SFP+ 10G down (signal présent), aucun PDU LLDP. Hypothèse de crash en boucle ou panne hardware.
    
    **21:09** : PRISE EN CHARGE  Mobilisation du technicien de permanence : confirmation du départ pour le site avec le matériel de rechange.
    
    **21:23** : INVESTIGATION  ETA annoncé à 22:10. Transmission au technicien d'un backup de la configuration du routeur à titre préventif. Temps de trajet estimé : 21:20  22:10.
    
    **22:10** : INTERVENTION  Arrivée sur site. Diagnostic terrain confirmé : alimentation du routeur hors service (HS). Temps de manipulation estimé à 10 minutes.
    
    **22:19** : RÉSOLUTION  Remplacement de l'alimentation effectué. Checks post-reboot OK : routeur joignable, interfaces UP, services restaurés. Routeur de secours déployé en mesure conservatoire.
    
    ---
    
    ## 9. Conclusion
    
    Le 30 janvier 2026, à 21h04 (UTC+1), la défaillance soudaine de l'alimentation du routeur d'accès du NRO d'Elbeuf a provoqué une interruption totale des services de la plaque desservie par ce NRO, affectant l'ensemble des abonnés raccordés sur le site pour une durée de 1 heure 15 minutes. Grâce à une mobilisation rapide du technicien de permanence, le remplacement de l'alimentation défaillante a été réalisé sur site et les services ont été pleinement restaurés à 22h19. Une mesure conservatoire (routeur de secours en standby) a été mise en place pour sécuriser le site.
  • Résolu
    Résolu

    L'incident est désormais terminé.


    This incident has been resolved.

  • Surveillé
    Surveillé

    Notre technicien a remplacé un élément défectueux de l'équipement. Celui-ci est de nouveau joignable et fonctionnel.

    ---

    Our field Engineer replaced a faulty component of the access router. It is now reacheable and working again.

  • Mettre à jour
    Mettre à jour

    Notre technicien sera sur site aux environs de 22h15 (heure de Paris).

    ---

    Our field engineer should be on-site near 10:15pm (Paris time).

  • Détecté
    Détecté

    Notre supervision détecte un routeur d'accès injoignable sur le secteur d'Elbeuf (76). Nos premières investigations à distance semblent indiquer un crash de l'équipement ou un problème matériel sur celui-ci.

    Un technicien est actuellement en route vers le NRO concerné.

    ---

    Our monitoring detected an unreacheable access router in Elbeuf (76). Our preliminary remote findings seem to indicate a crash or an hardware issue with the device.

    A field engineer is currently on its way to the access site.

Incident majeur dans le département de l'Essonne (91)
  • Résolu
    Résolu

    Bonjour,

    Suite à notre intervention, nous avons pu mettre en place une solution de contournement.
    Cette action a permis le rétablissement des services à 22h57 (heure locale). L’incident est désormais clos.

    Si vous rencontrez toutefois encore une coupure, nous vous invitons à ouvrir un nouveau ticket d’incident ou à nous en informer via votre ticket existant.

    Cordialement
    Support Ielo



    Hello,

    Following our intervention, a workaround solution has been implemented.
    This action allowed services to be restored at 21:57 UTC, and the incident is now resolved.

    If you are still experiencing any service disruption, please open a new incident ticket or notify us via your existing ticket.

    Regards
    Support Ielo

  • Identifié
    Identifié

    Les échanges avec nos intervenants ont permis de confirmer que le câble optique est impacté en plusieurs points sur le tronçon concerné.

    Les premières investigations indiquent que ces dégradations sont consécutives à des travaux récents de tirage de câble réalisés ce jour par un opérateur tiers, ayant entraîné des contraintes mécaniques importantes sur l’infrastructure existante.

    Actions en cours

    – Plan A (prioritaire)
    Les équipes techniques étudient actuellement une solution de contournement et de sécurisation des fibres encore exploitables, comprenant :
    - Vérification et qualification des fibres optiques
    - Bascule des services sur des fibres en bon état
    - Réalisation des opérations de soudure nécessaires

    Cette option vise à rétablir les services dans les meilleurs délais tout en limitant l’impact des travaux à venir.

    – Plan alternatif:
    En cas d’impossibilité de stabiliser la situation via le plan A, une remise en état plus lourde sera engagée, impliquant le retrait et le remplacement de la portion de câble endommagée.
    Cette solution reste volontairement différée, dans la mesure où de nouvelles interventions sont prévues sur la zone dans les prochains jours, et pourraient à nouveau exposer l’infrastructure à des risques similaires.

    Prochaines étapes

    Poursuite des tests et opérations terrain, Suivi rapproché avec les équipes d’infrastructure,
    Nouveau point de situation communiqué dès évolution significative.

    ______

    English version:

    Discussions with our field partners have confirmed that the optical fiber cable is impacted at multiple points along the affected section.
    Initial investigations indicate that these damages are the result of recent cable pulling works carried out today by a third operator, which caused significant mechanical stress on the existing infrastructure.


    Ongoing Actions – Plan A (Priority)

    Technical teams are currently working on a rerouting and stabilization strategy using the remaining usable fibers, including:

    • Verification and qualification of optical fibers,

    • Migration of services onto fibers in good condition,

    • Completion of the required splicing operations.

    This approach aims to restore services as quickly as possible while minimizing exposure to further planned works.


    Alternative Plan

    If the situation cannot be stabilized through Plan A, a more extensive remediation will be initiated, involving:

    • Removal and replacement of the damaged cable section.

    This option is intentionally deferred, as additional works are scheduled in the area in the coming days, which could again expose the infrastructure to similar risks.


    Next Steps

    Continuation of field tests and on-site operations,

    • Close coordination with infrastructure teams,

    • A new status update will be shared as soon as there is a significant development.

  • Détecté
    Détecté

    Un incident est en cours depuis 9h01 ce matin.

    Nos équipes sont déjà sur place.

    Une coupure est due à un chantier dans le sud de l'Essonne.

    Nous travaillons activement pour rétablir vos liens dans les meilleurs délais.

    Prochaine communication : 15h30

    ETA : non défini

    L'équipe Support IELO


    A major outage is ongoing since 9:00am.

    Our field team are already on site.

    Service interruption is due to construction work in southern Essonne.

    We are actively working to restore your connections as soon as possible.

    Next update: 3:30 p.m.

    ETA : not defined yet

    IELO Support Team

Incident Backbone – Île-de-France
  • Résolu
    Résolu

    Bonjour,

    La maintenance prévue la nuit dernière a été réalisée. L'incident est désormais clos.

    ---

    Hello,

    Last night planned work has been done. Incident is over.

  • Surveillé
    Surveillé

    Bonjour,

    L’intervention est désormais terminée et les services ont été rétablis à 15h06 (heure locale).

    Nous maintenons le matériel sous surveillance afin de nous assurer de la stabilité du service.

    Une maintenance sans impact est prévue ce soir afin de finaliser les réparations. Une communication de prévenance vous sera transmise prochainement.

    Une nouvelle communication vous sera fournie à la fin de la maintenance.

    Cordialement

    Support Ielo


    Hello,

    The intervention has been completed and services were restored at 14:06 UTC.

    We are continuously monitoring the hardware to ensure service stability.

    A non-impacting maintenance is scheduled for later today to finalize the repairs. A maintenance notification will be sent shortly.

    A new update will be provided at the end of the maintenance.

    Regards

    Support Ielo

  • Mettre à jour
    Mettre à jour

    Bonjour,

    Le remplacement du matériel est en cours de finalisation.
    La nouvelle estimation de rétablissement (ETR) est fixée à 14h30 (heure locale).

    Nous reviendrons vers vous dès que le remplacement sera terminé.

    Cordialement
    Support Ielo



    Hello,

    The hardware replacement is currently being finalized.
    The updated estimated time of restoration (ETR) is 13:30 UTC.

    We will get back to you as soon as the replacement is completed.

    Regards
    Support Ielo

  • Mettre à jour
    Mettre à jour

    Bonjour,

    Nous rencontrons actuellement un problème matériel lié à l’environnement. Nos équipes sont sur site afin de réaliser l’état des lieux et prévoient un plan de remise en fonctionnement du matériel.

    Un équipement de remplacement est en route, avec une estimation de rétablissement à 14h (heure locale).

    Nous vous tiendrons informés dès que possible de la progression de l’intervention.

    La prochaine communication est prévue à 14h (heure locale).

    Cordialement

    Support Ielo


    Hello,

    We are currently experiencing a hardware issue related to environmental conditions. Our teams are on site to assess the situation and are preparing a plan to restore the equipment.

    A replacement unit is on its way, with an estimated restoration by 13:00 UTC.

    We will keep you informed of the progress of the intervention as soon as possible.

    The next update is scheduled for 13:00 UTC.

    Regards

    Support Ielo

  • Identifié
    Identifié

    Bonjour,

    Nos intervenants sont sur site et ont démarré les investigations afin d’identifier l’origine de l’incident.
    La prochaine communication est prévue à 10h45 (heure locale), ou plus tôt en cas de nouvelles informations.

    Cordialement
    Support Ielo


    Hello,

    Our field engineers are on site and have started the investigations to identify the root cause of the incident.
    The next update is scheduled for 09:45 UTC, or earlier should new information become available.

    Regards
    Support Ielo

  • Mettre à jour
    Mettre à jour

    Bonjour,

    Notre équipe technique sera présente sur site à 09h30 (heure locale) afin de poursuivre les investigations.
    La prochaine communication est prévue à 09h45 (heure locale).

    Cordialement
    Support Ielo



    Hello,

    Our technical team will be on site at 08:30 UTC to continue the investigations.
    The next update is scheduled for 08:45 UTC.

    Regards
    Support Ielo

  • Détecté
    Détecté

    Incident en cours sur le backbone en Île-de-France.
    Nos équipes sont en route pour investigation et diagnostic.
    Prochaine mise à jour dès que l’impact et l’ETA de rétablissement sont confirmés.

    _________________________

    Ongoing incident affecting the backbone in Île-de-France.
    Our teams are en route for investigation and troubleshooting.
    Next update will be provided as soon as impact scope and restoration ETA are confirmed.

01/01 à 01/03

Suivant