technique:incidents:2023-07-12

2023/07/12 : panne de réseau côté RENATER

Lien:

Voir le postmortem de Rhizome pour plus de détails.

Le 07 juillet 2023 à 15h15, notre système de monitoring nous alerte que l’ensemble des services hébergés sur Alice et Caribou ne sont plus accessibles. En particulier, des services très utilisés comme CodiMD, Mobilizon ou Lufi sont hors-service.

Après contact avec Rhizome, on détermine que c’est bien un problème réseau indépendant de leur volonté. Tout le réseau de l’UTC, dont le datacenter où est hébergée l’armoire Rhizome, est dans les choux. En particulier, le site utc.fr n’est même plus accessible.

La DSI enquête sur le problème. Nous disposons de backups sur l’ensemble des services cités sur Bob, à Toulouse, en cas d’urgence.

Après investigation, le problème est plus général et vient du réseau Renater, utilisé dans l’enseignement supérieur et notamment FAI des universités.

Une solution de secours est déployée vers 19h en attendant que le problème soit résolu à la source et les services sont de nouveau accessibles.

  • technique/incidents/2023-07-12.txt
  • de qduchemi