2026-06-22 20:00 - 20:30 Actuació en IX

eXO estat del servei
1

ACTUACIÓ: en IX (20:00 - 20:30)

Resum
Tipus Actuació
Inici 2026-06-22 20:00 (UTC)
Final 2026-06-22 20:34 (UTC)
Tíquet #XYZ
Alertes No
Participen @evilham, @exopedro
Impacte Esperem que com a molt hi hagi microtalls durant la intervenció i alguna petita pèrdua de paquets temporal.
Reporten @evilham, amb supervisió de @exopedro

Un cop recuperats els serveis a causa de la incidència del 2026-06-17, en restaurar el servei total, vam deixar un dels enrutadors d’internet (IX) per tal de no arriscar allargar cap incidència.

Havent analitzat la situació en fred en reunió @exo-servers decidim programar la posta en marxa de nou del IX que està apagat.

Pla d’actuació

  • Connectar OOB
  • Comprovar accessos a IPMI
  • Engegar el IX que està apagat (ix2)
  • Comprovar el funcionament correcte de la xarxa

Línia de temps

Tots els temps en hora local.

  • 20:00 INICI ACTUACIÓ
  • 20:00 Comencem connectant OOB i comprovant IPMI a trax3 i trax8
  • 20:09 Engeuem ix2 des de la línia de comandes
  • 20:11 Observem que ix2 ja està movent tràfic
  • 20:12 Observem que més o menys és el mateix que ix1
  • 20:15 Mentre esperem per si hi ha afectacions que triguin, afegim la clau SSH d’un company als routers ix1 i ix2
  • 20:18 Veiem que ix2 no te espai (d’altra banda, ix1, sí que te ~200M)
  • 20:24 Detectem (show system image) que tenen imatges antigues: ix1 en tenia una, ix2 en tenia dues antigues, d’aquí la diferència
  • 20:26 Esborrem les imatges extra, deixant només la última
  • 20:34 FINAL ACTUACIÓ

Conclusions

  • A més de comparar la configuració dels routers, potser hem de comparar també les imatges que desem dels routers

Quà ha anat bé?

  • Els routers efectivament funcionen de forma redundada i agafen les feines ràpidament :partying_face: