Sunday 2nd April 2017

Datacenter Chile Falla en Enlaces de Fibra

Todos los enlaces de fibra están operativos y nuestros sistemas están todos operativos.

CAUSA DEL INCIDENTE El motivo del downtime es la caída de ambos enlaces de fibra tanto primario como secundario debido a multiples incidentes.

CRONOGRAMA DEL INCIDENTE [07:30] Sin notificación de la compañía eléctrica CGE se realiza manutención de subestación eléctrica externo. Esta situación no generó problemas debido a que nuestro grupo electrógeno partió de forma normal. Sin embargo, el rack de los equipos que alojan nuestro enlace secundario presentan una falla eléctrica en la linea primaria de alimentación eléctrica. La falla principal es el conversor de fibra debido a que no tiene doble fuentes redundantes. La linea secundaria de alimentación eléctrica siguió operando de forma normal. De esta forma se perdió la conectividad a nuestro enlace secundario. [07:30 - 08:00] Existe corte de fibra de nuestro enlace primario. [08:30-09:00] Se detecta que el mismo conversor de fibra genera el corte eléctrico en la linea primaria de alimentación debido a una falla del equipo. Ya que el equipo conversor esta defectuoso no se puede levantar el enlace secundario. [09:00-10:00] Se trabajar para reparar o reemplazar el equipo conversor de fibra secundaria y se espera por la reacción de los proveedores de última milla para corte de fibra. [10:00] Se repara equipo conversor. Fibra secundaria operativa. [10:30] Se restaura corte de fibra. Fibra primaria operativa. [10:30] Todo operativo.

INFORMACIÓN ADICIONAL [09:00] Ha esta hora somos informados que CGE (Compañia Eléctrica) tenia programada la manutención de la subestación eléctrica desde las 7:30 a 13:00 día Domingo 2 de Abril del 2017. Se realizarán los reclamos correspondientes a CGE debido a que nuestra empresa no fue notificada de forma previa a esta manutención.

REACCIÓN DE MEJORAMIENTO

  • El 24 de Marzo del 2017 se firma contrato de conectividad con Level3. Se agregaría un tercer ISP aumentado nuestro disponibilidad y disminuyendo fallas como la presentada el día de hoy. Level3 será una segundo proveedor ISP tipo TIER I conectado a nuestro datacenter.
  • Se reemplazará el equipo conversor por un equipo más robusto y con doble fuente redundante.