Fonseca Tecnologia - Instabilidade Parcial CIRION – Detalhes do incidente

Telefonia Enfrentando Grande Interrupção

Instabilidade Parcial CIRION

Monitoramento
Desempenho degradado
Começou em há 9 dias

Afetado

Data Centers

Desempenho degradado undefined 11:19 PM para 11:39 PM, Operacional undefined 11:39 PM para 12:00 AM

SERVLA SP2 - Cirion

Desempenho degradado undefined 11:19 PM para 11:39 PM, Operacional undefined 11:39 PM para 12:00 AM

Atualizações
  • Monitoramento
    UTC
    Monitoramento

    A demora na identificação da causa ocorreu porque os logs do switch causador ficaram inacessíveis, em razão de uma falha no armazenamento de logs durante a primeira ocorrência. Após o restabelecimento do serviço, mantivemos o monitoramento e descartamos alguns dos possíveis causadores do problema. Hoje, com a reincidência, identificamos a causa principal.

    A topologia STP da rede interna entrou em disputa pela eleição do root bridge: um switch que não deveria assumir essa função passou a vencer a eleição, deslocando o switch core. Como consequência, os caminhos lógicos da rede foram recalculados de forma subótima — o tráfego que deveria fluir pelos uplinks de maior capacidade passou a atravessar enlaces secundários — e as sucessivas reconvergências (Topology Change Notifications) provocaram flush recorrente das tabelas MAC, gerando flooding, latência intermitente e perda de pacotes.

    O incidente foi mitigado com o ajuste da prioridade STP do switch core para um valor inferior ao dos demais switches, restabelecendo-o de forma determinística como root bridge. A rede reconvergiu e o comportamento normalizou-se.

    Já foram implementadas correções para evitar que o incidente se repita, e seguimos monitorando o caso para garantir a estabilidade e a integridade da rede.

  • Investigando
    UTC
    Investigando

    Estamos investigando e identificando a causa de um flap de rede no DC SERVLA 02 (Cirion), o mesmo ocorreu primeira vez dia 13/08.