Mais de 80 % dos gateways caíram e o Exchange não conseguiu desviar-se

Segundo o relatório preliminar da Microsoft, no pior momento da falha de 12 e 13 de novembro, mais de 80 % dos servidores gateway de rede por trás do Exchange Online não respondiam. Os servidores caídos empurraram o tráfego para os saudáveis, que também caíram, e em duas horas a falha estava em toda a frota. O Teams, o OneDrive e o SharePoint conseguiram sair da infraestrutura defeituosa. O Exchange Online não, pelo que o acesso e a entrega de correio sofreram quase 24 horas, segundo o The Register e o BleepingComputer.

Uma falha adormecida de julho encontrou dois acontecimentos comuns

A falha chegou com uma atualização de julho dos servidores gateway e ficou calada durante meses. Provocava contenção de bloqueios num processo interno do Windows que consumia CPU e memória, e piorava em máquinas com mais núcleos. Dois acontecimentos dispararam-na: o Teams passou para a infraestrutura gateway que serve o Exchange Online, e quase 14 % da capacidade dos gateways já estava desligada por outro motivo. A Microsoft diz que os testes de carga não viram a falha porque corriam em hardware mais fraco do que o de produção. Não foi possível reverter porque a alteração tinha meses, por isso os engenheiros construíram uma correção.

Defina uma via alternativa para o correio antes do relatório final de 20 de novembro

A Microsoft promete mais capacidade, melhor monitorização e salvaguardas para que o tráfego redirecionado não volte a provocar uma cascata, e suspendeu todas as implementações previstas. Não espere por isso. Indique a via que a sua equipa usa quando o Exchange Online fica em baixo um dia, teste-a uma vez e veja o que o contrato diz sobre créditos por uma falha tão longa. Na UE, a NIS2 pede às entidades essenciais e importantes medidas de continuidade de negócio, e um único fornecedor de correio de que não se consegue desviar é exatamente a dependência sobre a qual um auditor pergunta.