Plus de 80 % des passerelles sont tombées et Exchange ne pouvait pas s'écarter

Selon le rapport préliminaire de Microsoft, au pire moment de la panne des 12 et 13 novembre, plus de 80 % des serveurs passerelles réseau derrière Exchange Online ne répondaient plus. Les serveurs en panne ont reporté leur trafic sur les serveurs sains, qui sont tombés à leur tour, et en deux heures le défaut touchait toute la flotte. Teams, OneDrive et SharePoint ont pu quitter l'infrastructure défaillante. Exchange Online non, si bien que l'accès et la livraison du courrier ont souffert près de 24 heures, selon The Register et BleepingComputer.

Un défaut dormant de juillet a rencontré deux événements ordinaires

Le défaut est arrivé avec une mise à jour de juillet des serveurs passerelles et est resté silencieux pendant des mois. Il provoquait une contention de verrous dans un processus Windows interne qui épuisait le processeur et la mémoire, et il empirait sur les machines à plus de cœurs. Deux événements l'ont déclenché : Teams a basculé vers l'infrastructure passerelle qui sert Exchange Online, et près de 14 % de la capacité des passerelles était déjà hors service pour une autre raison. Microsoft dit que ses tests de charge ont raté le bug parce qu'ils tournaient sur un matériel plus faible que celui de production. Un retour arrière était impossible car la modification datait de plusieurs mois, les ingénieurs ont donc construit un correctif.

Prévoyez une voie de secours pour le courrier avant le rapport final du 20 novembre

Microsoft promet plus de capacité, une meilleure supervision et des garde-fous pour que le trafic redirigé ne déclenche plus de cascade, et a suspendu tous les déploiements prévus. N'attendez pas. Nommez la voie que votre équipe utilise quand Exchange Online est coupé une journée, testez-la une fois et vérifiez ce que votre contrat dit des crédits pour une panne aussi longue. Dans l'UE, NIS2 demande aux entités essentielles et importantes des mesures de continuité d'activité, et un fournisseur de courrier unique qui ne peut pas s'écarter est exactement la dépendance sur laquelle un auditeur posera des questions.