Microsoft hat einige Details darüber bekannt gegeben, was seiner Meinung nach den jüngsten weltweiten Ausfall von Office 365 und einigen seiner anderen Plattformen verursacht hat. Nach der weltweiten Einstellung von Office 365 blieben Nutzer zurück und auch andere Dienste wie Microsoft Teams, Office.com, Power Platform und Dynamics365 waren betroffen. Laut Microsoft war der Ausfall auf einen Fehler bei der Bereitstellung eines Updates für den Azure AD-Dienst zurückzuführen.
Büroversagen
In einem vorläufigen Bericht des Unternehmens wurde festgestellt, dass das Update zu früh veröffentlicht wurde und nicht dem üblichen Testprogramm des Unternehmens entsprach. Dies umfasste in der Regel das Durchlaufen von fünf „Ringen“ vor der Veröffentlichung, sodass Microsoft alle Änderungen oder Updates mit einer definierten Gruppe geprüfter Tester testen konnte. Diesmal führte jedoch ein Fehler im Secure Deployment Process (SDP) von Microsoft dazu, dass das Update in allen Ringen und nicht im ersten entsprechenden Testring bereitgestellt wurde. „Azure AD ist als geografisch verteilter Dienst konzipiert, der in einer Aktiv-Aktiv-Konfiguration mit mehreren Partitionen in mehreren Rechenzentren auf der ganzen Welt bereitgestellt wird und mit Isolationsgrenzen aufgebaut ist“, sagte Microsoft in seinem vorläufigen Bericht. Vorfall. Typischerweise zielen Änderungen zunächst auf einen Validierungsring ab, der keine Kundendaten enthält, gefolgt von einem internen Ring, der nur Microsoft-Benutzer enthält, und schließlich auf unsere Produktionsumgebung. Diese Änderungen werden phasenweise in fünf Ringen über mehrere Tage hinweg umgesetzt. „In diesem Fall konnte das SDP-System aufgrund eines latenten Fehlers, der die Fähigkeit des Systems zur Interpretation der Bereitstellungsmetadaten beeinträchtigte, nicht korrekt auf den Validierungstestring verweisen. Daher wurden alle Ringe gleichzeitig angegriffen. Die fehlerhafte Bereitstellung führte zu einer beeinträchtigten Dienstverfügbarkeit.“ Nach der unerwarteten Veröffentlichung behauptet Microsoft, versucht zu haben, „Minuten nach dem Aufprall“ mithilfe seiner automatisierten Wiederherstellungssysteme ein Rollback durchzuführen, das normalerweise die Dauer und Schwere des Aufpralls begrenzt hätte. „Der in unserem SDP-System verborgene Fehler hatte jedoch das System beschädigt.“ Bereitstellungsmetadaten und wir mussten auf manuelle Wiederherstellungsprozesse zurückgreifen. „Dies hat die Zeit zur Behebung des Problems erheblich verlängert“, heißt es in dem Bericht des Unternehmens und erklärt, warum das Problem Benutzer auf der ganzen Welt betraf. Benutzer, die bereits bei Office 365 oder einem der anderen Dienste angemeldet waren, waren nicht betroffen. Via BleepingComputer