Heute Mittag war der Blog hier kurz mal weg – die Zugriffe auf die Datenbank waren wegen Überlastung nicht durchführbar. Aber auch andernorts hat es gerumpelt – sowohl Twitter als auch Microsoft 365 hatten in diversen Regionen dieser Welt Probleme. Ergänzung: In den späten Stunden des 1. März 2023 kommt es auch zu einem Ausfall von Exchange Online.
Twitter down
Der Kurznachrichtendienst Twitter scheint einen Ausfall am heutigen 1. März 2023 gehabt zu haben. Ich konnte zwar bei Tests weiterhin auf mein Konto zugreifen, aber es war etwas zäh. Andere Nutzer kamen wohl nicht mehr auf die Plattform.
Unter „Twitter down“ wurden mir bei einer kurzen Suche einige Tweets angezeigt, die vor 2-3 Stunden Probleme reklamierten.
Jemand hat es in obigem Tweet auf den Punkt gebracht – er hat einen Spaziergang gemacht – ist herrliches Wetter draußen. Habe ich auch am späteren Vormittag gemacht, als ich einen Umweg von 6 km von der Physiotherapie nach Hause durch den Wald gelaufen bin. Mir ist der Ausfall auch nur bewusst geworden, weil die Kollegen von Bleeping Computer in diesem Artikel berichteten.
Microsoft 365 down
Zudem scheint es einen Ausfall der Microsoft 365-Dienste – vor allem im asiatischen Raum gegeben zu haben. Auf Twitter habe ich diese Meldung gesehen. Blog-Leser Andreas P. hat mir per Mail folgende Informationen zukommen lassen (danke dafür).
Incident: MO521925, impacted service: Microsoft 365 suite, impacted feature: Portal, current status is: Service degradation
ublished Time: 01.03.2023 09:18:53
Title: Users in the Asia Pacific region may be unable to access multiple Microsoft 365 services
User impact: Users may be unable to access multiple Microsoft 365 services.
More info: Impacted services may include but aren’t limited to:
– Microsoft Teams
– Exchange Online
– Power BI
– SharePoint Online
– OneDrive for BusinessCurrent status: We’re reviewing our telemetry for impacted scenarios to help determine our next troubleshooting steps.
Scope of impact: This issue may potentially affect any Asia Pacific user attempting to access Microsoft 365 services.
Next update by: Wednesday, March 1, 2023, at 10:30 AM UTC
Published Time: 01.03.2023 08:27:49
Title: Users can’t access Microsoft Teams and Exchange Online
User impact: Users can’t access Microsoft Teams and Exchange Online.
Current status: We’re investigating a potential issue and checking for impact to your organization. We’ll provide an update within 30 minutes.
Jemand von den Ausfällen betroffen?
Exchange Online mit Problemen
Ergänzung: Seit den späten Abendstunden gibt es auch Probleme mit Exchange Online, wo Nutzer keine Mails verarbeiten können. Microsoft hat auf Twitter ein Problem eingestanden:
Andreas P. hat mir die betreffenden Statusinformation für EX522020 per Mail zukommen lassen (danke dafür).
Published Time: 01.03.2023 21:58:06
Title: Users may be unable to access their Exchange Online mailbox or send/receive messages
User impact: Users may have been unable to access their Exchange Online mailboxes or send and receive email messages.
More info: Users may have received an error message including: “550 5.4.1 Recipient address rejected: Access denied” when attempting to send or receive messages.
Final status: We’ve confirmed that rerouting EOP traffic away from the affected portion of infrastructure has successfully resolved the user impact.
Scope of impact: Impact was specific to users who are served through the affected infrastructure in North America, Europe, and the United Kingdom.
Start time: Wednesday, March 1, 2023, at 1:02 PM UTC
End time: Wednesday, March 1, 2023, at 8:20 PM UTC
Preliminary root cause: A portion of Exchange Online Protection (EOP) infrastructure wasn’t operating as expected due to a potential misconfiguration, resulting in the impact.
Next steps:
– We’re continuing to investigate the underlying cause of the issue.
– We’re reviewing our telemetry signals to find ways to identify and resolve similar issues in the future more quickly.A post-incident report will be available on the Service Health Dashboard within five business days.
Published Time: 01.03.2023 21:19:30
Title: Users may be unable to access their Exchange Online mailbox or send/receive messages
User impact: Users may be unable to access their Exchange Online mailboxes or send and receive email messages.
More info: Users may receive an error message including: “550 5.4.1 Recipient address rejected: Access denied” when attempting to send or receive messages.
Current status: We’ve successfully routed EOP traffic away from affected portion of infrastructure. We’re monitoring our systems and reaching out to previously affected users to confirm impact has been resolved.
Scope of impact: Impact is specific to users who are served through the affected infrastructure in North America, Europe, and the United Kingdom.
Start time: Wednesday, March 1, 2023, at 1:11 PM UTC
Preliminary root cause: A portion of Exchange Online Protection (EOP) infrastructure isn’t operating as expected, resulting in the impact.
Next update by: Wednesday, March 1, 2023, at 9:30 PM UTC
Published Time: 01.03.2023 20:55:45
While our root cause investigation is ongoing, we’re in the process of routing EOP traffic away from what appears to be the affected infrastructure as a potential mitigation strategy.
This quick update is designed to give the latest information on this issue.
Published Time: 01.03.2023 20:24:39
Title: Users may be unable to access their Exchange Online mailbox or send/receive messages
User impact: Users may be unable to access their Exchange Online mailboxes or send and receive email messages.
More info: Users may receive an error message including: “550 5.4.1 Recipient address rejected: Access denied” when attempting to send or receive messages.
Current status: We continue to suspect a potential DBEB issue as the source of impact and are reviewing associated Exchange Online Protection (EOP) telemetry data. In parallel, we continue to collect information from affected users to aid in our investigation.
Scope of impact: Impact is specific to users who are served through the affected infrastructure in North America, Europe, and the United Kingdom.
Start time: Wednesday, March 1, 2023, at 1:11 PM UTC
Next update by: Wednesday, March 1, 2023, at 8:30 PM UTC
Published Time: 01.03.2023 19:40:07
Our continued monitoring has indicated that the issue is ongoing. We’re reviewing diagnostics from affected users to determine our next steps.
This quick update is designed to give the latest information on this issue.
Published Time: 01.03.2023 19:19:05
Title: Users may be unable to access their Exchange Online mailbox or send/receive messages
User impact: Users may be unable to access their Exchange Online mailboxes or send and receive email messages.
More info: Users may receive an error message including: “550 5.4.1 Recipient address rejected: Access denied” when attempting to send or receive messages.
Current status: Our internal telemetry has indicated that the service has largely recovered. We’re monitoring our systems while continuing our investigation to determine the underlying cause of the issue and whether additional action is required.
Scope of impact: Impact is specific to users who are served through the affected infrastructure in North America, Europe, and the United Kingdom.
Start time: Wednesday, March 1, 2023, at 1:11 PM UTC
Next update by: Wednesday, March 1, 2023, at 7:30 PM UTC
Published Time: 01.03.2023 18:22:03
Title: Users may be unable to access their Exchange Online mailbox or send/receive messages
User impact: Users may be unable to access their Exchange Online mailboxes or send and receive email messages.
More info: Users may receive an error message including: “550 5.4.1 Recipient address rejected: Access denied” when attempting to send or receive messages.
Current status: We’ve identified a potential Directory Based Edge Blocking (DBEB) issue that may be contributing to impact. We’re investigating this alongside our existing diagnostic data to determine our next steps.
Scope of impact: Impact is specific to users who are served through the affected infrastructure in North America, Europe, and the United Kingdom.
Start time: Wednesday, March 1, 2023, at 1:11 PM UTC
Next update by: Wednesday, March 1, 2023, at 6:30 PM UTC
Published Time: 01.03.2023 17:33:04
Title: Users may be unable to access their Exchange Online mailboxes via any connection method
User impact: Users may be unable to access their Exchange Online mailboxes via any connection method.
Current status: We’re analyzing mailbox request exceptions and continuing our review of service telemetry trends to identify the underlying root cause and formulate a plan to remediate impact.
Scope of impact: Impact is specific to users who are served through the affected infrastructure in North America and Europe.
Start time: Wednesday, March 1, 2023, at 1:11 PM UTC
Next update by: Wednesday, March 1, 2023, at 7:00 PM UTC
Published Time: 01.03.2023 15:15:07
Title: Some users may be unable to access their Exchange Online mailboxes via any connection method
User impact: Users may be unable to access their Exchange Online mailboxes via any connection method.
Current status: We’re reviewing trends in service telemetry to determine our next troubleshooting steps.
Scope of impact: Impact is specific to some users who are served through the affected infrastructure in North America and Europe.
Start time: Wednesday, March 1, 2023, at 1:11 PM UTC
Next update by: Wednesday, March 1, 2023, at 4:30 PM UTC
Published Time: 01.03.2023 14:59:58
Title: We’re looking into a potential problem.
User Impact: We’re investigating the potential end-user impact.
Current status: We’re investigating a potential issue and checking for impact to your organization. We’ll provide an update within 60 minutes.
Also das letzte mal nen Ausfall bei On-Prem hatte ich vor 10 Jahren als der damalige Admin nen Fehler machte … vielleicht ca. 15min bis die Backups online waren.
Wenn ich hier so lese wie oft da die Cloud rumzickt (plus das NoGo: meine Daten auf fremden Servern) bereue ich nix da drauf zu verzichten! ;-P
Komm in die Cloud: sicher schnell und zuverlässig … das ich nicht lache!
Sehe ich genauso :-)
Das ist auch genau meine Gedanke – jedes mal, wenn ich derartige News lese. Schöne moderne Welt.
Die Cloud hat definitiv ihre Vorteile. Aber ich mache den Job hier nun schon seit über 30 Jahren und hab schon die ein oder andere Datenmigration durchgeführt. Von Fat16 Laufwerken zu Novell Netware und zurück auf MS Windows Server mit NTFS, später in die Private Cloud und jetzt wandert alles zu Azure & Co. Auch Änderungen in der Art und Weiße wie wir mit Computern im Allgemeinen arbeiten ändert sich ständig. Erst waren es Terminals, dann PCs und zurück zu Terminals unter Citrix und Windows NT4.0 Terminal Server und höher. Dann hatten wir wieder PCs, dann kamen Tablets und dann wieder PCs als Terminal für die Cloud. Ich bin sehr gespannt, wie die Entwicklung in Zukunft weitergeht.
Ich freue mich schon auf den Tag, an dem die Daten aus dem nicht mehr weiterentwickelten und abgelösten Teams von irgendwelchen Sharepoint Seiten wieder auf einem lokalen Fileserver kopiert werden sollen.
Hallo Herr Born,
vielen Dank für den Blogbeitrag. Wir setzen bei uns auch Exchange Online ein und haben von einem französischen Kunden die Info erhalten, dass eine E-Mail mit genau dieser Fehlermeldung „550 5.4.1 Recipient address rejected: Access denied“ zurückgewiesen wurde. Ich habe schon allerlei Nachforschungen angestellt und mich gefragt, warum die E-Mail nicht in der Nachrichtenablaufverfolgung sichtbar war (als ob sie nie existiert hätte), jetzt weiß ich, warum :)
P.S. Eine Benachrichtigung über das Admin Center gab es natürlich trotz Konfiguration selbiger nicht, danke M$ :|
Trotzdem merkwürdig. Eigentlich sollten alle Emails in der Nachrichtenablaufverfolgung im Exchange Online Admin Center enthalten sein.
@JohnRipper Das habe ich mir auch gedacht, aber ich habe gerade noch einmal gründlich nachgeschaut, die E-Mail ist absolut nicht auffindbar… weder bei der Filterung nach Absender noch nach Empfänger (selbst dann nicht, wenn ich nach allgemeinen Fehlern von allen filtere). Witzigerweise gingen jedoch 2 weitere E-Mails vom selben Absender an einen anderen Empfänger wenige Minuten später problemlos durch, aber ich denke, das ist der Tatsache geschuldet, dass jede E-Mail über andere Gateways von M$ geroutet wird, oder habe ich da einen Denkfehler?