Geschlossen: Probleme in der internen Infrastruktur
Wir verzeichnen einen schwereren Ausfall einer internen Netzwerkkomponente, die zuständig ist für die Kommunikation zwischen Netzen und Geräten. Es wird bereits an der Behebung gearbeitet.
Aktuell können wir nur vielmals um Entschuldigung bitten und Ihnen versichern, dass wir mit Hochdruck an einem Fix arbeiten.
-
Aktualisierung: Titel, Beschreibung 2023-04-18 17:12
Titel: Probleme in der internen Infrastruktur Probleme in der internen Infrastruktur
Beschreibung: Wir verzeichnen einen schwereren Ausfall einer internen Netzwerkkomponente, die zuständig ist für die Kommunikation zwischen Netzen und Geräten. Es wird bereits an der Behebung gearbeitet.
Aktuell können wir nur vielmals um Entschuldigung bitten und Ihnen versichern, dass wir mit Hochdruck an einem Fix arbeiten. Wir verzeichnen einen schwereren Ausfall einer internen Netzwerkkomponente, die zuständig ist für die Kommunikation zwischen Netzen und Geräten. Es wird bereits an der Behebung gearbeitet.
Aktuell können wir nur vielmals um Entschuldigung bitten und Ihnen versichern, dass wir mit Hochdruck an einem Fix arbeiten.
Zusätzliche Informationen:
Die Ursachenforschung konnte soeben abgeschlossen werden. Im Rahmen eines Failovers kam es zu einem Routingproblem, wodurch gewisse interne Segmente und deren Dienste nicht mehr erreicht werden konnten.
Die hierfür verantwortliche Instanz konnte ausgemacht werden. Erste Vorkehrungen gegen dieses Verhalten wurden bereits getroffen und weitere Anpassungen zur kompletten Behebung werden noch durchgeführt.
-
Aktualisierung: Härtegrad, Titel, Beschreibung 2023-04-18 15:22
Härtegrad: Fehler Warnung
Titel: Probleme in der internen Infrastruktur Probleme in der internen Infrastruktur
Beschreibung: Wir verzeichnen einen schwereren Ausfall einer internen Netzwerkkomponente, die zuständig ist für die Kommunikation zwischen Netzen und Geräten. Es wird bereits an der Behebung gearbeitet.
Aktuell können wir nur vielmals um Entschuldigung bitten und Ihnen versichern, dass wir mit Hochdruck an einem Fix arbeiten. Wir verzeichnen einen schwereren Ausfall einer internen Netzwerkkomponente, die zuständig ist für die Kommunikation zwischen Netzen und Geräten. Es wird bereits an der Behebung gearbeitet.
Aktuell können wir nur vielmals um Entschuldigung bitten und Ihnen versichern, dass wir mit Hochdruck an einem Fix arbeiten.
Zusätzliche Informationen:
Ein erster Fix konnte eingespielt werden, die ersten Dienste sollten wieder zur Verfügung stehen.
-
Aktualisierung: Titel, Beschreibung 2023-04-18 15:05
Titel: Exchange-Services nicht verfügbar Probleme in der internen Infrastruktur
Beschreibung: Die Loadbalancer haben Schwierigkeiten mit der Verbindung zur Exchange-Infrastruktur.
Wir prüfen aktuell, woran dies liegt und bitten um Entschuldigung. Wir verzeichnen einen schwereren Ausfall einer internen Netzwerkkomponente, die zuständig ist für die Kommunikation zwischen Netzen und Geräten. Es wird bereits an der Behebung gearbeitet.
Aktuell können wir nur vielmals um Entschuldigung bitten und Ihnen versichern, dass wir mit Hochdruck an einem Fix arbeiten.
Zusätzliche Informationen:
Genauere Eingrenzung des Problems
-
Fall erstellt 2023-04-18 14:54
Die Loadbalancer haben Schwierigkeiten mit der Verbindung zur Exchange-Infrastruktur.
Wir prüfen aktuell, woran dies liegt und bitten um Entschuldigung.
Link in Zwischenablage kopieren |
Fall in neuem Tab öffnen
Geschlossen: Absicherung der Exchange-Topologie durch finalen Patch
Die Sicherheitsforscher von GTSC haben eine neue Sicherheitslücke auf den Exchange-Servern gefunden, die bereits aktiv ausgenutzt wird (https://gteltsc.vn/blog/warning-new-attack-campaign-utilized-a-new-0day-rce-vulnerability-on-microsoft-exchange-server-12715.html).
Da zum Beginn der Entdeckung (30.9.) noch keine Patches dafür verfügbar waren, wurde der empfohlene Workaround zunächst implementiert. Nun wurde mit dem Patchday am 8.11. endlich der Patch nachgereicht.
-
Aktualisierung: Härtegrad, Titel, Beschreibung 2022-11-09 11:16
Härtegrad: Wartung Warnung
Titel: Absicherung der Exchange-Topologie durch finalen Patch Absicherung der Exchange-Topologie durch finalen Patch
Beschreibung: Die Sicherheitsforscher von GTSC haben eine neue Sicherheitslücke auf den Exchange-Servern gefunden, die bereits aktiv ausgenutzt wird (https://gteltsc.vn/blog/warning-new-attack-campaign-utilized-a-new-0day-rce-vulnerability-on-microsoft-exchange-server-12715.html).
Da zum Beginn der Entdeckung (30.9.) noch keine Patches dafür verfügbar waren, wurde der empfohlene Workaround zunächst implementiert. Nun wurde mit dem Patchday am 8.11. endlich der Patch nachgereicht. Die Sicherheitsforscher von GTSC haben eine neue Sicherheitslücke auf den Exchange-Servern gefunden, die bereits aktiv ausgenutzt wird (https://gteltsc.vn/blog/warning-new-attack-campaign-utilized-a-new-0day-rce-vulnerability-on-microsoft-exchange-server-12715.html).
Da zum Beginn der Entdeckung (30.9.) noch keine Patches dafür verfügbar waren, wurde der empfohlene Workaround zunächst implementiert. Nun wurde mit dem Patchday am 8.11. endlich der Patch nachgereicht.
Zusätzliche Informationen:
Das Update wurde flächendeckend ausgerollt.
Vielen Dank für Ihre Geduld und Ihr Verständnis!
-
Aktualisierung: Härtegrad, Titel, Beschreibung 2022-11-09 09:47
Härtegrad: Warnung Wartung
Titel: Absicherung der Exchange-Topologie durch Workaround Absicherung der Exchange-Topologie durch finalen Patch
Beschreibung: Die Sicherheitsforscher von GTSC haben eine neue Sicherheitslücke auf den Exchange-Servern gefunden, die bereits aktiv ausgenutzt wird (https://gteltsc.vn/blog/warning-new-attack-campaign-utilized-a-new-0day-rce-vulnerability-on-microsoft-exchange-server-12715.html).
Da noch keine Patches dafür verfügbar sind, wurde der empfohlene Workaround zunächst implementiert. Eine anschließende Prüfung auf Kennzeichen der Kompromittierung blieb negativ.
Sollten Sie feststellen, dass durch den Workaround Probleme auftreten, melden Sie sich bitte bei uns. Wir werden dieses Problem bis zur Nachreichung offizieller Patches offenhalten. Die Sicherheitsforscher von GTSC haben eine neue Sicherheitslücke auf den Exchange-Servern gefunden, die bereits aktiv ausgenutzt wird (https://gteltsc.vn/blog/warning-new-attack-campaign-utilized-a-new-0day-rce-vulnerability-on-microsoft-exchange-server-12715.html).
Da zum Beginn der Entdeckung (30.9.) noch keine Patches dafür verfügbar waren, wurde der empfohlene Workaround zunächst implementiert. Nun wurde mit dem Patchday am 8.11. endlich der Patch nachgereicht.
Zusätzliche Informationen:
Der aktuelle "Patch-Tuesday" von Microsoft brachte nun endlich die erhofften Updates mit sich.
Wir werden diese nun auf allen betroffenen Servern nacheinander ausrollen. Es kann sein, dass dadurch Ihr Outlook sich beim Schwenken der Sessions in den Loadbalancern hin und wieder neu verbinden muss. Dies sollte sich aber bei Ihnen maximal kurz in der Statusleiste bemerkbar machen und die Arbeit wird dadurch nicht gestört.
Mit Abschluss werden wir diesen Fall dann auch schließen.
-
Aktualisierung: 2022-10-12 11:38
Zusätzliche Informationen:
Die Oktober-Updates wurden soeben eingespielt.
Aufgrund mehrerer Nachfragen wollen wir hier auch nochmal bestätigen, dass wir selbstverständlich immer alle Aktualisierungen der Anweisungen zur Abwehr der ProxyNotShell-Lücke übernehmen und anwenden.
-
Aktualisierung: 2022-10-12 10:08
Zusätzliche Informationen:
Leider bringen die monatlichen Sicherheitsupdates für Exchange noch keine Besserung für die "ProxyNotShell"-Lücke. Wir spielen diese aber dennoch heute im Laufe des Tages ein, da diese andere Lücken beheben. Möglicherweise kommt es dabei zu Reconnects in Ihrem Outlook-Client, die Funktionalität wird jedoch stetig gewährleistet sein.
-
Fall erstellt 2022-09-30 09:54
Die Sicherheitsforscher von GTSC haben eine neue Sicherheitslücke auf den Exchange-Servern gefunden, die bereits aktiv ausgenutzt wird (https://gteltsc.vn/blog/warning-new-attack-campaign-utilized-a-new-0day-rce-vulnerability-on-microsoft-exchange-server-12715.html).
Da noch keine Patches dafür verfügbar sind, wurde der empfohlene Workaround zunächst implementiert. Eine anschließende Prüfung auf Kennzeichen der Kompromittierung blieb negativ.
Sollten Sie feststellen, dass durch den Workaround Probleme auftreten, melden Sie sich bitte bei uns. Wir werden dieses Problem bis zur Nachreichung offizieller Patches offenhalten.
Link in Zwischenablage kopieren |
Fall in neuem Tab öffnen
Geschlossen: Probleme mit der Erreichbarkeit der Exchangeserver
Aktuell gibt es Probleme mit der Erreichbarkeit der Exchange-Infrastruktur. Wir prüfen bereits, wo der Fehler liegt.
-
Aktualisierung: Härtegrad 2023-03-15 18:34
Härtegrad: Warnung Fehler
Zusätzliche Informationen:
Die Sicherheitsupdates wurden heute Abend noch ausgerollt und es kam zu keinen weiteren Ausfällen.
Wir werden daher den Case schließen und bitten nochmals um Entschuldigung für die Störung heute Mittag.
-
Aktualisierung: 2023-03-15 13:04
Zusätzliche Informationen:
Wir konnten den Fehler nun komplett beheben und werden Vorkehrungen schaffen, dass dies nicht mehr vorkommen kann.
Wir werden heute aber auch noch einen Patch ausrollen, der im Rahmen der Patchdays veröffentlicht wurde. Dies geschieht allerdings in einer gesonderten Wartungsmitteilung.
-
Aktualisierung: Härtegrad 2023-03-15 12:30
Härtegrad: Fehler Warnung
Zusätzliche Informationen:
Tatsächlich hat der Dienst für unsere automatisierte Signaturlösung eine riesige CPU-Last über die Server hinweg verursacht. Aktuell läuft die Infrastruktur wieder, wir prüfen aber weiter, was dies verursacht hat.
-
Fall erstellt 2023-03-15 12:13
Aktuell gibt es Probleme mit der Erreichbarkeit der Exchange-Infrastruktur. Wir prüfen bereits, wo der Fehler liegt.
Link in Zwischenablage kopieren |
Fall in neuem Tab öffnen
Geschlossen: Ausfall im zentralen Speichersystem
Wir benachrichtigen Sie an dieser Stelle sobald die Störung behoben ist.
-
Aktualisierung: 2021-05-05 10:38
Zusätzliche Informationen:
Auch die dedizierten VMs sind nun wieder vollständig verfügbar. Sollten Sie noch auf Probleme stoßen, kontaktieren Sie uns bitte umgehend. Wir werden alles dafür tun, damit Sie unsere Dienste wieder fehlerfrei nutzen können und können uns nur bedanken für Ihre Geduld.
Wir sind bereits in der Planung, damit solche Worst-Cases sich nicht mehr negativ auf die Verfügbarkeit auswirken. Im konkreten Fall hatte sich ein für den Ausfall vorgesehenes Speichermodul unserer Full-Flash-Infrastruktur beim Failover ebenfalls direkt verabschiedet. Dadurch brach das RAID-System zusammen.
Zur korrekten Anzeige werden nun auch die ehemals betroffenen Produkte wieder dem Fall hinzugefügt.
-
Aktualisierung: 2021-05-04 23:23
Zusätzliche Informationen:
Auch SecureDrive steht wieder zur Verfügung. Bitte beachten Sie hierzu die Informationsmail, die Sie erhalten haben sollten.
Falls Sie keine Nachricht bekommen haben, kontaktieren Sie uns bitte über die bekannten Kommunikationswege.
Vielen Dank für Ihre Geduld.
-
Aktualisierung: 2021-05-04 14:20
Zusätzliche Informationen:
Nachdem auch Veeam Cloud Connect wieder funktioniert, sind nur noch SecureDrive sowie dedizierte VMs davon betroffen.
Wir bleiben weiter dran.
-
Aktualisierung: 2021-05-04 10:52
Zusätzliche Informationen:
Betroffene Produkte aktualisiert.
-
Aktualisierung: 2021-05-04 09:53
Zusätzliche Informationen:
Das ADFS (für die CRM-Dienste benötigt) ist ebenfalls wieder verfügbar.
-
Aktualisierung: 2021-05-04 09:27
Zusätzliche Informationen:
Betroffene Produkte aktualisiert.
-
Aktualisierung: 2021-05-04 09:19
Zusätzliche Informationen:
Wir sind wieder telefonisch erreichbar und die Exchange-Dienste sind ebenfalls wieder verfügbar.
An den weiteren Systemen sind wir nach wie vor dran.
-
Fall erstellt 2021-05-04 08:14
Wir benachrichtigen Sie an dieser Stelle sobald die Störung behoben ist.
Link in Zwischenablage kopieren |
Fall in neuem Tab öffnen
Geschlossen: Verbindungsabbrüche in Exchange-Infrastruktur
Momentan verzeichnen wir im Monitoring Verbindungsabbrüche mit der Exchange-Infrastruktur.
Wir kümmern uns bereits darum und suchen nach der Ursache.
-
Aktualisierung: Härtegrad 2021-10-01 11:49
Härtegrad: Fehler Information
Zusätzliche Informationen:
Es kam heute nochmal zu Rucklern, die zwar weniger immens, aber dennoch vorhanden waren.
Wir gehen aktuell von einem Bug in der Software aus, da diesmal ein Prozess klar ausschlug. Wir bleiben an dem Fall dran.
-
Aktualisierung: 2021-09-30 13:58
Zusätzliche Informationen:
Die Abbrüche treten nicht mehr auf, wir konnten jedoch nicht die Ursache genau festmachen.
Daher beobachten wir weiter, ob es nochmal zu solchen Vorkommnissen kommt.
Wichtig ist jedoch zu bemerken, dass die Verbindungsprobleme rein clientseitig (Zugriff über https) stattfanden. Der Mailverkehr im Hintergrund war dadurch nicht betroffen und es ist kein Datenverlust entstanden. Weiter ist nicht von einer Kompromittierung auszugehen, da alle Sicherheitspatches zu den kürzlich durch Microsoft bekannt gewordenen Sicherheitslücken sofort nach Veröffentlichung eingespielt wurden.
Nach einer DDoS-Attacke sieht es gemessen an den Verbindungen ebenfalls nicht aus.
-
Fall erstellt 2021-09-30 11:22
Momentan verzeichnen wir im Monitoring Verbindungsabbrüche mit der Exchange-Infrastruktur.
Wir kümmern uns bereits darum und suchen nach der Ursache.
Link in Zwischenablage kopieren |
Fall in neuem Tab öffnen