** Informationen zum Vorfall 04.02.2026 **

Am 04.02.2026 wurden geplante Wartungsarbeiten (https://status.awesome.cloud/issues/697123354a0ebd4ca121fdda) an der Virtualisierungslösung der awesome.cloud durchgeführt.

Die Wartungen begannen wie geplant um 19:00 Uhr mit dem Update der Management-Systeme, welche erfolgreich und ohne Zwischenfälle durchgeführt wurden.

Gegen ca. 20:30 Uhr begann das Update der Host-Systeme auf ein höheres Patchlevel. Dieses Upgrade wird weitgehend automatisiert ausgeführt und ist ein Standardvorgehen mit geringem Risiko. Nach dem Upgrade der ersten Hosts wurden die Monitorings geprüft, alle Services liefen und waren verfügbar.

Nach dem Upgrade weiterer Hosts fielen im Kundenmonitoring Auffälligkeiten auf, da diverse Kundensysteme keine Daten mehr rapportierten.

Es wurde festgestellt, dass die aktualisierten Hosts keine NSX-Tunnel mehr aktivierten und somit kein Traffic auf NSX-Segmenten mehr verarbeitet wurde.

Das Aktualisieren weiterer Host-Systeme wurde umgehend gestoppt und ein Troubleshooting eingeleitet.

Gegen ca. 22:00 Uhr wurde ein P1-Case bei unserem Distributor eröffnet und zusätzliche technische Expertise hinzugezogen.

Das Troubleshooting mit den Engineers war zunächst nicht erfolgreich, weshalb durch unseren Distributor ein P1-Case bei Broadcom eröffnet wurde, um schnellstmöglich bestmögliche technische Unterstützung zu erhalten. Um 23:15 Uhr begann das gemeinsame Troubleshooting. Das Problem wurde identifiziert: Es handelt sich um einen Bug in der eingesetzten NSX-Version, durch den sich Host-Systeme nach Reboots teilweise nicht mehr korrekt registrieren.

Das Problem wurde um 00:15 Uhr behoben, und alle Systeme waren wieder erreichbar.

Weitere Schritte:
• Wir aktualisieren die betroffene Komponente auf eine Version, in der das Problem behoben ist.
• Anschließend werden die restlichen Host-Systeme aktualisiert.

Wir bitten Sie, die entstandenen Unannehmlichkeiten zu entschuldigen.

------*

On 04 February 2026, planned maintenance work (https://status.awesome.cloud/issues/697123354a0ebd4ca121fdda) was carried out on the awesome.cloud virtualization platform.

The maintenance started as scheduled at 19:00 with the update of the management systems, which was completed successfully and without any incidents.

At approximately 20:30, the update of the host systems to a higher patch level began. This upgrade is largely automated and represents a standard procedure with low risk. After the upgrade of the first hosts, monitoring was checked and all services were running and available.

After upgrading additional hosts, anomalies were detected in customer monitoring, as several customer systems were no longer reporting data.

It was determined that the updated hosts were no longer activating NSX tunnels and therefore no traffic was being processed on NSX segments.

The update of additional host systems was immediately stopped and troubleshooting was initiated.

At approximately 22:00, a P1 case was opened with our distributor and additional technical expertise was engaged.

Initial troubleshooting with the engineers was not successful, so our distributor opened a P1 case with Broadcom in order to obtain the best possible technical support as quickly as possible. Joint troubleshooting began at 23:15. The issue was identified as a bug in the deployed NSX version, which caused host systems to partially fail to register correctly after reboots.

The issue was resolved at 00:15, and all systems were fully operational again.

Next steps:
• We will update the affected component to a version in which the issue is resolved.
• The remaining host systems will be updated after this update.

We apologize for the inconvenience caused.