Störungsverlauf von Fortrabbit undefined

1. 27. Juli 2026 um 07:05 UTCinvestigating

   Seit ~08:00 sehen wir Probleme mit einer Reihe von Apps, die in der EU-Region gehostet werden. Es sind etwa 70 Apps und soweit wir sehen können, gibt es einen DDoS-Angriff. Es ist weit verbreitet und daher schwer unter Kontrolle zu bekommen.

2. 27. Juli 2026 um 07:48 UTCinvestigating

   Wir arbeiten an einem Fix, aber leider ist es nicht so einfach, ihn einzudämmen.

3. 27. Juli 2026 um 10:10 UTCmonitoring

   Wir arbeiten noch daran, aber ETA noch. Die meisten Apps sind bereits online. Aber wir beobachten weiter.

4. 27. Juli 2026 um 20:07 UTCresolved

   Das Problem ist nicht 100% gelöst. Wir beobachten immer noch. Da die meisten Apps (außer einer) wieder online sind, schließen wir diesen Vorfall vorerst.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 7. Juli 2026 um 06:00 UTCresolved

   Wir werden die zugrunde liegenden Systeme für das Dashboard und den Objektspeicher auf der alten Plattform aktualisieren. Das Dashboard und der Objektspeicher sind möglicherweise für einige Minuten nicht verfügbar.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 1. Juli 2026 um 17:00 UTCinvestigating

   Wir müssen einige Sicherheits-Patches für die EU-Region einführen. Erwarten Sie eine Ausfallzeit von 30 Minuten pro App, irgendwo innerhalb des angegebenen Zeitrahmens. Der Bereitstellungsdienst wird einige zusätzliche Ausfallzeiten haben. Vielen Dank für Ihr Verständnis.

2. 1. Juli 2026 um 19:11 UTCresolved

   Instandhaltung abgeschlossen

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 1. Juli 2026 um 06:00 UTCresolved

   Wir müssen einige Sicherheits-Patch-Fixes für die US-Region einführen. Erwarten Sie eine Ausfallzeit von 30 Minuten pro App, irgendwo innerhalb des angegebenen Zeitrahmens. Der Bereitstellungsdienst wird einige zusätzliche Ausfallzeiten haben. Vielen Dank für Ihr Verständnis.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 24. Juni 2026 um 17:00 UTCresolved

   Wir aktualisieren alle Datenbanken auf MySQL 8.4. Dies führt zu bis zu einer Stunde Ausfallzeit für jede App. Wir können ihnen keine genauen zeiten geben, wann ihre app ausgefallen sein wird, wir können nur sagen, dass sie während dieses wartungsfensters einige zeit ausgefallen sein wird. Weitere Informationen finden Sie in unserem Blogbeitrag: https://blog.fortrabbit.com/mysql-8-4-upgrade-plan

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 24. Juni 2026 um 07:00 UTCresolved

   Wir aktualisieren alle Datenbanken auf MySQL 8.4. Dies führt zu bis zu einer Stunde Ausfallzeit für jede App. Wir können ihnen keine genauen zeiten geben, wann ihre app ausgefallen sein wird, wir können nur sagen, dass sie während dieses wartungsfensters einige zeit ausgefallen sein wird. Dieses zusätzliche Wartungsfenster wird die verbleibenden Universal Apps aktualisieren, für die wir gestern keine Zeit hatten. Weitere Details finden Sie in unserem Blogbeitrag: https://blog.fortrabbit.com/mysql-8-4-upgrade-plan

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 23. Juni 2026 um 07:00 UTCresolved

   Wir aktualisieren alle Datenbanken auf MySQL 8.4. Dies führt zu bis zu einer Stunde Ausfallzeit für jede App. Wir können ihnen keine genauen zeiten geben, wann ihre app ausgefallen sein wird, wir können nur sagen, dass sie während dieses wartungsfensters einige zeit ausgefallen sein wird. Weitere Informationen finden Sie in unserem Blogbeitrag: https://blog.fortrabbit.com/mysql-8-4-upgrade-plan

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 10. Juni 2026 um 05:00 UTCresolved

   Wir werden einige Sicherheitspatches während des Wartungsfensters ausrollen. Dies hat keine Auswirkungen auf Kunden, die mit Softwareversionsänderungen konfrontiert sind. Die erwartete Ausfallzeit pro App beträgt unter einer Minute. Wir führen dies in Batches für beide Regionen USA und EU durch.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 2. Juni 2026 um 08:41 UTCinvestigating

   Wir untersuchen Probleme mit Let's Encrypt-Zertifikaten, die kürzlich erstellt oder erneuert wurden.

2. 2. Juni 2026 um 12:11 UTCresolved

   Wir glauben, das Zertifikatsproblem gelöst zu haben. Es stand im Zusammenhang mit einer Änderung des Let's Encrypt Root Chain Zertifikats. Dies ist etwas, das nicht regelmäßig geschieht, also wurde es nicht in die allgemeine Sicherheitsüberwachung externer Quellen einbezogen. Es betraf nur eine kleine Anzahl neu erstellter oder kürzlich aktualisierter Zertifikate. Kontaktieren Sie uns, wenn Sie immer noch SSL-Probleme sehen.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 29. Mai 2026 um 07:20 UTCinvestigating

   Wir untersuchen Web-Delivery-Probleme für etwa 30 Apps, die in der EU-Region der alten Plattform gehostet werden. Die Probleme haben möglicherweise um 06:00 UTC begonnen. Nicht alle Apps sind ausgefallen, nur einige, sie geben zufällige Fehler oder Timeouts zurück.

2. 29. Mai 2026 um 07:52 UTCinvestigating

   Apps sollten jetzt zurück sein. Aber wir untersuchen immer noch.

3. 29. Mai 2026 um 11:16 UTCresolved

   Post mortem Universal Apps betreiben Shared Host-Systeme. Diese Host-Systeme haben - natürlich - begrenzte Dateispeicherung. Zunächst haben wir harte Dateisystemquoten erzwungen, aber ein zugrunde liegender Fehler in BTRFS verursachte Probleme damit. Also haben wir die harten Limits aufgehoben und erlaubt, die Limits des Dateisystems zu überschreiten. Für Universal Apps gibt es keine automatische Skalierung, so dass die Lösung auch für Kunden besser ist. Wir überbuchen den Speicher, ungefähr um den Faktor drei, was es den Kunden ermöglichen würde, doppelt so viel Speicher zu verwenden wie der größte Uni-Plan. Wir prüfen regelmäßig nach Apps, die die Limits überschreiten und schreiben Mails. In letzter Zeit müssen wir das öfter tun. Am häufigsten wird eine übermäßige Dateispeicherung auf Code-/Konfigurationsfehler zurückgeführt. Am häufigsten finden Sie viele alte lokale Backups-Dateien (vielleicht ein Plugin?), Aber auch viele Cache-Dateien. Genauer gesagt wird das spätere immer mehr ein Problem. Vielleicht wegen Bots, die aggressiver Websites crawlen, die eine unbegrenzte Anzahl von möglichen Seiten anbieten. Wir haben Gesundheitschecks, die uns auf Lagerprobleme aufmerksam machen. In diesem Fall füllte sich der Speicher schnell und verursachte alle Arten von zufälligen Fehlern. Wir haben proaktiv Cache-Ordner entfernt, was zu einer höheren Belastung des Host-Systems führte, wenn Apps die Caches neu auffüllten. Diese Architektur ist natürlich nicht präfekt. Dies ist einer der vielen Gründe, warum wir uns entschieden haben, eine neue Plattform von Grund auf neu zu erstellen. Die neue Plattform löst dies auf mehreren Ebenen: - Größere Speicherpläne - Optionales "Autoscaling": entweder gedeckelt oder Upgrade Nach der Überwachung betrachten wir das Problem nun als gelöst.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 12. Mai 2026 um 05:00 UTCresolved

   Wir werden einige Sicherheitspatches während des Wartungsfensters ausrollen. Dies hat keine Auswirkungen auf Kunden, die mit Softwareversionsänderungen konfrontiert sind. Die erwartete Ausfallzeit pro App beträgt unter einer Minute. Wir führen dies in Batches für beide Regionen USA und EU durch. BTW: Wir haben unser Status-Tool migriert und ein wenig aufgeräumt. Diese Benachrichtigung kann jetzt anders aussehen.

Automatisch aus der offiziellen Störungsmeldung übersetzt.