Störungsverlauf von Inline Manual

1. 31. Juli 2026 um 11:27 UTCinvestigating

   Wir sind uns der kürzlich offengelegten Schwachstelle CVE-2026-66066 bewusst und behandeln sie ernst. Unsere Produktionssysteme wurden bereits gepatcht. Wir führen jetzt eine gründliche forensische Überprüfung der relevanten Protokolle durch, um zu bestätigen, ob es einen Versuch gab, die Schwachstelle auszunutzen, bevor der Patch angewendet wurde. Zu diesem Zeitpunkt haben wir keine Beweise dafür gefunden, dass Inline Manual betroffen war. Wir setzen die Untersuchung als Vorsichtsmaßnahme fort und werden ein weiteres Update teilen, sobald die Überprüfung abgeschlossen ist. [CVE-2026-66066] Mögliches willkürliches Auslesen von Dateien und Remote-Code-Ausführung bei der Verarbeitung von Active Storage-Varianten - https://discuss.rubyonrails.org/t/cve-2026-66066-possible-arbitrary-file-read-and-remote-code-execution-in-active-storage-variant-processing/91432

2. 31. Juli 2026 um 19:08 UTCinvestigating

   Wir überprüfen unsere Protokolle weiterhin auf Anzeichen, dass CVE-2026-66066 ausgenutzt wurde, bevor unsere Systeme gepatcht wurden. Bisher haben wir keine Beweise für böswillige Aktivitäten im Zusammenhang mit dieser Schwachstelle gefunden. Unsere schnelle Reaktion scheint jede Ausbeutung verhindert zu haben, und wir haben auch alle betroffenen geheimen Schlüssel als zusätzliche Vorsichtsmaßnahme gedreht. Wichtig ist, dass selbst wenn ein Angreifer versucht hätte, diese Sicherheitslücke auszunutzen, er ihm keinen Zugriff auf Kundendaten gewährt hätte. Wir haben dies anhand der Isolierung der betroffenen Komponente innerhalb unserer Infrastruktur bestätigt. Wir werden die Protokolle weiterhin überprüfen und alle verdächtigen Aktivitäten am Wochenende überwachen. Wir werden ein weiteres Update früher veröffentlichen, wenn wir etwas relevantes identifizieren, oder spätestens bis Montag, den 3. August, wenn es keine neuen Erkenntnisse gibt.

3. 5. August 2026 um 21:13 UTCresolved

   Aufgelöst - keine Beweise für Ausbeutung Wir haben unsere Untersuchung der möglichen Auswirkungen von CVE-2026-66066 abgeschlossen. Wir verfolgten einen bewusst gründlichen Ansatz und gingen über unseren Standard-Review-Prozess hinaus, um sicherzustellen, dass wir jede relevante Informationsquelle untersucht hatten. Dazu gehörten: - Patchen der betroffenen Systeme sofort - Überprüfung von Anwendungs-, Infrastruktur- und Zugriffsprotokollen für den relevanten Zeitraum - Suche nach bekannten Indikatoren und Mustern im Zusammenhang mit Ausbeutung - Untersuchung ungewöhnlicher Anfragen und Aktivitäten im Detail - Drehen aller potenziell betroffenen geheimen Schlüssel als Vorsichtsmaßnahme - Fortsetzung der verbesserten Überwachung nach Abschluss der ersten Überprüfung - Überprüfung, dass die betroffene Komponente keinen Zugriff auf Kundendaten gewähren konnte Nach Abschluss dieser Arbeit haben wir null Beweise dafür gefunden, dass die Schwachstelle ausgenutzt wurde oder dass Inline Manual betroffen war. Deshalb stellen wir fest, dass dieser Vorfall gelöst ist. Wir werden weiterhin unsere normalen sicherheitsüberwachungsprozesse verfolgen und weitere maßnahmen ergreifen, wenn neue informationen verfügbar werden. Vielen Dank, Marek und das Team

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 8. Oktober 2024 um 03:51 UTCinvestigating

   We are currently experiencing technical difficulties with our main website, inlinemanual.com. Our team is actively working to resolve the issue as quickly as possible, and we will provide updates as we have more information. In the meantime, we want to reassure you that our platform, app.inlinemanual.com, is fully operational and unaffected by this outage. You can continue to access all your sites, content, and features without any interruption. We apologize for any inconvenience this may cause and appreciate your patience and understanding as we work to restore our main website. If you have any questions or need assistance, please feel free to contact our support team at [email protected].

2. 8. Oktober 2024 um 04:00 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 8. Oktober 2024 um 04:08 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 8. Oktober 2024 um 04:29 UTCresolved

   This incident has been resolved.

1. 30. März 2024 um 11:10 UTCinvestigating

   We're following the evolution of the situation around CVE-2024-3094 - https://nvd.nist.gov/vuln/detail/CVE-2024-3094 Our Engineering and Security teams are currently investigating if the CVE-2024-3094 incident applies to any of our service resources.

2. 30. März 2024 um 12:28 UTCresolved

   This incident has been resolved. After a thorough investigation we conclude that our systems were not affected by the CVE-2024-3094 and the specified library versions.

1. 5. Dezember 2023 um 10:53 UTCinvestigating

   Authoring Tool is currently unavailable. We are actively investigating the issue and working to restore access as soon as possible. Thank you for your understanding and patience.

2. 5. Dezember 2023 um 10:54 UTCidentified

   We have identified the issue affecting the Authoring Tool and are diligently working on a fix. We expect to restore full functionality soon.

3. 5. Dezember 2023 um 11:03 UTCmonitoring

   The issue with the Authoring Tool has been resolved and we are now closely monitoring the system for stability. Thank you for your patience, and we apologize for any inconvenience caused. Please feel free to resume using the tool.

4. 5. Dezember 2023 um 17:23 UTCresolved

   This incident has been resolved.

1. 11. Januar 2023 um 20:48 UTCinvestigating

   We are experiencing a degraded performance on one of our parts of the Inline Manual Portal - app.inlinemanual.com. Affected areas: - People Tab - latest profiles and updates are not showing. - Various operations on People profiles are not working through the Portal. This does not affect your users' experience, as their progress is still being appropriately stored and processed without any delay.

2. 11. Januar 2023 um 21:50 UTCidentified

   We have identified the issue and are working on a fix.

3. 11. Januar 2023 um 22:04 UTCmonitoring

   Issue has been fixed. Sync jobs across all analytics servers are running as expected. The deletion and other Profile actions are working. The Profiles are being re-synchronised. We are monitoring the re-sync process as it might take several hours to update affected profiles fully and for any recurrence of issues. We have confirmed that this did not impact the end-users' experience and only impacted the Inline Manual's Portal UI, where we display Profiles.

4. 25. Januar 2023 um 17:47 UTCresolved

   We have been following the data consistency thoroughly throughout the past few weeks. This incident has been resolved.

1. 16. Dezember 2021 um 10:35 UTCmonitoring

   Incident ongoing since December 11th. We're following the evolution of the situation around CVE-2021-45046. Our Engineering and Security teams started to work on log4j incident on December 10th in the morning EU time and updated, mitigated or removed the vulnerable log4j packages from our environment. No misuse has been detected and active threat hunting continues. Our mitigation actions: - Updated log4j where possible - Scanned logs retrospectively one month back for various scenarios - Our security team is still actively hunting for signs of exploitation The service affected is not directly accessible through internet. It sits within our private network. The request can be made through an API which goes through application first, not passing any headers and it correctly sanitizes all user entered content. This has been verified and confirmed. The service itself logs only minimum information, none of the user entered content makes it through to the logs. The attacker would need to be logged in to Inline Manual Portal or have API Access Tokens to be able to communicate indirectly through the API with the service - we have not detected any attempts to do so.

2. 18. Dezember 2021 um 09:24 UTCmonitoring

   We are closely following Log4j vulnerability evolution and the latest release of Log4j 2.17.0. As we have fully removed Log4j packages from our infrastructure, we are not affected by newly found issues within Log4j packages.

3. 25. Januar 2022 um 15:27 UTCresolved

   This incident has been resolved. Our systems were not compromised nor affected by the Log4j vulnerability.

1. 16. November 2021 um 18:00 UTCinvestigating

   We are experiencing downtime on our main app and analytics due to worldwide Google Cloud downtime. We are investigating.

2. 16. November 2021 um 18:01 UTCinvestigating

   We are continuing to investigate this issue.

3. 16. November 2021 um 18:12 UTCidentified

   Incident identified and confirmed to relate to Google Cloud platform global network issues. https://status.cloud.google.com/incidents/6PM5mNd43NbMqjCZ5REh

4. 16. November 2021 um 18:16 UTCmonitoring

   All systems are back to normal and we are monitoring the Google Cloud's status.

5. 16. November 2021 um 20:13 UTCresolved

   The issue with Google Cloud Networking has been resolved for all affected projects as of Tuesday, 2021-11-16 11:28 US/Pacific. https://status.cloud.google.com/incidents/6PM5mNd43NbMqjCZ5REh

1. 8. November 2021 um 09:17 UTCinvestigating

   We are experiencing degraded performance on Inline Manual Portal. This affects only users within the Inline Manual Portal at app.inlinemanual.com making some pages unavailable. The end-users consuming the player are not affected.

2. 8. November 2021 um 12:27 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 8. November 2021 um 17:26 UTCresolved

   This incident has been resolved.

1. 16. Juli 2021 um 09:22 UTCinvestigating

   We are currently investigating this issue.

2. 16. Juli 2021 um 09:30 UTCmonitoring

   We have identified the problem and fixed the primary cause. We continue monitoring the situation.

3. 16. Juli 2021 um 12:24 UTCresolved

   This incident has been resolved.