История сбоев Inline Manual

1. 31 июля 2026 г. в 11:27 UTCinvestigating

   Мы знаем о недавно раскрытой уязвимости CVE-2026-66066 и относимся к ней серьезно. Наши производственные системы уже отлажены. В настоящее время мы проводим тщательную судебную экспертизу соответствующих журналов, чтобы подтвердить, была ли какая-либо попытка использовать уязвимость до того, как патч был применен. На данном этапе мы не нашли никаких доказательств того, что Inline Manual был затронут. Мы продолжаем расследование в качестве меры предосторожности и поделимся еще одним обновлением после завершения обзора. [CVE-2026-66066] Возможно произвольное считывание файлов и удаленное выполнение кода при обработке варианта Active Storage - https://discuss.rubyonrails.org/t/cve-2026-66066-возможное произвольное чтение файлов и удаленное выполнение кода-в-активном-хранилище-вариант-обработка/91432

2. 31 июля 2026 г. в 19:08 UTCinvestigating

   Мы продолжаем проверять наши журналы на наличие признаков того, что CVE-2026-66066 был использован до того, как наши системы были исправлены. До сих пор мы не нашли никаких доказательств вредоносной деятельности, связанной с этой уязвимостью. Наше быстрое реагирование, по-видимому, предотвратило любую эксплуатацию, и мы также повернули все затронутые секретные ключи в качестве дополнительной меры предосторожности. Важно отметить, что даже если бы злоумышленник попытался использовать эту уязвимость, он не предоставил бы им доступ к данным клиентов. Мы подтвердили это, основываясь на том, как пораженный компонент изолирован в нашей инфраструктуре. Мы продолжим просматривать журналы и следить за любой подозрительной деятельностью в течение выходных. Мы опубликуем еще одно обновление раньше, если мы определим что-то важное, или не позднее понедельника, 3 августа, если не будет новых результатов.

3. 5 августа 2026 г. в 21:13 UTCresolved

   Разрешено - нет доказательств эксплуатации Мы завершили наше исследование потенциального воздействия CVE-2026-66066. Мы приняли тщательно продуманный подход и вышли за рамки стандартного процесса проверки, чтобы убедиться, что мы изучили каждый соответствующий источник информации. Это включало: - Немедленно почините пораженные системы - Обзор приложений, инфраструктуры и журналов доступа, охватывающих соответствующий период Поиск известных показателей и моделей, связанных с эксплуатацией Расследование необычных запросов и действий более подробно Вращение всех потенциально затронутых секретных ключей в качестве меры предосторожности - Продолжение усиленного мониторинга после завершения первоначального обзора проверка того, что затронутый компонент не может обеспечить доступ к данным клиентов; После завершения этой работы мы обнаружили нулевые доказательства того, что уязвимость была использована или что Inline Manual был затронут. Поэтому мы отмечаем этот инцидент как разрешенный. Мы продолжим следить за нашими обычными процессами мониторинга безопасности и предпримем дальнейшие действия, если появится какая-либо новая информация. Спасибо, Марек и команда

Автоматический перевод официального обновления инцидента.

1. 8 октября 2024 г. в 03:51 UTCinvestigating

   We are currently experiencing technical difficulties with our main website, inlinemanual.com. Our team is actively working to resolve the issue as quickly as possible, and we will provide updates as we have more information. In the meantime, we want to reassure you that our platform, app.inlinemanual.com, is fully operational and unaffected by this outage. You can continue to access all your sites, content, and features without any interruption. We apologize for any inconvenience this may cause and appreciate your patience and understanding as we work to restore our main website. If you have any questions or need assistance, please feel free to contact our support team at [email protected].

2. 8 октября 2024 г. в 04:00 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 8 октября 2024 г. в 04:08 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 8 октября 2024 г. в 04:29 UTCresolved

   This incident has been resolved.

1. 30 марта 2024 г. в 11:10 UTCinvestigating

   We're following the evolution of the situation around CVE-2024-3094 - https://nvd.nist.gov/vuln/detail/CVE-2024-3094 Our Engineering and Security teams are currently investigating if the CVE-2024-3094 incident applies to any of our service resources.

2. 30 марта 2024 г. в 12:28 UTCresolved

   This incident has been resolved. After a thorough investigation we conclude that our systems were not affected by the CVE-2024-3094 and the specified library versions.

1. 5 декабря 2023 г. в 10:53 UTCinvestigating

   Authoring Tool is currently unavailable. We are actively investigating the issue and working to restore access as soon as possible. Thank you for your understanding and patience.

2. 5 декабря 2023 г. в 10:54 UTCidentified

   We have identified the issue affecting the Authoring Tool and are diligently working on a fix. We expect to restore full functionality soon.

3. 5 декабря 2023 г. в 11:03 UTCmonitoring

   The issue with the Authoring Tool has been resolved and we are now closely monitoring the system for stability. Thank you for your patience, and we apologize for any inconvenience caused. Please feel free to resume using the tool.

4. 5 декабря 2023 г. в 17:23 UTCresolved

   This incident has been resolved.

1. 11 января 2023 г. в 20:48 UTCinvestigating

   We are experiencing a degraded performance on one of our parts of the Inline Manual Portal - app.inlinemanual.com. Affected areas: - People Tab - latest profiles and updates are not showing. - Various operations on People profiles are not working through the Portal. This does not affect your users' experience, as their progress is still being appropriately stored and processed without any delay.

2. 11 января 2023 г. в 21:50 UTCidentified

   We have identified the issue and are working on a fix.

3. 11 января 2023 г. в 22:04 UTCmonitoring

   Issue has been fixed. Sync jobs across all analytics servers are running as expected. The deletion and other Profile actions are working. The Profiles are being re-synchronised. We are monitoring the re-sync process as it might take several hours to update affected profiles fully and for any recurrence of issues. We have confirmed that this did not impact the end-users' experience and only impacted the Inline Manual's Portal UI, where we display Profiles.

4. 25 января 2023 г. в 17:47 UTCresolved

   We have been following the data consistency thoroughly throughout the past few weeks. This incident has been resolved.

1. 16 декабря 2021 г. в 10:35 UTCmonitoring

   Incident ongoing since December 11th. We're following the evolution of the situation around CVE-2021-45046. Our Engineering and Security teams started to work on log4j incident on December 10th in the morning EU time and updated, mitigated or removed the vulnerable log4j packages from our environment. No misuse has been detected and active threat hunting continues. Our mitigation actions: - Updated log4j where possible - Scanned logs retrospectively one month back for various scenarios - Our security team is still actively hunting for signs of exploitation The service affected is not directly accessible through internet. It sits within our private network. The request can be made through an API which goes through application first, not passing any headers and it correctly sanitizes all user entered content. This has been verified and confirmed. The service itself logs only minimum information, none of the user entered content makes it through to the logs. The attacker would need to be logged in to Inline Manual Portal or have API Access Tokens to be able to communicate indirectly through the API with the service - we have not detected any attempts to do so.

2. 18 декабря 2021 г. в 09:24 UTCmonitoring

   We are closely following Log4j vulnerability evolution and the latest release of Log4j 2.17.0. As we have fully removed Log4j packages from our infrastructure, we are not affected by newly found issues within Log4j packages.

3. 25 января 2022 г. в 15:27 UTCresolved

   This incident has been resolved. Our systems were not compromised nor affected by the Log4j vulnerability.

1. 16 ноября 2021 г. в 18:00 UTCinvestigating

   We are experiencing downtime on our main app and analytics due to worldwide Google Cloud downtime. We are investigating.

2. 16 ноября 2021 г. в 18:01 UTCinvestigating

   We are continuing to investigate this issue.

3. 16 ноября 2021 г. в 18:12 UTCidentified

   Incident identified and confirmed to relate to Google Cloud platform global network issues. https://status.cloud.google.com/incidents/6PM5mNd43NbMqjCZ5REh

4. 16 ноября 2021 г. в 18:16 UTCmonitoring

   All systems are back to normal and we are monitoring the Google Cloud's status.

5. 16 ноября 2021 г. в 20:13 UTCresolved

   The issue with Google Cloud Networking has been resolved for all affected projects as of Tuesday, 2021-11-16 11:28 US/Pacific. https://status.cloud.google.com/incidents/6PM5mNd43NbMqjCZ5REh

1. 8 ноября 2021 г. в 09:17 UTCinvestigating

   We are experiencing degraded performance on Inline Manual Portal. This affects only users within the Inline Manual Portal at app.inlinemanual.com making some pages unavailable. The end-users consuming the player are not affected.

2. 8 ноября 2021 г. в 12:27 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 8 ноября 2021 г. в 17:26 UTCresolved

   This incident has been resolved.

1. 16 июля 2021 г. в 09:22 UTCinvestigating

   We are currently investigating this issue.

2. 16 июля 2021 г. в 09:30 UTCmonitoring

   We have identified the problem and fixed the primary cause. We continue monitoring the situation.

3. 16 июля 2021 г. в 12:24 UTCresolved

   This incident has been resolved.