Historia awarii Mindtickle

1. 24 października 2026 13:19 UTCresolved

   Streszczenie • Dwie krytyczne słabości w runtime PHP ("PHP2Shell") zostały ujawnione publicznie 21 października 2026 roku. • Platforma Mindtickle, w tym witryny do nauki klientów i aplikacje domen dostosowanych do indywidualnych potrzeb, jest zbudowana głównie na Go, JavaScript, TypeScript, Python i Java, i nie ma wpływu. Element dotknięty • Jeden komponent pomocniczy używany w PHP: usługa backend dla in- app "Report an issue" feedback form. Jest oddzielony od funkcji wyszukiwania i czatu help- article w tym samym panelu wsparcia, które działają na innych usługach i nie są naruszone. • Służy on formularzowi informacji zwrotnej i otrzymuje raport, gdy użytkownik go składa. Służba przekazuje raport do naszego zespołu wsparcia. • Działa oddzielnie od głównej platformy Mindtickle. Nie jest to część sposobu obsługi stron edukacyjnych, sposobu logowania się użytkowników ani sposobu przechowywania lub przetwarzania treści edukacyjnych i danych lokatorów. Nie ma dostępu do systemów przechowujących te dane. Leczenie • W dniu 23 października 2026 roku zastosowaliśmy zmiany konfiguracji łagodzącej zalecane w doradcy bezpieczeństwa PHP w celu zmniejszenia ryzyka eksploatacji podczas przygotowywania aktualizacji. • W dniu 24 października 2026 roku uaktualniliśmy komponent do PHP 8.3.36, stałego wydania, we wszystkich regionach produkcji i zweryfikowaliśmy fix. • Dodaliśmy również kontrolę filtrowania zapytania jako środek defense- in- głębokości. Składnik pozostał w użyciu przez cały czas, bez przestoju. Dochodzenie • Sprawdziliśmy dzienniki z 20 października 2026, dzień przed ujawnieniem opinii publicznej, poprzez rekultywację 24 października 2026. • Nie znaleźliśmy żadnych dowodów na wykorzystanie ani dowodów na to, że dane klienta były dostępne lub ujawnione. Nie jest wymagane działanie • Nie ma potrzeby obracania haseł, klawiszy API, ustawień SSO lub referencji integracyjnych. • Kontynuujemy monitorowanie i będziemy aktualizować tę stronę, jeśli coś się zmieni. • W przypadku pytań, dowodów potwierdzających lub formalnego zaświadczenia, e-mail infosec @ mindtickle.com.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 21 września 2026 13:13 UTCinvestigating

   Użytkownicy nie są obecnie w stanie zalogować się na platformę Mindtickle. Użytkownicy, którzy są już zalogowani, nie mają wpływu i mogą nadal korzystać z platformy. Nasz zespół aktywnie bada sprawę.

2. 21 września 2026 13:53 UTCidentified

   Zidentyfikowaliśmy przyczynę problemu logowania i obecnie pracujemy nad łatą.

3. 21 września 2026 15:10 UTCmonitoring

   Widzimy oznaki ożywienia, a niektórzy użytkownicy powinni być w stanie zalogować się na platformę Mindtickle. Kontynuujemy monitorowanie ożywienia gospodarczego i pracy przez pozostałych użytkowników.

4. 21 września 2026 15:46 UTCmonitoring

   Aktualizacja: Funkcja logowania została przywrócona dla większości użytkowników. Będziemy nadal uważnie monitorować platformę, aby zapewnić pełną poprawę i stabilność.

5. 21 września 2026 16:42 UTCresolved

   Problem logowania dotyczący platformy został rozwiązany i użytkownicy mogą się teraz zalogować normalnie. Zakłócenie trwało od 04: 52 do 9: 42. Nie wpłynęły na dane klientów. Użytkownicy, którzy zostali już zalogowani do programu Mindtickle byli w stanie uzyskać dostęp do platformy bez żadnych obaw. Przepraszamy za zakłócenia. Jeśli nadal nie możesz się zalogować, skontaktuj się z nami @ mtsupport @ mindtickle.com. com Ukończymy sekcję zwłok i opublikujemy tu RCA w ciągu kilku dni.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 16 września 2026 13:33 UTCidentified

   Zdajemy sobie sprawę z problemu wpływającego na przepływy pracy związane z Salesforce, spowodowanego trwającym przerwami po stronie Salesforce. Nie jest to wynik problemu w ramach Mindtickle. Co ma wpływ: Klienci korzystający z integracji Salesforce mogą zobaczyć niepowodzenia lub opóźnienia w następujących: 1. Integracja Salesforce (SFDC): synchronizacja danych CRM, tworzenie rezerw / synchronizacja użytkowników, rekomendacja modułu / aktywów oraz synchronizacja wydajności ucznia do Salesforce 2. Digital Sales Room: możliwość synchronizacji, kontakty, automatyczne tworzenie pomieszczeń dla możliwości Salesforce, i konta z Salesforce, i pisanie działalności sali z powrotem do Salesforce. Podstawowa funkcjonalność DSR (tworzenie i udostępnianie pomieszczeń, treści, analizy) pozostaje dostępna. 3. Call AI: mapowanie nagrań do rekordów Salesforce i wyświetlanie pól Salesforce możliwość / konto na spotkaniu, gdy jest dostępny, pchając wgląd połączeń z powrotem do Salesforce, i Salesforce Dialer call capture. Funkcje AI połączenia podstawowego (nagrywanie, transkrypcja, spostrzeżenia) pozostają dostępne. Co nie ma wpływu: przepływy pracy non-Salesforce, podstawowe funkcje produktu i klienci niekorzystający z integracji Salesforce działają normalnie. Aktywnie monitorujemy zaprzestanie działalności Salesforce i oceniamy jej wpływ.

2. 16 września 2026 17:01 UTCresolved

   Wycofanie się ze strony Salesforce zostało rozwiązane, a wszystkie dotknięte nim przepływy pracy działają teraz normalnie.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 31 sierpnia 2026 11:08 UTCinvestigating

   Sprzedawca Copilot ma wysoki poziom błędów ze względu na dalszy przestoju w centrum danych Azure wspierającym ten przypadek użycia. Ponadto wsparcie Mindtickle czatu może doświadczyć niepowodzeń w generowaniu odpowiedzi na zapytania.

2. 31 sierpnia 2026 11:40 UTCidentified

   Problem został zidentyfikowany i jest w trakcie wdrażania.

3. 31 sierpnia 2026 12:10 UTCmonitoring

   wdrożono rozwiązanie i monitorujemy sytuację.

4. 31 sierpnia 2026 13:06 UTCresolved

   Incydent został rozwiązany i wszystkie systemy działają.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 19 sierpnia 2026 17:16 UTCinvestigating

   Badamy kwestię, w której podzbiór klientów może zobaczyć nieświeże dane w niektórych raportach analitycznych, w szczególności: SSR, Custom Dashboards, Manager & Relationship reports, oraz Overview / Approach / Performance reports. Inne sprawozdania i obszary produktów nie ulegają zmianie. Jeśli analityka odzwierciedla aktualne dane, nie jest konieczne działanie. Wkrótce opublikujemy nowe informacje.

2. 20 sierpnia 2026 02:07 UTCresolved

   Sprawa została rozwiązana. Wszystkie wpływające raporty pokazują aktualne dane. Dziękuję za cierpliwość.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 13 czerwca 2026 00:35 UTCinvestigating

   We are currently experiencing a partial service disruption on Mindtickle platform. Users may encounter errors, intermittent failures, or degraded performance across the platform. Our engineering team is actively investigating and mitigating the issue while closely monitoring recovery efforts.

2. 13 czerwca 2026 00:51 UTCidentified

   We have identified the cause of the elevated error rates and are deploying mitigation measures. We are monitoring the platform closely and working to restore normal service.

3. 13 czerwca 2026 01:01 UTCmonitoring

   Mitigation has been deployed and services are operating normally. We are continuing to monitor the platform closely to ensure stability.

4. 15 czerwca 2026 03:36 UTCresolved

   The incident has been resolved and services are operating normally. We will continue to monitor the platform to ensure stability. A detailed Root Cause Analysis will be shared shortly.

5. 18 czerwca 2026 12:24 UTCpostmortem

   # **Incident Summary** On June 12, 2026, Mindtickle experienced a service disruption caused by an unexpected surge in processing activity within one of our backend workflows. The resulting increase in downstream traffic exceeded the capacity of a critical platform dependency, leading to service degradation and eventual unavailability. The issue was mitigated by reducing processing throughput and allowing affected systems to recover. **Impact Duration:** **3 hours and 15 minutes**. ## **Impact** During the incident window, customers may have experienced: * Delays in invitation-related workflows * Elevated latency and intermittent errors across affected services * Temporary degradation of platform functionality dependent on the impacted backend systems ## **Incident Timeline** * ‌**Jun 12, 03:00 PM**: A critical backend dependency becomes saturated, resulting in service degradation and elevated error rates. * **Jun 12, 03:15 PM**: The issue is detected through automated monitoring and customer reports. Investigation begins. * **Jun 12, 04:50 PM**: Mitigation measures are implemented to reduce processing throughput and stabilize affected systems. * **Jun 12, 05:46 PM**: Platform functionality is restored fully ## **Root Cause** A backend workflow generated a significantly higher volume of processing activity than historical norms. As the system worked through the resulting backlog, requests propagated through multiple downstream services, creating sustained load across the platform. While each component behaved as designed, the combined volume exposed capacity and protection gaps within the processing chain. The resulting amplification effect overwhelmed a critical backend dependency, causing service degradation and eventual unavailability. ## **Resolution** The team mitigated the incident by reducing the rate at which backlog processing occurred, allowing downstream systems to stabilize and recover. Once traffic levels returned to normal operating ranges, affected services resumed normal operation and platform functionality was fully restored. ## **Corrective and Preventive Actions** * Introduce rate limiting and additional safeguards for high-volume processing workflows to prevent a single workflow from generating excessive downstream load. * Implement backpressure, circuit-breaking, and load-shedding mechanisms across critical processing paths to better protect downstream dependencies during traffic spikes. * Review platform capacity limits, concurrency settings, and monitoring to improve resilience and provide earlier visibility into abnormal processing patterns.

1. 3 czerwca 2026 17:06 UTCresolved

   On June 2nd, between 7:19 AM PDT and 9:21 AM PDT, our third-party recording provider experienced a disruption that prevented the Call AI bot from joining meetings. A limited number of customers were impacted, and unfortunately, the affected recordings are non-recoverable. We sincerely apologize for the disruption and any impact to your workflows. The issue is fully resolved, and recordings are functioning normally. If your account was affected, your account team will reach out with specific details.

1. 21 maja 2026 15:29 UTCinvestigating

   Users may experience issues starting Two-Way Roleplay sessions. In addition admins may be unable to preview roleplays. The team is actively investigating the issue and working toward resolution.

2. 21 maja 2026 15:59 UTCidentified

   We have identified the root cause as a service disruption at a third-party provider that powers parts of the Two-Way Roleplay workflow. We are actively working with the vendor to restore the service and recover impacted functionality as quickly as possible.

3. 21 maja 2026 17:07 UTCidentified

   Recovery efforts are still ongoing, and we continue to work closely with our third-party partners to restore the impacted service. Our teams remain actively engaged on the issue.

4. 21 maja 2026 17:18 UTCidentified

   We are seeing partial recovery in the impacted service, and some roleplay attempts are now completing successfully. We continue to work with the third-party provider toward full restoration.

5. 21 maja 2026 17:49 UTCmonitoring

   The impacted systems are now operational again, and roleplay workflows are functioning successfully. We are continuing to monitor the systems closely to ensure stability.

6. 21 maja 2026 18:30 UTCresolved

   All impacted systems are now operating normally, and Two-Way Roleplay functionality has been fully restored. We will continue to monitor the systems closely. The incident is now resolved.

1. 18 maja 2026 13:17 UTCinvestigating

   The 'Featured Hubs' widget, wherever used on the Mindtickle platform, is not loading. The Hubs and individual media/assets are working properly. We are currently investigating this. All other capabilities of the Mindtickle platform are operating normally.

2. 18 maja 2026 13:21 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 18 maja 2026 13:31 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 18 maja 2026 13:55 UTCresolved

   This incident has been resolved. The 'Featured Hubs' widget is now loading as expected, and the Mindtickle platform is fully operational.

1. 11 maja 2026 14:25 UTCinvestigating

   We are currently investigating an issue impacting call recordings in Call AI. Users may experience failures while recording calls. The team is actively working on identifying the root cause and restoring normal functionality. Further updates will be shared shortly.

2. 11 maja 2026 16:35 UTCresolved

   The issue has now been identified and resolved, and Call AI services are operating normally again. We will share a detailed Root Cause Analysis (RCA) shortly.

1. 26 marca 2026 11:50 UTCresolved

   Between 07:50 AM and 11:25 AM PT on March 24, 2026, the Mindtickle platform experienced a service disruption affecting Call Recordings. Full service was restored by 11:25 AM PT. We are currently conducting a thorough investigation and will publish a detailed Root Cause Analysis (RCA) shortly.

2. 27 marca 2026 03:50 UTCpostmortem

   We experienced a service disruption impacting **Call AI bot functionality**. During this time, **select scheduled meetings were affected**, where Call AI bots were unable to join and record. The issue has been fully resolved, and services have returned to normal operation. ‌ **Impact** * Call AI bots were unable to join **select scheduled meetings** * Call recordings and transcriptions were not generated for impacted meetings ‌ **Timeline** * **07:50 AM PT:** Incident began; bots unable to join select meetings * **07:52 AM PT:** Alerts triggered; issue detected and investigation initiated * **09:00 AM PT:** Root cause identified within Call AI bot infrastructure * **10:15 AM PT:** Mitigation measures applied; service recovery in progress * **11:25 AM PT:** Service fully restored; bots resumed normal operation ‌ **Root Cause** This incident was caused by a **transient issue within the Call AI bot infrastructure**, which impacted service availability during the affected period. ‌ **Next Steps** * Exploring & implement enhanced failover mechanisms to improve system resilience * Introducing more granular monitoring and alerting for faster detection ‌ We apologize for the inconvenience caused and appreciate your patience.

1. 19 lutego 2026 14:33 UTCinvestigating

   we are currently investigating an issue affecting the Analytics Platform. While out of the box dashboards remain functional, users may be unable to open existing custom reports or create new ones. Our engineering team is identifying the root cause, and we will provide an update as soon as more information is available. We apologize for the interruption to your workflow.

2. 19 lutego 2026 14:50 UTCinvestigating

   We are continuing to investigate this issue.

3. 19 lutego 2026 14:52 UTCresolved

   We have successfully resolved the issue affecting the Analytics Platform. All custom reports should now load correctly, and the ability to create new reports has been fully restored. Our team has verified the fix, and we are monitoring the system to ensure continued stability. Thank you for your patience while we worked to get this back online.

1. 12 lutego 2026 03:29 UTCinvestigating

   We are observing high error rates for both admins and end users for select customer instances. We are investigating the issue and will share an update shortly.

2. 12 lutego 2026 03:29 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 12 lutego 2026 03:36 UTCmonitoring

   We have implemented a fix and are monitoring the progress. We are seeing the error rates coming down.

4. 12 lutego 2026 03:37 UTCresolved

   The incident has been resolved. All admins and end users should be able to access the platform without any concerns.

1. 6 lutego 2026 13:23 UTCresolved

   [Resolved] A subset of customers (admins only) experienced intermittent failures when admins attempted to upload content to the platform. End users were not impacted and were able to view existing content without issues. The issue has been resolved, and all admin content upload workflows are operating as expected. Incident Timeline Start Time: 05 Feb 2026, 11:15 PM PT Resolved Time: 06 Feb 2026, 05:12 AM PT We will share a detailed RCA once the post-incident review is complete.

1. 18 listopada 2025 14:45 UTCidentified

   The Two-Way Roleplay Missions feature is currently experiencing an outage and is inaccessible. This is a direct consequence of the ongoing, widespread Cloudflare network outage. We are closely monitoring Cloudflare's recovery efforts and expect the service to be restored as soon as their network disruption is resolved.

2. 18 listopada 2025 14:54 UTCmonitoring

   Cloudflare has confirmed the deployment of a fix for the underlying network issue. We are now observing a significant decrease in error rates on our platform, with Two-Way Roleplay Missions starting to become accessible again. We will continue to monitor the platform closely as services stabilize, and will post a final resolution notice once all operations are confirmed to be fully back to normal.

3. 18 listopada 2025 15:37 UTCmonitoring

   Two-Way Roleplay Missions are operational. We will continue to monitor the platform closely to ensure stability before marking this incident as fully resolved.

4. 18 listopada 2025 17:17 UTCresolved

   All services are normal. A detailed Root Cause Analysis (RCA) will be published shortly.

1. 20 października 2025 16:30 UTCidentified

   There has been a second surge of error rates and latencies reported due to an AWS outage in the US-East-1 region. The AWS team is actively working on this and we are monitoring the status closely. Though the platform is up and some features are working, select customers and users may face intermittent failues in accessing the platform. We will keep updating the status page as soon as we receive updates from AWS. We apologize for the inconvenience caused here. AWS Outage Status: https://health.aws.amazon.com/health/status

2. 20 października 2025 17:51 UTCidentified

   As per AWS, their internal subsystems are now showing early signs of recovering in a few Availability Zones (AZs) in the US-EAST-1 Region. They are now applying mitigations to the remaining AZs at which point we expect launch errors and network connectivity issues to subside. We will share an update once the AWS team has applied the mitigations and we have verified at our end.

3. 20 października 2025 19:43 UTCmonitoring

   Post the recovery and fix from the AWS team, we are observing a significant improvement in the Mindtickle platform performance. Most Mindtickle workflows are now functioning normally. Our teams continue to monitor the situation closely and will provide an update once the issue is fully resolved. AWS Outage Status: https://health.aws.amazon.com/health/status

4. 20 października 2025 20:55 UTCresolved

   The incident has been resolved, and the Mindtickle platform is now operating normally. We continue to closely monitor performance to ensure everything remains stable.

1. 20 października 2025 10:07 UTCmonitoring

   Earlier today, some Mindtickle customers experienced high error rates and intermittent service disruptions due to an AWS outage in the US-East-1 region. AWS has since deployed a fix, and we’re observing steady recovery across our systems. Error rates are declining, and most services are returning to normal. Our teams continue to monitor the platform closely to ensure full stability. We’ll share a final update once all systems are fully restored. Thank you for your patience and understanding.

2. 20 października 2025 11:03 UTCresolved

   The incident has been resolved, and the Mindtickle platform is operating normally.

1. 16 października 2025 03:54 UTCinvestigating

   We’ve identified an issue where specific pages within the Analytics section are displaying stale or incorrect data for select customers. Our team is actively investigating the issue and will share further updates as soon as possible. Impacted Areas: 1. OData Routes (Partial Routes) – Stale data visible 2. Analytics Platform Pages (Series, Modules, Learner & Learner Groups) – Incorrect data displayed 3. Custom Reports shared with customers via Email (in the last 12 hours) – Incorrect data displayed

2. 16 października 2025 04:29 UTCmonitoring

   A fix has been implemented and we are running a sanity check at our end.

3. 16 października 2025 04:50 UTCresolved

   This incident has been resolved. We will share an RCA once the postmortem is complete.

1. 15 października 2025 11:19 UTCresolved

   Between October 14, 2025, 12:10 AM PT and October 15, 2025, 3:00 AM PT, select Call AI customers experienced a delay in the processing of call recordings. Impact: 1. Call recordings generated during this period were temporarily not visible on the Call Listing page. What Continued to Work: 1. All recordings captured before the incident window remained accessible on the Call Listing page. 2. For calls recorded during the incident, Recording Ready emails were successfully sent to end users, allowing access to the recordings via the email links. We are conducting a post-incident analysis to identify the root cause. A detailed Root Cause Analysis (RCA) report will be shared once the investigation is complete.

1. 24 września 2025 09:01 UTCinvestigating

   We're currently experiencing an high error rate in our in-platform analytics and are actively investigating the root cause to restore full functionality.

2. 24 września 2025 09:40 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 24 września 2025 09:51 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 24 września 2025 10:09 UTCresolved

   A fix has been applied, and the incident has been resolved. We are continuing to monitor this closely.