33 incident.io Status incidents · wrzesień 2025 — official updates, affected components, duration and resolution details.
Status: rozwiązany Ten incydent został rozwiązany. Zaloguj się przez Slack działa normalnie ponownie i nie jest wymagane dalsze działanie. Dotknięte komponenty Aplikacja Slack (Operacyjna)
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Status: Resoluted Latency powraca do normy. Między 13: 00 a 15: 08 UTC były okresy zwiększonego opóźnienia z niektórych Microsoft API. Wiadomości w zespołach Microsoft zostały dostarczone ze zwiększonym opóźnieniem. Nasza deska rozdzielcza i aplikacja mobilna nie zostały naruszone. Dotknięte komponenty aplikacji Microsoft Teams (Operational)
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Status: rozwiązany Odwróciliśmy się i alarmy znów działają normalnie. Uszkodzone komponenty Ostrzeżenie o połknięciu, przetwarzaniu i przywołaniu (operacyjne)
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Status: Rozwiązana dostawa haka Opsgenie powróciła do normy około 17: 48 BST Dotknięte komponenty Opsgenie (Operacyjne)
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Status: Rozwiązane między godziną 00: 00 a 02: 44 UTC, niektóre funkcje AI zwróciły zwiększony poziom błędów. Teraz widzimy pełną rekonwalescencję. Afected elements Okta (Operational) Splunk (Operational) Phone (Operational) Jira (Operational) Google Docs (Operational) SMS (Operational) Slack (Operational) Mobile app (Operational) ClickUp (Operational) Zendesk (Operational) Alert Spoying, processing and paging (Operational) Push Notifications (Operational) Cortex (Operational) Status pages (Operational) API (Operational) Confluence (Operational) GitHub (Operational) Azure DevOps (Operational) Dashboard (Operational) Operational (Operational) Google Meet (Operational) Assan (Operational) Operational) Operation (Operational) Operation Teamp (Operation) Operation (Operative) Operative) Operative (Operative) Operation (Operative) Datch (Operative)
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Zdajemy sobie sprawę z problemów wpływających na klientów logujących się do korzystania z SAML - badamy i wkrótce dostarczymy aktualizację.
Ta kwestia jest nadal w toku i pracujemy nad rezolucją. Wszystkie inne funkcje są nienaruszone. Istniejące sesje na aplikacji mobilnej i desce rozdzielczej nie są naruszone i nadal mają dostęp jak zwykle. Za 30 minut wrzucimy kolejną aktualizację.
Loginy SAML pracują teraz ze zwiększoną opóźnieniem. Będziemy monitorować aż do całkowitego powrotu do zdrowia. Wszystkie inne funkcje pozostają nienaruszone.
Nadal widzimy podwyższone błędy i opóźnienie przy logowaniu SAML. Wszystkie inne funkcje pozostają nienaruszone.
Loginy SAML działają normalnie. Będziemy nadal monitorować dalsze problemy.
Logowanie SAML nadal działa jak zwykle.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Zidentyfikowaliśmy zwiększoną opóźnienia i przerwy w pracy, wpływające na niektóre prośby do naszej deski rozdzielczej. Wydaje się, że problemy są przejściowe i zalecamy odświeżanie. Kontynuujemy śledztwo.
Opóźnienia i poziomy błędów wróciły do normy. Kontynuujemy monitorowanie dalszych problemów.
Między 19: 31: 30 a 19: 34: 30 UTC, niektóre prośby do naszej deski rozdzielczej hit zwiększony opóźnienia i błędy połączeń. Przyczyną był incydent sieciowy na Google Cloud Platform. Błędy były przemijające i odświeżające zwykle je usuwały. Opóźnienia i błędy wracają do normy i obserwujemy wszystko. Umieścimy pośmiertne pokrycie całego uderzenia.
Obserwowaliśmy ograniczony wzrost opóźnień oraz niewielką liczbę błędów deski rozdzielczej pomiędzy 19: 31: 30 a 19: 34: 30 UTC. To dotknęło 0\ .03% połączeń do naszej deski rozdzielczej. To zostało wykryte przez nasze wewnętrzne, syntetyczne monitorowanie. Przyczyną tych zwiększonych błędów były problemy sieciowe w GCP w tym czasie. Potwierdzają to nasze logi pokazujące nasz balancer obciążenia GCP nie przesyłając odpowiedzi sukcesu, jak również timeout sieci, gdy próbuje dotrzeć do zewnętrznych usług. Wpływ był ograniczony do niewielkiej liczby użytkowników i został rozwiązany poprzez odświeżenie deski rozdzielczej.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Zidentyfikowaliśmy wzrost poziomu błędów dzięki integracji Slacka. Obecnie badamy, w jaki sposób wpływa to na naszą platformę - wydaje się, że jest to problem po stronie Slacka, zwłaszcza w zakresie tworzenia kanałów i dostarczania wiadomości.
Slack przyznał się do incydentu po ich stronie. Można śledzić ich status strony [tutaj] (https: / / slack- status.com / 2026- 05 / 46d9d5d41fbedd9f).
Wskaźniki błędów i opóźnienia w operacjach Slack powróciły do normy, a integracja wróciła do normy. Można śledzić aktualizacje na stronie statusu Slacka [tutaj] (https: / / slack- status.com / 2026-05 / 46d9d5d41fbedd9f).
Kontynuujemy monitorowanie Slacka w miarę jego odzyskiwania i nie widzimy już bezpośredniego wpływu na naszą aplikację Slack Można śledzić aktualizacje na stronie statusu Slacka [tutaj] (https: / / slack- status.com / 2026-05 / 46d9d5d41fbedd9f "tutaj").
Kontynuujemy monitorowanie Slacka, gdy się odzyska. Nie widzimy bezpośredniego wpływu na naszą aplikację Slack. Można śledzić aktualizacje na stronie statusu Slacka [tutaj] (https: / / slack- status.com / 2026-05 / 46d9d5d41fbedd9f "tutaj").
Slack potwierdził, że ich usługi w dużej mierze wróciły do poziomu operacyjnego. Nie widzieliśmy żadnego bezpośredniego wpływu na naszą aplikację Slack od wczoraj ~ 23: 20 UTC. Rozwiązujemy to po naszej stronie, i można śledzić wszelkie dalsze aktualizacje na stronie statusu Slacka [tutaj] (https: / / slack- status.com / 2026-05 / 46d9d5d41fbedd9f).
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
We have identified increased error rates with our Slack integration. We are currently investigating how this is impacting our platform - this seems to be an issue on the Slack side, particularly around channel creation.
We've confirmed the issue is relating to errors being returned by Slack. This is affecting a number of features of our integration, including: • Creating incident channels • Sending messages • Syncing Slack user groups Our web dashboard continues to be available and Scribe is unaffected.
Slack have acknowledged the incident on their side. You can follow their status page [here](https://slack-status.com/2026-05/fe557ca05fdb64fa).
We're continuing to monitor the situation - Slack have posted an update on their status page to confirm that they're working on it.
The issue has been resolved on Slack's side and we've confirmed that things look normal on our side too.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
The website is now up and working as normal.
The web dashboard is unavailable due to a JavaScript deployment issue.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Widzimy opóźnienia do 30 minut w odbieraniu haczyków od Opsgenie, co może opóźnić dostawę alarmu. Nasze systemy działają normalnie i przetwarzają alarmy zaraz po ich przybyciu; problem wydaje się być po stronie Opsgenie. Będziemy uważnie monitorować i będziemy dzielić się aktualizacjami, gdy dowiemy się więcej.
Haczyki wydają się być znowu normalne, więc nie powinno już widzieć żadnych opóźnień.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
We have identified increased error rates with our Atlassian Statuspage integration. Atlassian have published this to their status page [here](https://metastatuspage.com/incidents/94fwk40f4z15).
Error rates have returned to normal levels.
We have identified increased error rates coming from Microsoft Teams. We are currently investigating how this is impacting our platform and we will update with more information shortly as we learn more.
We have identified increased error rates coming from Microsoft Teams that are causing delays in sending messages to Teams channels and DMs. We'll continue to monitor the situation and we will update with more information shortly as we learn more. We will provide the next update by 1830 UTC.
We are continuing to see an increase in error rates from Microsoft Teams, causing a delay in sending some messages to Teams channels and DMs. We are monitoring the situation and will provide an update by 1930 UTC.
We have seen an improvement in error rates and latency for requests to Microsoft Teams, and we expect the performance of sending messages to Teams channels and DMs to have returned to normal. We are continuing to monitor to ensure performance remains as expected, and we will provide a further update by 2100 UTC.
We are no longer seeing elevated latency and error rates from Microsoft Teams.
We have identified increased error rates with an upstream call transcription provider. This is affecting Scribe for all customers. Our team are investigating and we will update with more information shortly as we learn more.
The issues were isolated to one region and we have performed a failover to a secondary region, restoring Scribe for all customers. You may need to ask Scribe to rejoin your call. We'll continue to monitor the situation and are working closely with the upstream provider while they resolve the issue.
Our failover region is continuing to work as expected, and Scribe functionality has been restored. You may need to ask Scribe to rejoin your calls. We'll continue to monitor the situation and are working closely with the upstream provider while they resolve the issue.
We continue to use the failover region, and Scribe performance has returned to expected levels.
We are currently investigating reports that users are unable to login using Slack.
Users in some Slack workspaces are unable to sign in with Slack. We have escalated this issue to Slack. Signing in with SAML and Microsoft Teams is not affected.
Slack have rolled back a change which caused this issue, and we have confirmed recovery. Please reach out to support if you're still experiencing any issues signing in with Slack.
Slack have confirmed that the issue has been fully resolved, and affected customers have verified that they can log in successfully.
We've identified a drop in inbound traffic to [incident.io](http://incident.io "incident.io") from Opsgenie. This means that alerts may be slow to show up in [incident.io](http://incident.io "incident.io"), and paging via Opsgenie may be slow to reflect updates. This appears to be an issue with outbound webhooks on Opsgenie's side, we're monitoring the situation and will update as we know more.
Traffic appears to be back to normal levels now.
We have identified increased error rates with our Atlassian Statuspage integration. Atlassian have acknowledged an issue on their side (<https://metastatuspage.com/incidents/ctw5xv6t643h>). We'll continue to monitor this until the issue is resolved.
Atlassian's status page continues to show the issue with Statuspage (<https://metastatuspage.com/incidents/ctw5xv6t643h>). To restore the integration you can follow Atlassian's recommended workaround to regenerate your API key and reconnect in incident.io. We'll continue to monitor this until the issue is resolved.
Atlassian's status page continues to show the issue with Statuspage (<https://metastatuspage.com/incidents/ctw5xv6t643h>). To restore the integration you can follow Atlassian's recommended workaround to regenerate your API key and reconnect in [incident.io.](http://incident.io./ "incident.io.") We'll continue to monitor this until the issue is resolved.
Atlassian's status page continues to show the issue with Statuspage (<https://metastatuspage.com/incidents/ctw5xv6t643h>). To restore the integration you can follow Atlassian's recommended workaround to regenerate your API key and reconnect in [incident.io.](http://incident.io./ "incident.io.") We'll continue to monitor this and give an update in the next hour.
Atlassian's status page now reports that they are rolling out a fix (<https://metastatuspage.com/incidents/ctw5xv6t643h>). In the meantime, to restore the integration you can follow Atlassian's recommended workaround to regenerate your API key and reconnect in [incident.io.](http://incident.io./ "incident.io.") We continue to monitor the issue until it is resolved.
Atlassian have confirmed that the issues with Statuspage have been resolved. You should now be able to reuse your original API key in our integration.
We have identified increased error rates with our Sentry integration. We are currently investigating how this is impacting our platform and we will update with more information shortly as we learn more.
Sentry have acknowledged an issue on their side ([https://status.sentry.io/incidents/wpg3tnwnwctj](https://status.sentry.io/incidents/wpg3tnwnwctj "https://status.sentry.io/incidents/wpg3tnwnwctj")), and we're seeing alerts come through from them ok. We'll continue to monitor things before closing this out.
We've not seen any errors from Sentry since 15:35 UTC so we're closing this out. Please see Sentry's status page for any further details.
We have identified an increased rate of Sentry integrations becoming disconnected. Alert ingestion is unaffected. Please don't uninstall our application from Sentry: we are working to restore these connections on our side, and no action is currently required. We will provide an update in 30 minutes.
We're currently testing the fix that will allow us to re-connect any disconnected Sentry integrations on behalf of customers, and will have another update on this in 30 minutes.
We've verified a fix locally, and we're starting to roll this out in production now.
We have confirmed that we are able to restore these connections, and we are now in the process of restoring these. When this happens, you'll see that the Sentry integration no longer flags up as requiring reconnection. Once we have finished restoring access, we'll post another update here.
We have managed to re-establish a connection to Sentry for almost all of the affected customers. If Sentry is still showing up as disconnected, you will need to remove the incident.io integration from the Sentry side, and then go through the reinstallation flow by opening incident.io and going to Settings → Integrations → Sentry. If you do this, please note that Sentry will remove the "Notify incident.io" action from alert rules when you uninstall the integration. If that was the only action in the alert rule, the entire rule is disabled. You will therefore need to verify any alert rules after re-installing.
We are aware of an issue that is causing delays updating data in Insights. The team are currently investigating, and we'll provide further updates soon.
We are aware of an issue that is causing delays updating data in Insights. The team are currently working on mitigating this, and we'll provide further updates soon.
The team have resolved this issue, and Insights are now syncing as expected.
