Historia awarii Cytracom

1. 6 września 2026 03:09 UTCinvestigating

   Badamy problem, który powoduje, że portal zarządzania ControlOne i zarządzania urządzeniami API reagować na żądania wolniej niż zwykle. Portal zarządzania może wydawać się nieodpowiadający, a agenci ControlOne próbujący się połączyć mogą mieć trudności z łączeniem.

2. 6 września 2026 03:24 UTCidentified

   Problem został zidentyfikowany i jest w trakcie wdrażania.

3. 6 września 2026 03:39 UTCmonitoring

   Wprowadzono rozwiązanie i monitorujemy wyniki.

4. 6 września 2026 05:05 UTCresolved

   Ten incydent został rozwiązany.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 2 września 2026 18:48 UTCinvestigating

   Obecnie badamy problem dotyczący połączeń przychodzących dla niektórych klientów. Zakłócenie jest związane z niepowodzeniem sieci światłowodowej wpływającym na jednego z naszych dostawców usług wyższego szczebla. Nasz zespół aktywnie współpracuje z dostawcą w celu monitorowania odzyskiwania i przywrócenia normalnego połączenia przychodzącego jak najszybciej. Połączenie wychodzące (chyba, że kierowane przez tego dostawcę) i inne usługi nie są obecnie naruszone. Dostarczymy dodatkowe aktualizacje w miarę dostępności większej ilości informacji.

2. 2 września 2026 19:08 UTCinvestigating

   Nadal badamy tę kwestię.

3. 2 września 2026 19:58 UTCidentified

   Zidentyfikowaliśmy źródło przerywanych połączeń przychodzących wpływających na podgrupę klientów. Nasz główny nośnik głosowy potwierdził incydent sieciowy powodujący utratę pakietów na części ruchu głosowego. Prowadzi to do przerywanych połączeń przychodzących, które nie mogą przebić się lub upaść krótko po połączeniu. Nasz przewoźnik aktywnie pracuje nad przywróceniem normalnego zachowania wywołującego, a my uważnie monitorujemy jakość połączeń na kontach dotkniętych. Dostarczymy aktualizacje, ponieważ mamy więcej informacji.

4. 3 września 2026 13:49 UTCmonitoring

   Nasz główny lotniskowiec obserwuje oczekiwane zachowanie i będzie nadal monitorować stabilność.

5. 3 września 2026 18:58 UTCresolved

   Ten incydent został rozwiązany.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 2 września 2026 16:07 UTCinvestigating

   Obecnie badamy częściową degradację usług w regionie US- SouthWest (LAX). Niektórzy klienci doświadczają wyższego niż zwykle opóźnienia i przerywanej łączności.

2. 2 września 2026 19:49 UTCmonitoring

   Wprowadzono rozwiązanie i monitorujemy wyniki.

3. 3 września 2026 12:54 UTCresolved

   Trzecio-partyjne cięcie włókien wpływające na wiele regionalnych tras sieciowych nośników w południowej Kalifornii zostało naprawione, a usługi zostały przywrócone.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 28 sierpnia 2026 17:29 UTCinvestigating

   Obecnie badamy częściową degradację usług w regionie US- Southeast (ATL) wpływającą na łączność mostową dla podgrupy klientów.

2. 28 sierpnia 2026 19:57 UTCmonitoring

   Naciśnięte ładunki robocze zostały przesunięte na inne komputery i monitorujemy wyniki. Wpływ sprzętu zostanie poddany działaniom naprawczym w odniesieniu do dotkniętych składników fizycznych.

3. 28 sierpnia 2026 23:36 UTCresolved

   Ten incydent został rozwiązany.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 19 sierpnia 2026 12:44 UTCinvestigating

   Obecnie badamy częściową degradację usług w regionie US- SouthWest (LAX) wpływającą na łączność mostową dla podgrupy klientów.

2. 19 sierpnia 2026 13:18 UTCmonitoring

   Wprowadzono rozwiązanie i monitorujemy wyniki.

3. 19 sierpnia 2026 17:10 UTCresolved

   Ten incydent został rozwiązany.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 14 sierpnia 2026 12:33 UTCidentified

   We have identified an issue affecting ControlOne Agent geolocation services. Agents may intermittently fail a location in the portal, or fail a device posture check that requires a location fix. As a workaround partners can remove geolocation from the policy.

2. 14 sierpnia 2026 12:47 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 14 sierpnia 2026 14:34 UTCresolved

   This incident has been resolved.

1. 13 sierpnia 2026 20:10 UTCinvestigating

   We are currently investigating an issue causing a subset of ControlOne Sites to report an incorrect ISP status in the ControlOne portal. This is a visual problem only and does not impact site connectivity.

2. 13 sierpnia 2026 21:06 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 13 sierpnia 2026 22:09 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 14 sierpnia 2026 02:22 UTCresolved

   This incident has been resolved.

1. 11 sierpnia 2026 13:29 UTCinvestigating

   Obecnie badamy częściową degradację usług w regionie US- Southeast (ATL).

2. 11 sierpnia 2026 16:55 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 11 sierpnia 2026 19:47 UTCresolved

   This incident has been resolved.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 7 sierpnia 2026 21:18 UTCidentified

   We are investigating an issue that is causing ControlOne's Management portal and device management API to respond to configuration changes more slowly than usual. The management portal may appear unresponsive until this clears.

2. 7 sierpnia 2026 21:57 UTCresolved

   This incident has been resolved.

1. 30 lipca 2026 18:10 UTCidentified

   Badamy problem wpływający na niepowodzenia połączeń przychodzących i wychodzących. Zidentyfikowaliśmy nieprawidłową konfigurację, która spowodowała ten problem. Pracujemy nad naprawą i wkrótce ją uaktualnimy.

2. 30 lipca 2026 18:16 UTCmonitoring

   Zaimplementowano rozwiązanie, a my dzwonimy jak zwykle. Śledzimy wszystkie inne kwestie.

3. 30 lipca 2026 21:25 UTCresolved

   Ten incydent został rozwiązany. Zaimplementowaliśmy dodatkowy krok, aby zautomatyzowane zarządzanie konfiguracją nie uruchamiało się poza zadeklarowanym oknem konserwacji. Przepraszamy za to zakłócenie.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 30 lipca 2026 15:36 UTCinvestigating

   Zidentyfikowaliśmy problem powodujący częściową degradację usług dla podgrupy klientów w regionie US- SouthCentral ControlOne. Mosty ControlOne mogą doświadczać przerywanej łączności Agenci ControlOne mogą doświadczyć przerywanej łączności lub statusu "Retring"

2. 30 lipca 2026 16:07 UTCmonitoring

   Wprowadzono rozwiązanie i monitorujemy wyniki.

3. 30 lipca 2026 21:55 UTCresolved

   Ten incydent został rozwiązany.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 21 lipca 2026 13:44 UTCinvestigating

   Zidentyfikowaliśmy problem powodujący częściową degradację usług dla 15% klientów w regionie US- Southeast ControlOne. Mosty ControlOne mogą doświadczać przerywanej łączności Agenci ControlOne mogą doświadczyć przerywanej łączności lub statusu "Retring"

2. 21 lipca 2026 14:12 UTCmonitoring

   Wprowadzono rozwiązanie i monitorujemy wyniki.

3. 22 lipca 2026 04:12 UTCresolved

   Ten incydent został rozwiązany.

Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.

1. 9 lipca 2026 17:53 UTCinvestigating

   One of the servers in our fleet experiencing network connectivity issues and our engineering team is investigating. If you are in that server, you may experience intermittent call failures. We will resolve this quickly and thanks for your patience.

2. 9 lipca 2026 17:55 UTCmonitoring

   We restarted the network interface and the calls should flow as usual. Thanks for your patience during this issue.

3. 9 lipca 2026 18:05 UTCresolved

   This incident has been resolved.

1. 7 lipca 2026 17:17 UTCinvestigating

   We are currently investigating an issue causing partial inbound and outbound call failures for some customers. Affected users may experience failed call attempts, delayed call setup, or intermittent call completion issues. The issue does not appear to impact all calls or all customers. Our engineering team is actively investigating and working to restore full calling functionality. We will provide additional updates as more information becomes available.

2. 7 lipca 2026 17:35 UTCmonitoring

   We have taken corrective action to address the partial inbound and outbound call failures affecting some customers. A small number of call processing servers were restarted to restore normal call flow. Call traffic has recovered, and we are currently monitoring the platform to confirm continued stability. Some users may have experienced failed call attempts, delayed call setup, or intermittent call completion issues during the incident. We will continue monitoring and provide a final update once the issue is fully resolved.

3. 7 lipca 2026 21:48 UTCresolved

   The issue causing partial inbound and outbound call failures has been resolved. Corrective action was taken by restarting a small number of call processing servers, which restored normal call flow. After continued monitoring, inbound and outbound calling have remained stable. Some customers may have experienced failed call attempts, delayed call setup, or intermittent call completion issues during the incident window. We apologize for the disruption and appreciate your patience while our team worked to restore service.

1. 29 czerwca 2026 15:24 UTCinvestigating

   We are currently investigating an issue affecting the Realtime Call Center dashboard. Call center event processing is delayed due to a backlog in the event processing service, which may cause dashboard status, agent state, and call activity updates to appear stale or delayed. Inbound and outbound calling are not impacted. Calls continue to route and complete normally. Our team is working to restore realtime event processing and will provide updates as we make progress.

2. 29 czerwca 2026 16:33 UTCidentified

   **Update: Realtime Call Center Dashboard Delays** We have identified the issue affecting the Realtime Call Center dashboard. A backend event processing service became degraded due to a high volume of invalid messages, which caused call center status updates to be delayed. A fix has been implemented, and queued events are now being processed. The dashboard may continue to show delayed or stale status information while the backlog clears. Inbound and outbound calling remain unaffected. Calls continue to route and complete normally. We expect the Realtime Call Center dashboard to be current within the next hour.

3. 29 czerwca 2026 17:02 UTCmonitoring

   Queued events are now processing concurrently, and the Realtime Call Center dashboard is recovering. Due to the backlog and out-of-sequence event processing during recovery, some dashboards may show incorrect call-waiting counts for today. We are working to correct these values where possible. Inbound and outbound calling remain unaffected. Calls continue to route and complete normally. Realtime dashboard activity is expected to normalize as event processing catches up. Daily dashboard statistics should display as usual starting tomorrow.

4. 30 czerwca 2026 07:45 UTCresolved

   This issue has been resolved.

1. 10 czerwca 2026 18:43 UTCidentified

   We are currently experiencing a backlog in our call event processing system, which may cause delays in event-related updates. This may impact CDR processing, BLF status updates, and voicemail arrival indicators. Inbound and outbound calling remain operational, and voicemail delivery is not impacted. Our team is actively working to clear the backlog and will continue to monitor the system.

2. 10 czerwca 2026 20:50 UTCmonitoring

   We have identified and corrected the issue. Call Detail Records (CDRs) in Insights during the incident will be available within next 12 hours. New events are processing normally and are not expected to experience delays. Inbound and outbound calling, voicemail delivery, and new CDR processing are not impacted at this time. We will continue monitoring until the backlog is fully cleared.

3. 11 czerwca 2026 11:34 UTCresolved

   All backlog Call Details Records have been processed. This issue is now resolved.

1. 9 czerwca 2026 20:32 UTCidentified

   We are currently experiencing a backlog in our call event processing system, which may cause delays in event-related updates. This may impact CDR processing, BLF status updates, and voicemail arrival indicators. Inbound and outbound calling remain operational, and voicemail delivery is not impacted. Our team is actively working to clear the backlog and will continue to monitor the system.

2. 9 czerwca 2026 21:44 UTCmonitoring

   We have identified and corrected the issue that caused a backlog in our event processing pipeline. The issue was related to a failed event consumer, which has now been restarted, and queued messages are processing successfully. Some Call Detail Records (CDRs) in Insights may continue to be delayed for the next few hours while the CDR processor catches up on previously delayed events. New events are processing normally and are not expected to experience delays. Inbound and outbound calling, voicemail delivery, and new CDR processing are not impacted at this time. We will continue monitoring until the backlog is fully cleared.

3. 10 czerwca 2026 02:04 UTCresolved

   The backlog processing has been completed. This issue is now resolved.

1. 3 czerwca 2026 15:10 UTCinvestigating

   We are currently investigating an issue causing intermittent inbound and outbound call failures for some customers. Our engineering team is actively working to identify the root cause and restore normal call processing. We will provide an update as soon as more information is available.

2. 3 czerwca 2026 15:49 UTCmonitoring

   We have identified and mitigated the issue that caused intermittent call setup failures for some customers. The issue was related to a degraded backend component that impacted call processing on a subset of voice infrastructure. Our engineering team applied corrective action, and calls are now processing normally. We are continuing to monitor the platform closely to ensure stability.

3. 4 czerwca 2026 04:06 UTCresolved

   This incident has been resolved.

1. 2 czerwca 2026 16:11 UTCinvestigating

   We are currently investigating intermittent inbound and outbound call failures affecting some customers. Our team is actively working to identify the issue and will provide updates as they become available.

2. 2 czerwca 2026 16:49 UTCmonitoring

   We identified an issue affecting call processing on a subset of voice servers, which resulted in intermittent inbound and outbound call failures for some customers. Our engineering team applied corrective action, and call processing has returned to normal. We are continuing to monitor the platform closely to ensure stability.

3. 2 czerwca 2026 20:56 UTCmonitoring

   The issue causing intermittent inbound and outbound call failures has been resolved. Our engineering team identified a capacity constraint in a backend call processing service and applied corrective action. Calls are now processing normally, and the platform remains stable.

4. 2 czerwca 2026 20:57 UTCresolved

   This incident has been resolved.

1. 29 maja 2026 18:41 UTCidentified

   We have identified that our third-party CNAM provider is not responding within our required performance thresholds. To prevent call completion delays or failures, we are temporarily bypassing Caller ID name resolution for affected calls. During this time, calls may complete without a resolved caller identity or display name. Call delivery itself remains operational. Our team is working on a remediation plan and expects to implement a permanent solution within the next 72 hours. We will continue to monitor the service and provide updates as progress is made.

2. 29 maja 2026 21:02 UTCmonitoring

   The Caller Id resolution is working as expected. We are monitoring for any further issues.

3. 29 maja 2026 23:27 UTCresolved

   The CNAM (Caller ID) service is fully functional without any performance constraints.