Störungsverlauf von Cytracom

1. 6. September 2026 um 03:09 UTCinvestigating

   Wir untersuchen ein Problem, das dazu führt, dass das Management-Portal und die Geräteverwaltungs-API von ControlOne langsamer als üblich auf Anfragen reagieren. Das Managementportal scheint möglicherweise nicht mehr zu reagieren, und ControlOne-Agenten, die versuchen, eine Verbindung herzustellen, können Schwierigkeiten beim Verbinden haben.

2. 6. September 2026 um 03:24 UTCidentified

   Das Problem wurde identifiziert und ein Fix wird implementiert.

3. 6. September 2026 um 03:39 UTCmonitoring

   Ein Fix wurde implementiert und wir überwachen die Ergebnisse.

4. 6. September 2026 um 05:05 UTCresolved

   Dieser Vorfall wurde behoben.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 2. September 2026 um 18:48 UTCinvestigating

   Wir untersuchen derzeit ein Problem, das eingehende Anrufe für einige Kunden betrifft. Die Störung hängt mit einem Glasfasernetzausfall zusammen, der einen unserer vorgelagerten Dienstleister betrifft. Unser Team arbeitet aktiv mit dem Anbieter zusammen, um die Wiederherstellung zu überwachen und normale eingehende Anrufe so schnell wie möglich wiederherzustellen. Abgehende Anrufe (sofern nicht über diesen Anbieter weitergeleitet) und andere Dienste sind derzeit nicht betroffen. Wir werden zusätzliche Updates bereitstellen, sobald weitere Informationen verfügbar sind.

2. 2. September 2026 um 19:08 UTCinvestigating

   Wir werden dieses Problem weiter untersuchen.

3. 2. September 2026 um 19:58 UTCidentified

   Wir haben die Quelle von intermittierenden eingehenden Anrufen identifiziert, die eine Teilmenge von Kunden betreffen. Unser Upstream-Voice-Carrier hat einen Netzwerkvorfall bestätigt, der Paketverlust bei einem Teil des Sprachverkehrs verursacht. Dies führt dazu, dass eingehende Anrufe intermittierend nicht durchklingeln oder kurz nach der Verbindung fallen. Unser Carrier arbeitet aktiv daran, das normale Anrufverhalten wiederherzustellen, und wir überwachen die Anrufqualität auf den betroffenen Konten genau. Wir werden Updates bereitstellen, da wir mehr Informationen haben.

4. 3. September 2026 um 13:49 UTCmonitoring

   Unser Upstream-Carrier beobachtet das erwartete Anrufverhalten und wird weiterhin auf Stabilität achten.

5. 3. September 2026 um 18:58 UTCresolved

   Dieser Vorfall wurde behoben.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 2. September 2026 um 16:07 UTCinvestigating

   Wir untersuchen derzeit einen teilweisen Serviceabbau in der Region USA-Südwest (LAX). Einige Kunden erleben eine höhere als normale Latenz und intermittierende Konnektivität.

2. 2. September 2026 um 19:49 UTCmonitoring

   Ein Fix wurde implementiert und wir überwachen die Ergebnisse.

3. 3. September 2026 um 12:54 UTCresolved

   Ein Glasfaserschnitt von Drittanbietern, der mehrere regionale Carrier-Netzwerkpfade in Südkalifornien betrifft, wurde repariert und die Dienste wurden wiederhergestellt.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 28. August 2026 um 17:29 UTCinvestigating

   Wir untersuchen derzeit einen teilweisen Serviceabbau in der Region USA-Südost (ATL), der sich auf die Brückenverbindung für eine Teilgruppe von Kunden auswirkt.

2. 28. August 2026 um 19:57 UTCmonitoring

   Die betroffenen Workloads wurden auf alternative Compute-Hosts verschoben und wir überwachen die Ergebnisse. Die betroffene Hardware wird Sanierungsmaßnahmen für die betroffenen physischen Komponenten unterzogen.

3. 28. August 2026 um 23:36 UTCresolved

   Dieser Vorfall wurde behoben.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 19. August 2026 um 12:44 UTCinvestigating

   Wir untersuchen derzeit einen teilweisen Serviceabbau in der Region USA-Südwest (LAX), der sich auf die Brückenverbindung für eine Teilgruppe von Kunden auswirkt.

2. 19. August 2026 um 13:18 UTCmonitoring

   Ein Fix wurde implementiert und wir überwachen die Ergebnisse.

3. 19. August 2026 um 17:10 UTCresolved

   Dieser Vorfall wurde behoben.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 14. August 2026 um 12:33 UTCidentified

   We have identified an issue affecting ControlOne Agent geolocation services. Agents may intermittently fail a location in the portal, or fail a device posture check that requires a location fix. As a workaround partners can remove geolocation from the policy.

2. 14. August 2026 um 12:47 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 14. August 2026 um 14:34 UTCresolved

   This incident has been resolved.

1. 13. August 2026 um 20:10 UTCinvestigating

   Wir untersuchen derzeit ein Problem, das dazu führt, dass eine Teilmenge von ControlOne-Sites einen falschen ISP-Status im ControlOne-Portal meldet. Dies ist nur ein visuelles Problem und hat keine Auswirkungen auf die Konnektivität der Website.

2. 13. August 2026 um 21:06 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 13. August 2026 um 22:09 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 14. August 2026 um 02:22 UTCresolved

   This incident has been resolved.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 11. August 2026 um 13:29 UTCinvestigating

   Wir untersuchen derzeit eine teilweise Service-Degradation in der Region USA-Südost (ATL).

2. 11. August 2026 um 16:55 UTCmonitoring

   Ein Fix wurde implementiert und wir überwachen die Ergebnisse.

3. 11. August 2026 um 19:47 UTCresolved

   This incident has been resolved.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 7. August 2026 um 21:18 UTCidentified

   Wir untersuchen ein Problem, das dazu führt, dass das Management-Portal und die Geräteverwaltungs-API von ControlOne langsamer als üblich auf Konfigurationsänderungen reagieren. Das Management-Portal erscheint möglicherweise unempfänglich, bis dies gelöscht wird.

2. 7. August 2026 um 21:57 UTCresolved

   This incident has been resolved.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 30. Juli 2026 um 18:10 UTCidentified

   Wir untersuchen ein Problem, das sich auf eingehende und ausgehende Anrufausfälle auswirkt. Wir haben eine falsche Konfiguration identifiziert, die dieses Problem verursacht hat. Wir arbeiten an einem Fix und werden bald aktualisieren.

2. 30. Juli 2026 um 18:16 UTCmonitoring

   Ein Fix wurde implementiert und wir die Anrufe fließen wie gewohnt. Wir beobachten alle anderen Fragen genau.

3. 30. Juli 2026 um 21:25 UTCresolved

   Dieser Vorfall wurde behoben. Wir haben einen zusätzlichen Schritt implementiert, damit das automatisierte Konfigurationsmanagement nicht außerhalb eines deklarierten Wartungsfensters ausgelöst wird. Wir entschuldigen uns für die dadurch verursachte Störung.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 30. Juli 2026 um 15:36 UTCinvestigating

   Wir haben ein Problem identifiziert, das einen teilweisen Serviceabbau für eine Teilmenge von Kunden in der Region US-SouthCentral ControlOne verursacht. ControlOne Bridges können intermittierende Konnektivität erleben ControlOne-Agenten können intermittierende Konnektivität oder den Status "Wiederholen" erfahren

2. 30. Juli 2026 um 16:07 UTCmonitoring

   Ein Fix wurde implementiert und wir überwachen die Ergebnisse.

3. 30. Juli 2026 um 21:55 UTCresolved

   Dieser Vorfall wurde behoben.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 21. Juli 2026 um 13:44 UTCinvestigating

   Wir haben ein Problem identifiziert, das eine teilweise Service-Degradation für eine 15% -Teilgruppe von Kunden in der Region USA-Southeast ControlOne verursacht. ControlOne Bridges können intermittierende Konnektivität erleben ControlOne-Agenten können intermittierende Konnektivität oder den Status "Wiederholen" erfahren

2. 21. Juli 2026 um 14:12 UTCmonitoring

   Ein Fix wurde implementiert und wir überwachen die Ergebnisse.

3. 22. Juli 2026 um 04:12 UTCresolved

   Dieser Vorfall wurde behoben.

Automatisch aus der offiziellen Störungsmeldung übersetzt.

1. 9. Juli 2026 um 17:53 UTCinvestigating

   One of the servers in our fleet experiencing network connectivity issues and our engineering team is investigating. If you are in that server, you may experience intermittent call failures. We will resolve this quickly and thanks for your patience.

2. 9. Juli 2026 um 17:55 UTCmonitoring

   We restarted the network interface and the calls should flow as usual. Thanks for your patience during this issue.

3. 9. Juli 2026 um 18:05 UTCresolved

   This incident has been resolved.

1. 7. Juli 2026 um 17:17 UTCinvestigating

   We are currently investigating an issue causing partial inbound and outbound call failures for some customers. Affected users may experience failed call attempts, delayed call setup, or intermittent call completion issues. The issue does not appear to impact all calls or all customers. Our engineering team is actively investigating and working to restore full calling functionality. We will provide additional updates as more information becomes available.

2. 7. Juli 2026 um 17:35 UTCmonitoring

   We have taken corrective action to address the partial inbound and outbound call failures affecting some customers. A small number of call processing servers were restarted to restore normal call flow. Call traffic has recovered, and we are currently monitoring the platform to confirm continued stability. Some users may have experienced failed call attempts, delayed call setup, or intermittent call completion issues during the incident. We will continue monitoring and provide a final update once the issue is fully resolved.

3. 7. Juli 2026 um 21:48 UTCresolved

   The issue causing partial inbound and outbound call failures has been resolved. Corrective action was taken by restarting a small number of call processing servers, which restored normal call flow. After continued monitoring, inbound and outbound calling have remained stable. Some customers may have experienced failed call attempts, delayed call setup, or intermittent call completion issues during the incident window. We apologize for the disruption and appreciate your patience while our team worked to restore service.

1. 29. Juni 2026 um 15:24 UTCinvestigating

   We are currently investigating an issue affecting the Realtime Call Center dashboard. Call center event processing is delayed due to a backlog in the event processing service, which may cause dashboard status, agent state, and call activity updates to appear stale or delayed. Inbound and outbound calling are not impacted. Calls continue to route and complete normally. Our team is working to restore realtime event processing and will provide updates as we make progress.

2. 29. Juni 2026 um 16:33 UTCidentified

   **Update: Realtime Call Center Dashboard Delays** We have identified the issue affecting the Realtime Call Center dashboard. A backend event processing service became degraded due to a high volume of invalid messages, which caused call center status updates to be delayed. A fix has been implemented, and queued events are now being processed. The dashboard may continue to show delayed or stale status information while the backlog clears. Inbound and outbound calling remain unaffected. Calls continue to route and complete normally. We expect the Realtime Call Center dashboard to be current within the next hour.

3. 29. Juni 2026 um 17:02 UTCmonitoring

   Queued events are now processing concurrently, and the Realtime Call Center dashboard is recovering. Due to the backlog and out-of-sequence event processing during recovery, some dashboards may show incorrect call-waiting counts for today. We are working to correct these values where possible. Inbound and outbound calling remain unaffected. Calls continue to route and complete normally. Realtime dashboard activity is expected to normalize as event processing catches up. Daily dashboard statistics should display as usual starting tomorrow.

4. 30. Juni 2026 um 07:45 UTCresolved

   This issue has been resolved.

1. 10. Juni 2026 um 18:43 UTCidentified

   We are currently experiencing a backlog in our call event processing system, which may cause delays in event-related updates. This may impact CDR processing, BLF status updates, and voicemail arrival indicators. Inbound and outbound calling remain operational, and voicemail delivery is not impacted. Our team is actively working to clear the backlog and will continue to monitor the system.

2. 10. Juni 2026 um 20:50 UTCmonitoring

   We have identified and corrected the issue. Call Detail Records (CDRs) in Insights during the incident will be available within next 12 hours. New events are processing normally and are not expected to experience delays. Inbound and outbound calling, voicemail delivery, and new CDR processing are not impacted at this time. We will continue monitoring until the backlog is fully cleared.

3. 11. Juni 2026 um 11:34 UTCresolved

   All backlog Call Details Records have been processed. This issue is now resolved.

1. 9. Juni 2026 um 20:32 UTCidentified

   We are currently experiencing a backlog in our call event processing system, which may cause delays in event-related updates. This may impact CDR processing, BLF status updates, and voicemail arrival indicators. Inbound and outbound calling remain operational, and voicemail delivery is not impacted. Our team is actively working to clear the backlog and will continue to monitor the system.

2. 9. Juni 2026 um 21:44 UTCmonitoring

   We have identified and corrected the issue that caused a backlog in our event processing pipeline. The issue was related to a failed event consumer, which has now been restarted, and queued messages are processing successfully. Some Call Detail Records (CDRs) in Insights may continue to be delayed for the next few hours while the CDR processor catches up on previously delayed events. New events are processing normally and are not expected to experience delays. Inbound and outbound calling, voicemail delivery, and new CDR processing are not impacted at this time. We will continue monitoring until the backlog is fully cleared.

3. 10. Juni 2026 um 02:04 UTCresolved

   The backlog processing has been completed. This issue is now resolved.

1. 3. Juni 2026 um 15:10 UTCinvestigating

   We are currently investigating an issue causing intermittent inbound and outbound call failures for some customers. Our engineering team is actively working to identify the root cause and restore normal call processing. We will provide an update as soon as more information is available.

2. 3. Juni 2026 um 15:49 UTCmonitoring

   We have identified and mitigated the issue that caused intermittent call setup failures for some customers. The issue was related to a degraded backend component that impacted call processing on a subset of voice infrastructure. Our engineering team applied corrective action, and calls are now processing normally. We are continuing to monitor the platform closely to ensure stability.

3. 4. Juni 2026 um 04:06 UTCresolved

   This incident has been resolved.

1. 2. Juni 2026 um 16:11 UTCinvestigating

   We are currently investigating intermittent inbound and outbound call failures affecting some customers. Our team is actively working to identify the issue and will provide updates as they become available.

2. 2. Juni 2026 um 16:49 UTCmonitoring

   We identified an issue affecting call processing on a subset of voice servers, which resulted in intermittent inbound and outbound call failures for some customers. Our engineering team applied corrective action, and call processing has returned to normal. We are continuing to monitor the platform closely to ensure stability.

3. 2. Juni 2026 um 20:56 UTCmonitoring

   The issue causing intermittent inbound and outbound call failures has been resolved. Our engineering team identified a capacity constraint in a backend call processing service and applied corrective action. Calls are now processing normally, and the platform remains stable.

4. 2. Juni 2026 um 20:57 UTCresolved

   This incident has been resolved.

1. 29. Mai 2026 um 18:41 UTCidentified

   We have identified that our third-party CNAM provider is not responding within our required performance thresholds. To prevent call completion delays or failures, we are temporarily bypassing Caller ID name resolution for affected calls. During this time, calls may complete without a resolved caller identity or display name. Call delivery itself remains operational. Our team is working on a remediation plan and expects to implement a permanent solution within the next 72 hours. We will continue to monitor the service and provide updates as progress is made.

2. 29. Mai 2026 um 21:02 UTCmonitoring

   The Caller Id resolution is working as expected. We are monitoring for any further issues.

3. 29. Mai 2026 um 23:27 UTCresolved

   The CNAM (Caller ID) service is fully functional without any performance constraints.