История сбоев Cytracom

1. 6 сентября 2026 г. в 03:09 UTCinvestigating

   Мы расследуем проблему, которая заставляет портал управления ControlOne и API управления устройствами реагировать на запросы медленнее, чем обычно. Портал управления может показаться не реагирующим, и Агенты ControlOne, пытающиеся подключиться, могут испытывать трудности с подключением.

2. 6 сентября 2026 г. в 03:24 UTCidentified

   Этот вопрос был определен, и в настоящее время осуществляется исправление.

3. 6 сентября 2026 г. в 03:39 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

4. 6 сентября 2026 г. в 05:05 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 2 сентября 2026 г. в 18:48 UTCinvestigating

   В настоящее время мы расследуем проблему, затрагивающую входящие звонки для некоторых клиентов. Сбой связан с отказом оптоволоконной сети, влияющим на одного из наших поставщиков услуг. Наша команда активно работает с провайдером, чтобы как можно быстрее контролировать восстановление и восстановить нормальный входящий вызов. Исходящие вызовы (если они не направлены через этого провайдера) и другие услуги в настоящее время не затронуты. Мы предоставим дополнительные обновления по мере поступления дополнительной информации.

2. 2 сентября 2026 г. в 19:08 UTCinvestigating

   Мы продолжаем расследование этого вопроса.

3. 2 сентября 2026 г. в 19:58 UTCidentified

   Мы определили источник периодических перепадов входящих вызовов, влияющих на подмножество клиентов. Наш ведущий голосовой оператор подтвердил сетевой инцидент, вызывающий потерю пакетов на части голосового трафика. Это приводит к тому, что входящие вызовы периодически не проходят или падают вскоре после подключения. Наш оператор активно работает над восстановлением нормального поведения звонков, и мы внимательно следим за качеством звонков в затронутых учетных записях. Мы будем предоставлять обновления, поскольку у нас есть больше информации.

4. 3 сентября 2026 г. в 13:49 UTCmonitoring

   Наш ведущий наблюдает за ожидаемым поведением вызовов и будет продолжать следить за стабильностью.

5. 3 сентября 2026 г. в 18:58 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 2 сентября 2026 г. в 16:07 UTCinvestigating

   В настоящее время мы расследуем частичную деградацию услуг в регионе США-Юго-Запад (LAX). Некоторые клиенты испытывают более высокую задержку и прерывистую связь, чем обычно.

2. 2 сентября 2026 г. в 19:49 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

3. 3 сентября 2026 г. в 12:54 UTCresolved

   Отремонтировано волокно третьей стороны, затрагивающее несколько региональных маршрутов сети перевозчиков в Южной Калифорнии, и восстановлены услуги.

Автоматический перевод официального обновления инцидента.

1. 28 августа 2026 г. в 17:29 UTCinvestigating

   В настоящее время мы расследуем частичное ухудшение качества обслуживания в регионе США-Юго-Восток (ATL), что влияет на подсистему подключения к мосту для ряда клиентов.

2. 28 августа 2026 г. в 19:57 UTCmonitoring

   Влиятельные рабочие нагрузки были перенесены на альтернативные вычислительные хосты, и мы отслеживаем результаты. Пострадавшее оборудование будет подвергаться действиям по восстановлению для пострадавших физических компонентов.

3. 28 августа 2026 г. в 23:36 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 19 августа 2026 г. в 12:44 UTCinvestigating

   В настоящее время мы расследуем частичное ухудшение качества обслуживания в регионе США-Юго-Запад (LAX), что влияет на подсистему подключения к мосту для ряда клиентов.

2. 19 августа 2026 г. в 13:18 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

3. 19 августа 2026 г. в 17:10 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 14 августа 2026 г. в 12:33 UTCidentified

   We have identified an issue affecting ControlOne Agent geolocation services. Agents may intermittently fail a location in the portal, or fail a device posture check that requires a location fix. As a workaround partners can remove geolocation from the policy.

2. 14 августа 2026 г. в 12:47 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 14 августа 2026 г. в 14:34 UTCresolved

   This incident has been resolved.

1. 13 августа 2026 г. в 20:10 UTCinvestigating

   В настоящее время мы расследуем проблему, в результате которой подмножество сайтов ControlOne сообщает о неправильном статусе интернет-провайдера на портале ControlOne. Это только визуальная проблема и не влияет на подключение к сайту.

2. 13 августа 2026 г. в 21:06 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 13 августа 2026 г. в 22:09 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 14 августа 2026 г. в 02:22 UTCresolved

   This incident has been resolved.

Автоматический перевод официального обновления инцидента.

1. 11 августа 2026 г. в 13:29 UTCinvestigating

   В настоящее время мы расследуем частичное ухудшение обслуживания в регионе США-Юго-Восток.

2. 11 августа 2026 г. в 16:55 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

3. 11 августа 2026 г. в 19:47 UTCresolved

   This incident has been resolved.

Автоматический перевод официального обновления инцидента.

1. 7 августа 2026 г. в 21:18 UTCidentified

   Мы изучаем проблему, которая заставляет портал управления ControlOne и API управления устройствами реагировать на изменения конфигурации медленнее, чем обычно. Портал управления может показаться невосприимчивым, пока это не прояснится.

2. 7 августа 2026 г. в 21:57 UTCresolved

   This incident has been resolved.

Автоматический перевод официального обновления инцидента.

1. 30 июля 2026 г. в 18:10 UTCidentified

   Мы расследуем проблему, влияющую на сбои входящих и исходящих вызовов. Мы выявили неправильную конфигурацию, которая вызвала эту проблему. Мы работаем над исправлением и скоро обновимся.

2. 30 июля 2026 г. в 18:16 UTCmonitoring

   Реализовано исправление, и звонки идут как обычно. Мы внимательно следим за любыми другими вопросами.

3. 30 июля 2026 г. в 21:25 UTCresolved

   Этот инцидент был урегулирован. Мы внедрили дополнительный шаг, чтобы автоматическое управление конфигурациями не запускалось за пределами объявленного окна обслуживания. Мы приносим извинения за нарушения, вызванные этим.

Автоматический перевод официального обновления инцидента.

1. 30 июля 2026 г. в 15:36 UTCinvestigating

   Мы выявили проблему, вызывающую частичную деградацию обслуживания для подгруппы клиентов в регионе US-SouthCentral ControlOne. Мосты ControlOne могут испытывать прерывистую связь Агенты ControlOne могут испытывать прерывистую связь или статус «Перезагрузки»

2. 30 июля 2026 г. в 16:07 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

3. 30 июля 2026 г. в 21:55 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 21 июля 2026 г. в 13:44 UTCinvestigating

   Мы выявили проблему, вызывающую частичную деградацию обслуживания 15% клиентов в регионе ControlOne. Мосты ControlOne могут испытывать прерывистую связь Агенты ControlOne могут испытывать прерывистую связь или статус «Перезагрузки»

2. 21 июля 2026 г. в 14:12 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

3. 22 июля 2026 г. в 04:12 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 9 июля 2026 г. в 17:53 UTCinvestigating

   One of the servers in our fleet experiencing network connectivity issues and our engineering team is investigating. If you are in that server, you may experience intermittent call failures. We will resolve this quickly and thanks for your patience.

2. 9 июля 2026 г. в 17:55 UTCmonitoring

   We restarted the network interface and the calls should flow as usual. Thanks for your patience during this issue.

3. 9 июля 2026 г. в 18:05 UTCresolved

   This incident has been resolved.

1. 7 июля 2026 г. в 17:17 UTCinvestigating

   We are currently investigating an issue causing partial inbound and outbound call failures for some customers. Affected users may experience failed call attempts, delayed call setup, or intermittent call completion issues. The issue does not appear to impact all calls or all customers. Our engineering team is actively investigating and working to restore full calling functionality. We will provide additional updates as more information becomes available.

2. 7 июля 2026 г. в 17:35 UTCmonitoring

   We have taken corrective action to address the partial inbound and outbound call failures affecting some customers. A small number of call processing servers were restarted to restore normal call flow. Call traffic has recovered, and we are currently monitoring the platform to confirm continued stability. Some users may have experienced failed call attempts, delayed call setup, or intermittent call completion issues during the incident. We will continue monitoring and provide a final update once the issue is fully resolved.

3. 7 июля 2026 г. в 21:48 UTCresolved

   The issue causing partial inbound and outbound call failures has been resolved. Corrective action was taken by restarting a small number of call processing servers, which restored normal call flow. After continued monitoring, inbound and outbound calling have remained stable. Some customers may have experienced failed call attempts, delayed call setup, or intermittent call completion issues during the incident window. We apologize for the disruption and appreciate your patience while our team worked to restore service.

1. 29 июня 2026 г. в 15:24 UTCinvestigating

   We are currently investigating an issue affecting the Realtime Call Center dashboard. Call center event processing is delayed due to a backlog in the event processing service, which may cause dashboard status, agent state, and call activity updates to appear stale or delayed. Inbound and outbound calling are not impacted. Calls continue to route and complete normally. Our team is working to restore realtime event processing and will provide updates as we make progress.

2. 29 июня 2026 г. в 16:33 UTCidentified

   **Update: Realtime Call Center Dashboard Delays** We have identified the issue affecting the Realtime Call Center dashboard. A backend event processing service became degraded due to a high volume of invalid messages, which caused call center status updates to be delayed. A fix has been implemented, and queued events are now being processed. The dashboard may continue to show delayed or stale status information while the backlog clears. Inbound and outbound calling remain unaffected. Calls continue to route and complete normally. We expect the Realtime Call Center dashboard to be current within the next hour.

3. 29 июня 2026 г. в 17:02 UTCmonitoring

   Queued events are now processing concurrently, and the Realtime Call Center dashboard is recovering. Due to the backlog and out-of-sequence event processing during recovery, some dashboards may show incorrect call-waiting counts for today. We are working to correct these values where possible. Inbound and outbound calling remain unaffected. Calls continue to route and complete normally. Realtime dashboard activity is expected to normalize as event processing catches up. Daily dashboard statistics should display as usual starting tomorrow.

4. 30 июня 2026 г. в 07:45 UTCresolved

   This issue has been resolved.

1. 10 июня 2026 г. в 18:43 UTCidentified

   We are currently experiencing a backlog in our call event processing system, which may cause delays in event-related updates. This may impact CDR processing, BLF status updates, and voicemail arrival indicators. Inbound and outbound calling remain operational, and voicemail delivery is not impacted. Our team is actively working to clear the backlog and will continue to monitor the system.

2. 10 июня 2026 г. в 20:50 UTCmonitoring

   We have identified and corrected the issue. Call Detail Records (CDRs) in Insights during the incident will be available within next 12 hours. New events are processing normally and are not expected to experience delays. Inbound and outbound calling, voicemail delivery, and new CDR processing are not impacted at this time. We will continue monitoring until the backlog is fully cleared.

3. 11 июня 2026 г. в 11:34 UTCresolved

   All backlog Call Details Records have been processed. This issue is now resolved.

1. 9 июня 2026 г. в 20:32 UTCidentified

   We are currently experiencing a backlog in our call event processing system, which may cause delays in event-related updates. This may impact CDR processing, BLF status updates, and voicemail arrival indicators. Inbound and outbound calling remain operational, and voicemail delivery is not impacted. Our team is actively working to clear the backlog and will continue to monitor the system.

2. 9 июня 2026 г. в 21:44 UTCmonitoring

   We have identified and corrected the issue that caused a backlog in our event processing pipeline. The issue was related to a failed event consumer, which has now been restarted, and queued messages are processing successfully. Some Call Detail Records (CDRs) in Insights may continue to be delayed for the next few hours while the CDR processor catches up on previously delayed events. New events are processing normally and are not expected to experience delays. Inbound and outbound calling, voicemail delivery, and new CDR processing are not impacted at this time. We will continue monitoring until the backlog is fully cleared.

3. 10 июня 2026 г. в 02:04 UTCresolved

   The backlog processing has been completed. This issue is now resolved.

1. 3 июня 2026 г. в 15:10 UTCinvestigating

   We are currently investigating an issue causing intermittent inbound and outbound call failures for some customers. Our engineering team is actively working to identify the root cause and restore normal call processing. We will provide an update as soon as more information is available.

2. 3 июня 2026 г. в 15:49 UTCmonitoring

   We have identified and mitigated the issue that caused intermittent call setup failures for some customers. The issue was related to a degraded backend component that impacted call processing on a subset of voice infrastructure. Our engineering team applied corrective action, and calls are now processing normally. We are continuing to monitor the platform closely to ensure stability.

3. 4 июня 2026 г. в 04:06 UTCresolved

   This incident has been resolved.

1. 2 июня 2026 г. в 16:11 UTCinvestigating

   We are currently investigating intermittent inbound and outbound call failures affecting some customers. Our team is actively working to identify the issue and will provide updates as they become available.

2. 2 июня 2026 г. в 16:49 UTCmonitoring

   We identified an issue affecting call processing on a subset of voice servers, which resulted in intermittent inbound and outbound call failures for some customers. Our engineering team applied corrective action, and call processing has returned to normal. We are continuing to monitor the platform closely to ensure stability.

3. 2 июня 2026 г. в 20:56 UTCmonitoring

   The issue causing intermittent inbound and outbound call failures has been resolved. Our engineering team identified a capacity constraint in a backend call processing service and applied corrective action. Calls are now processing normally, and the platform remains stable.

4. 2 июня 2026 г. в 20:57 UTCresolved

   This incident has been resolved.

1. 29 мая 2026 г. в 18:41 UTCidentified

   We have identified that our third-party CNAM provider is not responding within our required performance thresholds. To prevent call completion delays or failures, we are temporarily bypassing Caller ID name resolution for affected calls. During this time, calls may complete without a resolved caller identity or display name. Call delivery itself remains operational. Our team is working on a remediation plan and expects to implement a permanent solution within the next 72 hours. We will continue to monitor the service and provide updates as progress is made.

2. 29 мая 2026 г. в 21:02 UTCmonitoring

   The Caller Id resolution is working as expected. We are monitoring for any further issues.

3. 29 мая 2026 г. в 23:27 UTCresolved

   The CNAM (Caller ID) service is fully functional without any performance constraints.