История сбоев Bunny

1. 3 сентября 2026 г. в 13:47 UTCinvestigating

   Наша инженерная команда в настоящее время изучает проблему на нашей платформе Stream сбоев воспроизведения на наших встроенных игроках, а также сбоев загрузки на нашу платформу.

2. 3 сентября 2026 г. в 14:00 UTCmonitoring

   Мы выявили проблему с бэкэнд-базой данных, которая вызвала тайм-аут на наших видеосерверах (включая наш проигрыватель и процесс загрузки). Проблема была устранена, и сейчас мы следим за ситуацией.

3. 3 сентября 2026 г. в 14:01 UTCmonitoring

   Мы наблюдаем некоторые изолированные проблемы на обратной стороне исправления. Мы работаем над тем, чтобы полностью восстановить процесс на нашей платформе.

4. 3 сентября 2026 г. в 14:25 UTCmonitoring

   Мы подтвердили, что все услуги полностью возобновлены. Наша инженерная команда в настоящее время следит за ситуацией. Воспроизведение полностью возобновилось без проблем. Новые загрузки во время отключения не удались, и, следовательно, потребуется повторная загрузка. Существующие транскодирующие видео не были потеряны, однако статус, о котором сообщается на некоторых из этих видео, может быть неточным.

5. 3 сентября 2026 г. в 15:38 UTCresolved

   Сейчас этот вопрос полностью решен. Наша инженерная команда определила дополнительные ограждения, чтобы предотвратить эту конкретную проблему в будущем.

Автоматический перевод официального обновления инцидента.

1. 3 сентября 2026 г. в 08:53 UTCidentified

   В настоящее время мы наблюдаем ухудшение производительности с поставщиком транзита Tier 1 в районе Лос-Анджелеса из-за нескольких отключений волокон в их сети. Это повлияло на связь между кластером Bunny Optimizer LA и небольшим количеством американских CDN PoP. Трафик был перенаправлен, чтобы минимизировать воздействие.

2. 3 сентября 2026 г. в 13:11 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 2 сентября 2026 г. в 14:38 UTCinvestigating

   Мы расследуем сообщения о широко распространенных сетевых проблемах в Лос-Анджелесе, которые, похоже, также влияют на наши услуги. Мы работаем с нашими поставщиками в этом районе, чтобы понять проблему и смягчить ее.

2. 2 сентября 2026 г. в 15:51 UTCresolved

   Более широкий сетевой инцидент в Лос-Анджелесе повлиял на Bunny Services, размещенные в регионе. Пострадавшие сетевые провайдеры смягчили инцидент, и с тех пор все затронутые сервисы оставались стабильными.

Автоматический перевод официального обновления инцидента.

1. 25 августа 2026 г. в 14:06 UTCidentified

   Мы выявили проблему с нашим контроллером базы данных, над восстановлением которой работает наша команда инженеров. Базы данных, уже находящиеся в сети, не затронуты и будут продолжать работать в обычном режиме, но в настоящее время недоступно управление базами данных.

2. 25 августа 2026 г. в 16:01 UTCidentified

   Наша инженерная команда продолжает работать над этим вопросом. Кроме того, мы знаем, что некоторые работающие базы данных не работают во время этого отключения. Это связано с этим, и наша команда также работает над этим.

3. 25 августа 2026 г. в 16:06 UTCmonitoring

   Проблема решена и пострадавшие службы восстановлены. Наша инженерная команда продолжит мониторинг платформы, чтобы убедиться, что все остается стабильным.

4. 25 августа 2026 г. в 22:31 UTCresolved

   После мониторинга затронутых сервисов мы подтвердили, что управление базами данных и бездействующая активация баз данных работают нормально.

Автоматический перевод официального обновления инцидента.

1. 18 августа 2026 г. в 02:28 UTCinvestigating

   В настоящее время мы изучаем повышенные показатели ошибок на API хранилища в нашем регионе в Лондоне, Великобритания. В результате могут быть затронуты некоторые операции API.

2. 18 августа 2026 г. в 04:09 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

3. 18 августа 2026 г. в 04:29 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 23 июля 2026 г. в 08:33 UTCinvestigating

   В настоящее время мы изучаем периодические сбои воспроизведения в библиотеках Stream, в частности с включенной базовой DRM. Это не влияет на существующее базовое хранилище или другие типы видеобиблиотеки (Enterprise DRM или non DRM).

2. 23 июля 2026 г. в 09:02 UTCresolved

   Мы идентифицировали процесс на одном сервере, вызывающий сбои в преобразовании Basic DRM, и были причиной периодических замораживаний видео / 500s. Это было исправлено инженерной командой.

Автоматический перевод официального обновления инцидента.

1. 17 июля 2026 г. в 10:57 UTCinvestigating

   В настоящее время мы расследуем проблему, когда пользователи не могут войти в панель инструментов Bunny.net. Сами услуги не нарушаются.

2. 17 июля 2026 г. в 11:11 UTCresolved

   Проблема входа в систему была решена после исправления, развернутого нашей командой Frontend.

Автоматический перевод официального обновления инцидента.

1. 1 июля 2026 г. в 09:45 UTCinvestigating

   We are currently investigating a Storage API incident on our German nodes. API Upload/List/Deletions may be affected as a result.

2. 1 июля 2026 г. в 09:53 UTCresolved

   We identified an failing database process on the Storage layer, which has now been resolved by our Engineering team.

1. 27 июня 2026 г. в 18:57 UTCinvestigating

   We are currently investigating reports of issues affecting the dashboard and certain services. Our engineering team is actively investigating the situation. We will share more information as soon as it becomes available.

2. 27 июня 2026 г. в 19:17 UTCmonitoring

   Between 18:34 and 18:57 UTC, a transient connectivity incident affecting one of our upstream providers impacted Storage services and the Core API in Europe. The issue has been resolved. No data loss occurred, as the incident was limited to network connectivity. We are actively monitoring the situation and are working with our upstream provider to gather additional details about the incident.

3. 27 июня 2026 г. в 20:11 UTCresolved

   This incident has been resolved.

1. 26 июня 2026 г. в 14:21 UTCinvestigating

   We are currently investigating an issue affecting Magic Containers and Databases. Our engineering team is actively working to identify the cause and restore normal service. Further updates will be provided as they become available.

2. 26 июня 2026 г. в 14:29 UTCmonitoring

   Service has been restored and affected systems are operating normally. We are continuing to monitor the platform closely to confirm stability and ensure there are no remaining impacts.

3. 26 июня 2026 г. в 14:57 UTCresolved

   This incident has been resolved.

1. 23 июня 2026 г. в 13:22 UTCmonitoring

   We identified intermittent issues affecting the Shield API that may have caused occasional errors for some users. A fix has been implemented, and the service has returned to normal operation. We are currently monitoring to ensure continued stability.

2. 24 июня 2026 г. в 03:11 UTCresolved

   This incident has been resolved.

1. 18 июня 2026 г. в 20:57 UTCinvestigating

   We have identified an issue with free certificate issuance and renewals for custom CDN domains.

2. 18 июня 2026 г. в 20:58 UTCidentified

   We identified that this is due to an issue currently experienced by the Let's Encrypt service. Existing certificates on custom domains will continue to function as normal - however new and cert renewals via our free certificate option may experience errors to the certificate issuance. You can follow https://letsencrypt.status.io/ for more details.

3. 19 июня 2026 г. в 09:37 UTCresolved

   As per Lets Encrypt status page, this has been resolved - we similarly have observed no degradation/failures on certificate renewals since their update went out.

1. 15 июня 2026 г. в 20:25 UTCinvestigating

   We are currently investigating reports of delays affecting synchronization and the propagation of configuration changes. Our team is actively investigating the issue and working to determine its scope and impact. We will provide additional updates as soon as more information becomes available.

2. 15 июня 2026 г. в 20:45 UTCmonitoring

   Our team has identified the underlying cause of the issue and has implemented a fix. The affected processes are now recovering, and pending changes are continuing to propagate. As a result, some synchronization and configuration propagation delays may still be observed while the platform returns to normal operation. We are actively monitoring the recovery and will provide another update once processing has normalized.

3. 15 июня 2026 г. в 21:24 UTCresolved

   All pending configuration changes have propagated across the CDN.

1. 3 июня 2026 г. в 09:02 UTCidentified

   We have identified an issue on free cert issuance and renewals for custom CDN domains. We have observed a delay from Lets Encrypt API endpoint causing these delays. Existing certificates on custom domains will continue to function as normal - however new and cert renewals via our free certificate option may experience a delay to the certificate issuance.

2. 3 июня 2026 г. в 12:38 UTCresolved

   We no longer see delays stemming from Lets Encrypt and the issue is considered resolved.

1. 1 июня 2026 г. в 16:19 UTCinvestigating

   We are currently investigating a service degradation affecting Stream. Users may experience delays with video uploads, video fetching operations, and transcoding jobs. Playback, delivery, and management of existing videos are not affected and continue to operate normally. Our engineering team is actively working to identify the cause and restore full service. Further updates will be provided as they become available.

2. 1 июня 2026 г. в 17:18 UTCmonitoring

   We are seeing normal processing resume for newly submitted video uploads and transcoding jobs. Some videos that entered processing during the incident may remain delayed. Our team is actively reviewing and working through the remaining affected jobs while continuing to monitor the service. Further updates will be provided as they become available.

3. 1 июня 2026 г. в 20:17 UTCresolved

   This incident has been resolved.

1. 1 июня 2026 г. в 16:02 UTCinvestigating

   We are currently investigating an issue affecting Magic Containers and Databases. Our engineering team is actively working to identify the cause and restore normal service. Further updates will be provided as they become available.

2. 1 июня 2026 г. в 17:24 UTCmonitoring

   Service has been restored and affected systems are operating normally. We are continuing to monitor the platform closely to confirm stability and ensure there are no remaining impacts.

3. 1 июня 2026 г. в 20:18 UTCresolved

   This incident has been resolved.

4. 3 июня 2026 г. в 09:15 UTCpostmortem

   Processing Delays and Intermittent Timeouts for Magic Containers On June 1, Magic Containers experienced degraded service for approximately one hour due to a network connectivity issue in our hosting provider's environment. Customers running workloads may have seen increased processing delays, intermittent timeouts, temporary disruption, or reduced availability as some workloads were automatically rescheduled. The issue was resolved after the underlying network conditions stabilized, allowing scheduling activity to resume normally. We are improving the resilience of Magic Containers so degraded connectivity can be detected and handled more effectively, not only complete outages. We are also adding safeguards to reduce unnecessary or duplicate workload rescheduling during degraded conditions, helping limit customer impact if similar infrastructure issues occur again.

1. 1 июня 2026 г. в 07:24 UTCinvestigating

   We're currently investigating an issue causing the Optimizer to serve a number of 5XX errors. We're investigating this as a matter of priority and we will provide updates here as soon as we can.

2. 1 июня 2026 г. в 10:38 UTCresolved

   This incident has been resolved.

1. 26 мая 2026 г. в 06:47 UTCidentified

   We've been observing 25 to 30 nodes in various PoPs around the world exhibiting constant delays with syncing their configuration since yesterday evening. We've depooled all impacted nodes as a temporary workaround and working on a permanent fix.

2. 26 мая 2026 г. в 16:00 UTCmonitoring

   A fix is being staged on a subset of affected nodes. Impacted nodes are since identifying the issue isolated from CDN traffic and only receiving test traffic. Further updates will be provided after testing concludes and deployment to all affected nodes is complete.

3. 27 мая 2026 г. в 11:15 UTCresolved

   The fix has been deployed to all nodes. We will be readding the missing nodes to the pool today.

1. 22 мая 2026 г. в 11:19 UTCinvestigating

   As a continuation of our DNS issues last night, we are currently investigating an issue when newly CDN accelerating a DNS record results in CDN 502s for the domain in question. Existing pull zones and pull zones not created via CDN Acceleration are not affected. Existing CDN Accelerated zones are also not affected.

2. 22 мая 2026 г. в 14:22 UTCidentified

   We have identified a discrepancy in our backend process that has caused zone id mismatch on new CDN Accelerated zones. The team are currently working to deploy a hotfix to address the problem.

3. 22 мая 2026 г. в 19:03 UTCmonitoring

   A fix has been applied and we're now working through the backlog to process all pending updates. We expect processing to be back to real-time in the next 6 hours.

4. 23 мая 2026 г. в 13:52 UTCresolved

   This incident has been resolved.

1. 21 мая 2026 г. в 16:39 UTCidentified

   We've identified an issue with the configuration of one of our primary domains, bunny.net, impacting most of our services. We're working to fix it.

2. 21 мая 2026 г. в 16:51 UTCmonitoring

   A fix has been implemented and all impacted services have recovered. We're monitoring.

3. 21 мая 2026 г. в 18:21 UTCresolved

   An internal process failure related to the management of our bunny.net domain with one of our domain registrars led to the temporary suspension of the domain, causing multiple services under bunny.net to become unavailable. After identifying and confirming the issue, we worked with the registrar to restore the domain and all affected services are now recovering as DNS changes propagate globally. We have identified the root cause internally and are implementing additional safeguards and escalation procedures to ensure this cannot happen again. During the outage, products and services under bunny.net experienced varying levels of disruption depending on DNS propagation and their dependency on bunny.net infrastructure and Bunny DNS. Services including the Website, Dashboard, API, DNS, and related tools experienced widespread availability issues. Other products such as Stream and Magic Containers saw limited disruption and remained largely operational for most users, though some functionality was impacted depending on DNS resolution and service dependencies. Core services such as CDN delivery and Storage remained operational throughout the incident. We will publish a full public RCA once the incident is fully resolved, including additional details around the timeline, service impact, root cause, and the preventative measures being implemented. We're deeply sorry for the disruption and inconvenience caused. We expect the situation to fully resolve over the next few hours as DNS propagation completes worldwide. If you have any questions, please contact [email protected].