167 Grafana incidents · март 2026 г. — official updates, affected components, duration and resolution details.
В настоящее время мы расследуем вопрос, влияющий на Frontend Observability с 15:20 UTC. Мы предоставим еще одно обновление, как только у нас будет больше информации.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
В настоящее время мы изучаем проблему, влияющую на облачные интеграции в prod-eu-west-3. Мы предоставим еще одно обновление, когда у нас будет больше информации.
Мы продолжаем расследование этого вопроса.
Вещи больше не деградируют. В настоящее время мы отслеживаем этот вопрос
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Вопрос выявлен, мы работаем над исправлением
повреждается и путь чтения.
проблема решена, мы наблюдаем за камерой
Автоматический перевод официального обновления инцидента.
Начиная примерно с 12:37 UTC, некоторые экземпляры Hosted Grafana в нескольких регионах испытывают проблемы с доступностью. Наша команда определила первопричину, и в настоящее время происходит исправление. Пострадавшие экземпляры будут автоматически восстанавливаться после того, как исправление было применено. Никаких действий с вашей стороны не требуется. Мы предоставим дополнительные обновления по мере их появления и приносим извинения за любые нарушения, которые могут возникнуть.
Мы продолжаем работать над решением этой проблемы.
Как было реализовано, исправление и экземпляры Hosted Grafana вернулись к нормальному уровню. Мы продолжим следить за этим вопросом.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Мы изучаем повышенную задержку и периодические ошибки при проглатывании следов Grafana Cloud Traces в AWS Germany. Клиенты могут видеть задержку проглатывания следов и неудачные записи следов. Следующее обновление к 10:30 UTC.
Между 09:31 и 10:13 UTC 23 октября 2026 года (42 минуты) в Grafana Cloud Traces в AWS Germany наблюдалась повышенная задержка приема пищи и периодические сбои записи следов, влияющие как на прямое попадание в организм следов, так и на прием внутрь через конечную точку OpenTelemetry. Сейчас все сервисы работают в штатном режиме.
Автоматический перевод официального обновления инцидента.
В настоящее время мы изучаем этот вопрос, влияющий на некоторые страницы проекта приложения GCK6. Мы находимся в процессе обеспечения исправления этого.
Мы продолжаем работать над исправлением этого вопроса.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Начиная примерно с 20:30 UTC 20 октября, мы наблюдали увеличение ошибок оценки правил оповещения, влияющих на правила, которые запрашивают источники данных Grafana Cloud Prometheus (Mimir) в кластере AWS Германия. Наша инженерная команда активно исследует и работает над восстановлением.
Корневая причина проблемы была выявлена, и мы работаем над мерами по ее устранению.
Были приняты меры по восстановлению, и мы следим за восстановлением.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
По состоянию на 21 октября, 06:20 утра по UTC, нам стало известно о проблеме с возможной неправильной оценкой правил оповещения синтетического мониторинга в кластере prod-us-east-3. Выпуск закончился 07:00 утра по UTC
Автоматический перевод официального обновления инцидента.
В настоящее время мы расследуем проблему в регионе prod-sa-east-1, вызывающую медленные запросы, или некоторые стекы, которые изо всех сил пытаются начать. Мы предоставим обновление, как только у нас будет больше информации для обмена.
Синтетический мониторинг также влияет. Мы продолжаем расследование этого вопроса.
Синтетический мониторинг восстановился. Мы продолжаем следить.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
В настоящее время мы изучаем этот вопрос, влияющий на некоторые страницы проекта приложения GCK6. Мы предоставим обновление, как только у нас будет больше информации.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
В настоящее время мы расследуем этот вопрос.
Мы продолжаем расследование этого вопроса.
Пострадает только публичный API для prod-eu-west-0
Реализовано исправление, и мы отслеживаем результаты.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
По состоянию на 06:30 UTC нам стало известно о проблеме с недоступностью Grafana Cloud в регионе prod-gb-south-0. Инжинирингом активно занимаются и оценивают вопрос. Мы предоставим соответствующие обновления.
Мы продолжаем расследование этого вопроса.
В период с 06:15 по 12:15 UTC, Grafana Cloud Frontend Observability в GCP UK (prod-gb-south-0) испытывала ошибки, принимая входящие данные телеметрии. Это было решено, и Frontend Observability работает в этом регионе. Мы продолжаем расследование и мониторинг оставшихся пострадавших сервисов.
Мы снова видим ошибки в Frontend O11y. Мы продолжаем исследовать и контролировать пострадавшие услуги.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
В настоящее время мы расследуем проблему, вызывающую повышенные ошибки чтения и правителя. Мы предоставим еще одно обновление, как только у нас будет больше информации.
Ошибки прекратились с 15:15 UTC. Мы продолжаем следить.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
В настоящее время мы изучаем проблему, затрагивающую показатели и оценки правил в mimir-prod-66. Наша команда активно работает над выявлением причины. Спасибо за ваше терпение.
Мы продолжаем расследование этого вопроса.
Реализовано исправление, и мы отслеживаем результаты.
Мы продолжаем отслеживать любые дополнительные проблемы.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Мы изучаем периодические сбои в записи в темп-prod (prod-us-central-0) из-за внутренних ошибок Google Cloud Storage.
Ситуация начинает восстанавливаться, и мы продолжаем следить за ситуацией.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Мы наблюдали некоторые всплески задержки, начиная примерно с 12:50 UTC. Мы работаем над резолюцией. Следующее обновление 15:30 UTC
Мы продолжаем работать над исправлением этого вопроса. Следующее обновление 16:30 UTC
Ситуация начинает стабилизироваться, поскольку мы продолжаем работать над смягчением последствий.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Мы изучаем повышенные ошибки аутентификации, влияющие на Grafana Cloud в регионе prod-us-west-0. Клиенты могут испытывать периодические сбои в запросах, требующих аутентификации. Наша инженерная команда определила ухудшение производительности базы данных, влияющее на службу аутентификации, и исследует основную причину. Мы предоставим еще одно обновление по мере поступления дополнительной информации.
Проблема была выявлена, и мы применили смягчение с нашей стороны. В настоящее время мы наблюдаем за прогрессом.
Мы заметили улучшения во всех сервисах. Теперь мы будем применять более постоянное исправление. Пострадавшие пользователи могут испытывать сбои в работе службы auth-api до 15 минут, пока мы применяем патч DB, который улучшит производительность.
Это исправление реализовано, и мы следим за результатами.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Небольшое количество клиентов со стеками в prod-us-central-4 получают «запрещенные» ошибки при запросе источников данных Prometheus. Мы расследуем и скоро предоставим обновленную информацию.
Мы продолжаем расследование этого вопроса.
Мы ввели некоторые смягчения, которые, похоже, помогли с ошибками. Мы продолжаем следить за результатами.
This incident has been resolved. Thank you for your patience.
Автоматический перевод официального обновления инцидента.
Уведомления о звонках на номера в России и Казахстане в настоящее время заблокированы. Мы работаем над решением этого вопроса. Поскольку поддержка SMS в этих странах ограничена, мы рекомендуем использовать мобильные push-уведомления в качестве альтернативы. В настоящее время мы не располагаем расчетным временем для принятия резолюции. Мы предоставим дополнительные обновления по мере поступления дополнительной информации.
Уведомления о звонках на номера в России и Казахстане по-прежнему заблокированы. Мы работаем над решением этого вопроса. Поскольку поддержка SMS в этих странах ограничена, мы рекомендуем использовать мобильные push-уведомления в качестве альтернативы. В настоящее время мы не располагаем расчетным временем для принятия резолюции. Мы предоставим дополнительные обновления по мере поступления дополнительной информации.
После дальнейшего расследования мы подтвердили, что доставка SMS в определенные пункты назначения в настоящее время не поддерживается. Мы обновили нашу документацию, чтобы уточнить поддерживаемые пункты назначения и доступные опции уведомлений. Мы рекомендуем использовать мобильные push-уведомления или телефонные звонки в качестве альтернативы, когда доставка SMS недоступна.
Автоматический перевод официального обновления инцидента.
Мы расследуем проблему, затрагивающую прием метрик для клиентов Grafana Cloud Metrics в AWS US East (VA). Клиенты могут видеть неудавшиеся или отложенные записи. Следующее обновление 10:15 UTC.
Мы продолжаем исследовать проблему, затрагивающую прием метрик для клиентов Grafana Cloud Metrics в AWS US East (VA). Клиенты могут видеть неудавшиеся или отложенные записи. Следующее обновление к 11:00 UTC.
Мы продолжаем исследовать проблему, затрагивающую прием метрик для клиентов Grafana Cloud Metrics в AWS US East (VA). Клиенты могут видеть неудавшиеся или отложенные записи в Grafana Cloud Metrics, это также может повлиять на метрики, написанные Frontend Observability и / или Synthetic Monitoring. Следующее обновление к 12:00 UTC.
Мы определили причину проблемы, затрагивающей прием метрик для клиентов Grafana Cloud Metrics в AWS US East (VA) - prod-us-east-3. Клиенты могут видеть неудавшиеся или отложенные записи в Grafana Cloud Metrics, это также может повлиять на метрики, написанные Frontend Observability и / или Synthetic Monitoring. Мы продолжаем работу по смягчению последствий и отслеживаем влияние на метрику облачных вычислений Grafana. Следующее обновление к 13:00 UTC.
Мы определили причину проблемы, затрагивающей прием метрик для клиентов Grafana Cloud Metrics в AWS US East (VA) - prod-us-east-3. Клиенты могут видеть неудавшиеся или отложенные записи в Grafana Cloud Metrics, это также может повлиять на метрики, написанные Frontend Observability и / или Synthetic Monitoring. Мы продолжаем работу по смягчению последствий и отслеживаем влияние на метрику облачных вычислений Grafana. Следующее обновление к 14:00 UTC.
У нас есть изолированная инфраструктура, подозреваемая в том, что она вносит свой вклад в проблему приема метрик в AWS US East (VA) - prod-us-east-3. Мы проверяем восстановление и завершаем шаги по смягчению последствий. Клиенты могут продолжать испытывать неудавшиеся или отложенные метрические записи, пока эта работа продолжается.
С 09:45 по 2026-10-12 гг. клиенты AWS US East (VA) столкнулись с неисправной или отсроченной метрикой, что, возможно, также повлияло на данные Frontend Observability и Synthetic Monitoring в этом регионе. Это полностью решено, и все службы снова работают нормально.
Автоматический перевод официального обновления инцидента.
