История сбоев Grafana

1. 9 сентября 2026 г. в 11:27 UTCinvestigating

   Мы изучаем повышенную нагрузку на базы данных, влияющую на инфраструктуру, поддерживающую подмножество экземпляров Grafana Cloud в регионе AWS Germany (prod-eu-west-4). Пострадавшие пользователи могут испытывать медленные реакции при доступе к Grafana. Мы предоставим обновление по мере поступления дополнительной информации.

2. 9 сентября 2026 г. в 12:44 UTCmonitoring

   Решения были приняты, и мы наблюдаем восстановление пострадавшего региона. Мы продолжим мониторинг.

3. 9 сентября 2026 г. в 13:51 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 8 сентября 2026 г. в 18:05 UTCidentified

   Некоторые плитки геокарты отображают «требуемый ключ api». Проблема была выявлена, и наша команда работает над исправлением. В качестве обходного пути вы можете открыть панель Geomap, перейти к разделу слоев Карты и изменить слой Basemap с CARTO или «Слой базы по умолчанию» на OpenStreetMap. Водный знак должен исчезнуть немедленно. В качестве альтернативы, если вы хотите сохранить карту в темном стиле, похожую на текущий внешний вид CARTO, вы можете выбрать MapLibre в качестве базовой карты и настроить URL как: https://tiles.openfreemap.org/styles/dark. Эта опция также отображается без водяного знака, не требует ключа API и обеспечивает визуальный стиль, подобный темной базовой карте CARTO.

2. 8 сентября 2026 г. в 22:41 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 8 сентября 2026 г. в 16:14 UTCinvestigating

   В настоящее время мы расследуем проблему, вызывающую высокую задержку развертывания в кластере «вынос-на-восток-2».

2. 8 сентября 2026 г. в 17:04 UTCmonitoring

   Мы наблюдали возвращение латентности к нормальному уровню, и мы будем продолжать следить за этим инцидентом.

3. 8 сентября 2026 г. в 20:34 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 4 сентября 2026 г. в 17:03 UTCidentified

   Мы знаем о проблеме, из-за которой некоторые стека Grafana Cloud в регионе США недоступны или не загружаются. Причиной является снижение вычислительной мощности в одной из зон доступности нашего облачного провайдера, что препятствует запуску затронутых стеков. Другие регионы не затронуты. Мы работаем с облачным провайдером для восстановления мощностей.

2. 4 сентября 2026 г. в 18:24 UTCmonitoring

   В настоящее время мы наблюдаем минимальное воздействие и продолжаем следить за ситуацией.

3. 4 сентября 2026 г. в 20:42 UTCresolved

   Центральный регион США в настоящее время полностью функционирует, и этот инцидент теперь разрешен.

Автоматический перевод официального обновления инцидента.

1. 4 сентября 2026 г. в 16:45 UTCidentified

   В настоящее время мы расследуем проблему, затрагивающую центральный регион США из-за продолжающегося инцидента с облачным провайдером. Воздействовали несколько компонентов. Наша команда активно работает над этим. Спасибо за ваше терпение.

2. 4 сентября 2026 г. в 18:58 UTCmonitoring

   Основная проблема облачных провайдеров еще не полностью решена, но наши системы восстановились, и стек Grafana Cloud снова загружается нормально. Некоторые клиенты все еще могут видеть кратковременную медлительность. Мы продолжаем следить, пока наш провайдер не подтвердит разрешение.

3. 4 сентября 2026 г. в 23:00 UTCresolved

   Центральный регион США полностью восстановился, и вопрос теперь решен.

Автоматический перевод официального обновления инцидента.

1. 4 сентября 2026 г. в 13:36 UTCinvestigating

   В настоящее время мы расследуем проблему, затрагивающую создание правил оповещения, удаление и обновления в prod-us-east-2. Наша команда активно работает над выявлением причины. Спасибо за ваше терпение.

2. 4 сентября 2026 г. в 16:32 UTCresolved

   Проблема была смягчена, и есть исправление кода.

Автоматический перевод официального обновления инцидента.

1. 3 сентября 2026 г. в 22:13 UTCidentified

   Этот вопрос был определен, и в настоящее время осуществляется исправление.

2. 3 сентября 2026 г. в 22:31 UTCidentified

   Кластерные метрики полезны для здоровья в течение последних 15 минут

3. 3 сентября 2026 г. в 22:48 UTCmonitoring

   Темпо восстановился.

4. 4 сентября 2026 г. в 00:55 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 3 сентября 2026 г. в 09:32 UTCinvestigating

   В настоящее время мы расследуем вопрос, влияющий на развертывание в районе под углом к югу-1. Пострадавшие клиенты могут испытывать повышенную задержку и проблемы с приемом пищи.

2. 3 сентября 2026 г. в 11:37 UTCmonitoring

   Применяется исправление, и мы видим признаки восстановления. Мы продолжим следить за восстановлением.

3. 3 сентября 2026 г. в 12:49 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 2 сентября 2026 г. в 14:14 UTCresolved

   Мы наблюдали повышенную задержку в Grafana Cloud Logs между 08:00 и 11:00 UTC для подмножества развертываний в prod-ap-south-1. Теперь вопрос решен.

Автоматический перевод официального обновления инцидента.

1. 1 сентября 2026 г. в 15:25 UTCinvestigating

   Мы расследуем сообщения об ошибках, влияющих на Grafana Cloud в центре США (prod-us-central-0, prod-us-central-5). Клиенты в этом регионе могут видеть тайм-ауты или неудачные запросы при написании или запросе журналов и метрик. Мы изучаем это и опубликуем еще одно обновление, как только у нас будет больше информации.

2. 1 сентября 2026 г. в 16:14 UTCidentified

   Мы определили причину проблемы в центральном регионе США нашего облачного провайдера. Налицо смягчение последствий и продолжается процесс восстановления. Клиенты prod-us-central-0 и prod-us-central-5 могут по-прежнему видеть ошибки или задержки с метриками, журналами или Grafana. Мы обновим эту страницу по мере восстановления.

3. 1 сентября 2026 г. в 20:20 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 28 августа 2026 г. в 17:12 UTCidentified

   Мы определили причину проблемы, влияющей на записи журнала. В настоящее время наша команда внедряет исправление.

2. 28 августа 2026 г. в 17:55 UTCmonitoring

   Этот инцидент также повлиял на Frontend Observability для того же региона. Развернуто исправление, и дела зашли в тупик. Мы будем продолжать следить за нашим результатом.

3. 28 августа 2026 г. в 18:42 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 28 августа 2026 г. в 00:58 UTCidentified

   Некоторые функции графического интерфейса могут быть недоступны или вернуться к устаревшему поведению

2. 28 августа 2026 г. в 01:08 UTCidentified

   разрабатывается резолюция для решения вопросов

3. 28 августа 2026 г. в 02:40 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 27 августа 2026 г. в 12:09 UTCinvestigating

   Мы изучаем повышенные коэффициенты ошибок, влияющие на метрики, пишет prod-us-central-0. Клиенты в этом регионе могут столкнуться с неудавшимися или отложенными показателями приема, пробелами в последних данных по приборным панелям и запросам, а правила оповещения, зависящие от затронутой серии, могут не оцениваться так, как ожидалось.

2. 27 августа 2026 г. в 12:37 UTCmonitoring

   Было применено исправление, и показатели ошибок записи в prod-us-central-0 вернулись к нормальным уровням. Проглатывание метрик работает, как и ожидалось. Мы продолжаем следить за пострадавшими системами, чтобы подтвердить полное восстановление, прежде чем отмечать этот инцидент.

3. 27 августа 2026 г. в 13:06 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 27 августа 2026 г. в 01:54 UTCresolved

   Мимир пишет, что в регионе prod-us-central-0 уровень ошибок был повышен примерно на 15 минут с 1:05 до 1:20 UTC. Вопрос решен, и мы его отслеживаем.

Автоматический перевод официального обновления инцидента.

1. 25 августа 2026 г. в 10:39 UTCinvestigating

   Мы расследуем отключение, затрагивающее Инцидент Графана в Центральном регионе США (prod-us-central-0). Клиенты не могут создавать, просматривать или запрашивать Инциденты, а запросы к общедоступному API Инцидента отсрочены. Пострадали все клиенты в этом регионе. На Grafana OnCall это никак не влияет — прием оповещения, создание группы оповещения и доставка уведомлений работают нормально.

2. 25 августа 2026 г. в 10:49 UTCmonitoring

   Было применено исправление, и управление инцидентами в Центре США восстанавливается. Публичный API Инцидента реагирует нормально, и клиенты могут создавать, просматривать и запрашивать Инциденты снова. Мы продолжаем следить за восстановлением, чтобы подтвердить, что сервис полностью стабилен.

3. 25 августа 2026 г. в 11:01 UTCmonitoring

   Мы продолжаем отслеживать любые дополнительные проблемы.

4. 25 августа 2026 г. в 11:02 UTCresolved

   Этот инцидент был урегулирован. Управление инцидентами в центре США работает в обычном режиме. Клиенты могут создавать, просматривать и запрашивать Инциденты, и общедоступный API Инцидента полностью доступен. Grafana OnCall не пострадала во время инцидента.

Автоматический перевод официального обновления инцидента.

1. 18 августа 2026 г. в 22:53 UTCresolved

   Мы наблюдали проблему, которая повлияла на следующий сервис: чтение Cloud Logs в регионе eu-west-2. Пострадавшие службы будут включать в себя исследование, панели инструментов, оценку оповещения при запросе журналов. Время удара длилось примерно с 22х15 и 22х23 UTC, на локи-прод-012. С тех пор этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 13 августа 2026 г. в 15:25 UTCmonitoring

   Telemetry push APIs went down at 15:06 UTC, causing tests to lose telemetry data, like metrics, logs, traces, and browser screenshots. This issue has now been mitigated, and we are monitoring to determine root cause as well as full resolution.

2. 13 августа 2026 г. в 16:47 UTCresolved

   This incident has been resolved.

1. 10 августа 2026 г. в 13:30 UTCresolved

   Между 12:20 и 13:15 UTC мы столкнулись с повышенным уровнем ошибок для метрик чтения и записи из-за сетевой проблемы. Воздействие ограничивалось подмножеством развертываний в регионе "выд-на-центр-0". Было применено исправление, и с тех пор показатели ошибок восстановились.

Автоматический перевод официального обновления инцидента.

1. 8 августа 2026 г. в 19:48 UTCresolved

   Due to a software bug the evaluation of some alert rules (primarily ones that have recovery threshold setting) were failing to be evaluated starting 14:00 UTC to 19:30 UTC today.

1. 5 августа 2026 г. в 17:57 UTCresolved

   Between approximately 13:40 and 15:05 UTC today, a subset of cloud test runs were unexpectedly terminated and marked Aborted (by system). This affected runs that were in progress during three short windows in that period; test results and metrics for completed runs were not impacted. We have identified the cause and no further occurrences have been observed since 15:05 UTC. A fix is in place. The platform is currently operating normally and test runs are executing as expected