73 Signalfx Us1 incidents · май 2025 г. — official updates, affected components, duration and resolution details.
мы обнаружили, что ApI не работает с 500, поэтому страница профилирования кода будет недоступна или ошибки будут видны в пользовательском интерфейсе
Этот вопрос был выявлен и реализуется
Реализовано исправление, и мы отслеживаем результаты.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Мы изучаем проблему интеграции AWS CloudWatch. Некоторые клиенты могут видеть отсутствующие или устаревшие метки ресурсов в метриках AWS, и изменения конфигурации метрического потока могут не применяться. Метрический прием не влияет. Мы предоставим обновление, как только будет доступна дополнительная информация.
Мы определили, что ухудшение интеграции AWS CloudWatch вызвано продолжающимся нарушением AWS в регионе me-central-1 (UAE), включая AWS CloudWatch и API тегирования групп ресурсов. Клиенты с ресурсами AWS в этом регионе могут видеть отсутствующие или устаревшие метки ресурсов в метриках AWS, и изменения конфигурации метрического потока могут не применяться. Метрический прием не влияет. AWS не предоставила график восстановления и рекомендует мигрировать в другой регион.
Splunk подтвердила, что деградация интеграции AWS CloudWatch в регионе me-central-1 (ОАЭ) вызвана продолжающимся региональным сбоем AWS вне контроля Splunk. AWS не предоставила график восстановления и рекомендует перенести пострадавшие ресурсы в другой регион. Метрический прием не влияет. Мы идентифицируем пострадавших клиентов и обсудим следующие шаги. Если у вас есть немедленные проблемы, пожалуйста, свяжитесь с вашей учетной записью.
Автоматический перевод официального обновления инцидента.
Деградация производительности конвейера приема данных Splunk APM приводит к тому, что обработка и хранение исходных следовых данных задерживается более чем на пять минут. В настоящее время данные не теряются, и MetricSets не влияют, но самые последние данные могут быть недоступны в результатах поиска.
Мы продолжаем работать над решением этой проблемы.
Реализовано исправление, и мы отслеживаем результаты.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Мы изучаем деградацию веб-приложения Splunk Observability Cloud для некоторых клиентов. В это время данные не влияют. Мы предоставим обновление как можно скорее.
Наши инженерные команды активно устраняют выявленные проблемы с производительностью в веб-интерфейсе Splunk Observability, мы поделимся новым обновлением как можно скорее.
Реализовано исправление, и мы отслеживаем результаты.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Диаграммы для подмножества клиентов могут не загружаться. Проглатывание данных не затрагивается. Мы расследуем и вскоре предоставим обновленную информацию.
Диаграммы и приборные панели находятся в здоровом состоянии, и мы следим за восстановлением.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Мы изучаем задержки в обработке результатов теста Splunk Observability Synthetic Monitoring. Тесты синтетического мониторинга работают, но показатели могут отсутствовать до тех пор, пока проблема не будет решена.
Мы продолжаем расследование этого вопроса.
Этот вопрос был определен, и в настоящее время осуществляется исправление.
Реализовано исправление, и мы отслеживаем результаты.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Некоторые клиенты могут испытывать задержки в некоторых графиках и детекторах. Проглатывание данных не затрагивается. Мы расследуем и вскоре предоставим обновленную информацию.
Мы продолжаем исследовать задержки, которые наблюдаются на некоторых картах и детекторах. Наши инженерные команды продолжают устранение неполадок и вскоре поделятся обновлениями.
Реализовано исправление, и мы отслеживаем результаты.
Восстановление сервиса подтверждено. Мы продолжим внимательно следить за производительностью системы и соответствующим образом делиться обновлениями.
Наша инженерная команда подтвердила, что развертывание исправления стабилизировало затронутые службы в регионе US1. Сейчас этот инцидент считается урегулированным.
Автоматический перевод официального обновления инцидента.
С 5:45 вечера до 6:20 вечера PT ухудшение производительности трубопровода обработки следов Splunk APM приводило к задержке устранения неполадок MetricSets более чем на пять минут. В результате опыт устранения неполадок APM, сервисные карты и Tag Spotlight не имеют доступа к самым последним данным. Обработка показателей для бизнес-процессов, которая также зависит от этого трубопровода, также задерживается. В настоящее время данные отслеживания не подвергаются воздействию; метрики мониторинга уровня обслуживания и конечных точек и детекторы, построенные из них, также не подвергаются воздействию.
Автоматический перевод официального обновления инцидента.
Некоторые клиенты видят сбои входа в систему из-за ошибок сертификата. Клиенты, которые уже зарегистрированы, не подвергаются воздействию. Вопрос решен.
Автоматический перевод официального обновления инцидента.
Начиная с 5:50 утра PDT был затронут прием данных для архивного уровня, в результате чего небольшое количество точек данных не было принято. Воздействие ограничивалось архивным ярусом. Детекторы и карты не пострадали. Мы провели рекультивацию и активно следим за системой, чтобы обеспечить стабильность. Мы будем предоставлять обновления каждые 15 минут.
По состоянию на 7:48 утра мы больше не наблюдаем, чтобы какие-либо данные были сброшены. Система продолжает восстанавливаться, и мы активно следим за ней, чтобы обеспечить постоянную стабильность.
Система продолжает восстанавливаться, и мы активно следим за ней, чтобы обеспечить постоянную стабильность.
Система демонстрирует устойчивый прогресс в восстановлении. Наши команды по-прежнему активно работают, внимательно следя за показателями системы, чтобы обеспечить постоянную стабильность
Мы успешно восстановили прием данных и наблюдаем устойчивый прогресс по мере обработки данных. Мы активно отслеживаем этот процесс, чтобы обеспечить максимально быстрое возвращение полной функциональности сервиса.
Мы продолжаем мониторинг, чтобы обеспечить полную функциональность сервиса.
Мы продолжаем следить за системой, чтобы обеспечить постоянную стабильность. Наши команды продолжают активно следить за показателями эффективности, чтобы подтвердить, что все операции работают так, как ожидалось.
Чтобы ускорить процесс восстановления, мы в настоящее время добавляем дополнительные мощности в наши кластеры. Наши команды по-прежнему активно участвуют и продолжают следить за производительностью системы по мере ее стабилизации.
Система восстановилась, и мы без задержки проглатываем архивные данные.
Автоматический перевод официального обновления инцидента.
Повреждается глотание Datapoint, и мы удаляем некоторые точки данных из 8:52 PDT. Мы расследуем и будем предоставлять обновления каждые 15 минут.
Между 8:52 PDT и 9:47 PDT не было принято небольшое количество точек данных для новых временных рядов. В результате новые временные ряды, возможно, испытали задержку, прежде чем стать доступными в графиках и детекторах. Мы продолжаем следить за системой, чтобы обеспечить стабильность.
Проблема решена, и прием точек данных работает нормально. Мы подтвердили, что после восстановления система остается стабильной. Теперь этот инцидент урегулирован.
Автоматический перевод официального обновления инцидента.
Деградация пути проникновения следовых данных для Splunk APM приводит к тому, что некоторые следы сбрасываются и теряются. Мы расследуем проблему и предоставим обновленную информацию как можно скорее.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Мы расследуем серьезное отключение Splunk Observability AI Assistant.
Проблема была идентифицирована как отключение Azure OpenAI, и мы продолжаем работу.
Реализовано исправление, и мы отслеживаем результаты.
Этап мониторинга завершен. Вопрос решен.
Автоматический перевод официального обновления инцидента.
С 08/25/2026, 11:38AM PDT, ухудшение производительности трубопровода обработки следов Splunk APM вызывает задержку устранения неполадок MetricSets более чем на пять минут. В результате опыт устранения неполадок APM, сервисные карты и Tag Spotlight не имеют доступа к самым последним данным. Обработка показателей для бизнес-процессов, которая также зависит от этого трубопровода, также задерживается. В настоящее время данные отслеживания не подвергаются воздействию; метрики мониторинга уровня обслуживания и конечных точек и детекторы, построенные из них, также не подвергаются воздействию.
Мы продолжаем расследование этого вопроса.
Этот вопрос был определен, и в настоящее время осуществляется исправление.
Реализовано исправление, и мы отслеживаем результаты.
Наши команды продолжают следить за ситуацией, чтобы обеспечить полное восстановление.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Проблемы с обработкой оповещений, которые приводят к задержке уведомлений. В настоящее время мы расследуем этот вопрос.
В настоящее время мы расследуем повышенную задержку уведомления. Клиенты могут испытывать задержки в получении оповещений. Мы активно работаем над решением этой проблемы и будем предоставлять обновления по мере продвижения вперед. Мы ценим ваше терпение.
Мы определили и активно решаем вопрос, вызывающий задержку оповещения. Это исправление было реализовано и уже демонстрирует значительное улучшение сроков доставки уведомлений. В то время как некоторые уведомления, которые были поставлены в очередь до нашего исправления, могут по-прежнему испытывать небольшие задержки по мере того, как система догоняет, новые уведомления доставляются обычно. Мы ценим ваше терпение и продолжим внимательно следить за ситуацией.
Мы активно работаем над решением вопроса. Клиенты могут продолжать испытывать задержки в доставке уведомлений. Это включает в себя вновь созданные уведомления, которые обрабатываются за более ранними событиями в очереди. Команда активно изучает первопричину и работает над устранением отставания в уведомлениях о очереди. В качестве временной меры по смягчению последствий мы отключили предварительные просмотры изображений в уведомлениях для повышения скорости обработки. Уведомления пока будут только текстовыми. Мы ценим ваше терпение и предоставим дальнейшие обновления по мере продвижения вперед.
Мы внедрили исправление для устранения задержек уведомления. Наш мониторинг показывает значительное улучшение сроков доставки уведомлений, и мы внимательно отслеживаем производительность, чтобы обеспечить полное решение проблемы. Спасибо за ваше терпение, поскольку мы работаем над восстановлением полного сервиса.
Задержки с доставкой уведомлений полностью устранены. Все уведомления в очереди были обработаны, и система теперь работает нормально.
Автоматический перевод официального обновления инцидента.
Ухудшение производительности конвейера обработки метрик Splunk APM приводит к задержке Мониторинга более чем на пять минут. Проглатывание данных отслеживания не подвергается воздействию, но затрагиваются панели управления обслуживанием, конечными точками и рабочими процессами, а также другие диаграммы и детекторы, построенные с помощью Мониторинговых МетрикСетов.
Мы продолжаем расследование этого вопроса.
Мы продолжаем расследование этого вопроса.
Этот вопрос был определен, и в настоящее время осуществляется исправление.
Реализовано исправление, и мы отслеживаем результаты.
Этот инцидент был урегулирован.
Автоматический перевод официального обновления инцидента.
Показатель пропускания данных для новых или реактивированных метрических временных рядов был затронут между 2:28 PM PST и 2:47 PM PST. В течение этого периода произошла частичная потеря данных для новых метрических временных рядов. Сейчас эта ситуация восстановлена.
Автоматический перевод официального обновления инцидента.
Проглатывание Datapoint для новых метрических временных рядов было затронуто между 10:37 AM PST и 10:39 AM PST. В течение этого периода произошла частичная потеря данных для новых метрических временных рядов. Сейчас эта ситуация восстановлена.
Автоматический перевод официального обновления инцидента.
Начиная с 4a PT, мы расследуем серьезное отключение веб-приложения Splunk Observability Cloud. В это время данные не влияют. Мы предоставим обновление как можно скорее.
Мы продолжаем расследование этого вопроса.
Реализовано исправление, и мы отслеживаем результаты.
Этот инцидент был урегулирован. Обратите внимание, что во время этого инцидента также был затронут API Splunk Observability Cloud.
Автоматический перевод официального обновления инцидента.
Между 1a PDT и 2:50a PDT любая интеграция GCP, которая включала настройку «Синхронизация всех (динамически) перечисленных проектов», приводила к снижению некоторых данных облачного мониторинга от GCP. Этот вопрос решен. Клиенты могут видеть пробелы в графиках и детекторах, которые используют показатели облачного мониторинга GCP. Метрики AWS CloudWatch и Azure Monitor не затронуты.
Автоматический перевод официального обновления инцидента.
