Signalfx Us1 장애 기록

1. 2026년 8월 28일 PM 6:01 UTCinvestigating

   우리는 Splunk Observability AI Assistant의 주요 결과를 조사하고 있습니다.

2. 2026년 8월 28일 PM 6:20 UTCidentified

   문제는 Azure OpenAI 아웃리지로 식별되었으며, 우리는 운동으로 진행되고 있습니다.

3. 2026년 8월 28일 PM 6:25 UTCmonitoring

   수정이 구현되어 결과를 모니터링하고 있습니다.

4. 2026년 8월 28일 PM 7:26 UTCresolved

   모니터링 단계 완료. 문제는 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 25일 PM 6:44 UTCinvestigating

   08/25/2026에서, 11:38AM PDT는, Splunk APM 추적 처리 파이프라인의 성과에 있는 degradation는 5 분에 의해 지연될 미터 세트를 문제 해결하는 원인이 됩니다. 결과적으로 APM Troubleshooting 경험, 서비스 맵 및 Tag Spotlight는 가장 최근의 데이터에 액세스하지 않습니다. Business Workflows의 메트릭 처리는 이 파이프라인에 따라 달라집니다. Trace 데이터 ingest는이 시간에 영향을 미치지 않습니다. 서비스 수준 및 엔드포인트 레벨 모니터링 MetricSets 및 그로부터 내장 된 검출기는 영향을받지 않습니다.

2. 2026년 8월 25일 PM 7:21 UTCinvestigating

   이 문제를 조사하고 있습니다.

3. 2026년 8월 25일 PM 7:44 UTCidentified

   문제는 식별되고 수정이 구현됩니다.

4. 2026년 8월 25일 PM 8:02 UTCmonitoring

   수정이 구현되어 결과를 모니터링하고 있습니다.

5. 2026년 8월 25일 PM 8:25 UTCmonitoring

   우리의 팀은 전체적인 구제를 지키는 상황을 계속합니다.

6. 2026년 8월 25일 PM 9:07 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 1일 PM 2:35 UTCinvestigating

   알림을 지연시키기 위한 알림을 처리하는 문제. 우리는 현재 문제를 조사하고 있습니다.

2. 2026년 8월 1일 PM 3:33 UTCinvestigating

   우리는 현재 높은 알림 대기 시간을 투자하고있다. 고객은 경고 알림 수신 지연을 경험할 수 있습니다. 우리는 적극적으로이 문제를 해결하고 우리가 진행하는대로 업데이트를 제공 할 것입니다. 우리는 당신의 인내를 평가합니다.

3. 2026년 8월 1일 PM 3:55 UTCidentified

   우리는 식별하고 적극적으로 경고 알림을 지연시키는 문제를 해결합니다. 수정이 시행되고 이미 알림 배달 시간에 상당한 개선을 보여주고 있습니다. 수정 전에 누락 된 몇 가지 알림이 여전히 시스템 캐치로 미성년 지연을 경험할 수 있지만, 새로운 알림은 일반적으로 전달됩니다. 우리는 당신의 patience를 평가하고 상황을 밀접하게 감시할 것입니다.

4. 2026년 8월 1일 PM 5:09 UTCidentified

   우리는 문제를 해결하기 위해 적극적으로 노력하고 있습니다. 고객은 알림 납품에 지연을 경험할 수 있습니다. 이 새로운 생성 된 알림을 포함, 이는 큐의 이전 이벤트 뒤에 처리됩니다. 팀은 근본 원인을 조사하고 in-queue 알림의 backlog를 지우기 위해 노력하고 있습니다. 임시 완화 측정으로, 우리는 처리 속도를 개선하기 위해 알림에 비활성화 된 이미지 미리보기가 있습니다. 알림은 이제 텍스트 전용입니다. 우리는 당신의 patience를 평가하고 진전으로 추가 업데이트를 제공할 것입니다.

5. 2026년 8월 1일 PM 5:31 UTCmonitoring

   우리는 알림 지연에 대한 수정을 구현했습니다. 우리의 모니터링은 알림 배달 시간에 상당한 개선을 보여줍니다, 우리는 문제를 완전히 해결하기 위해 긴밀한 추적 성능을 보여줍니다. 우리가 전체 서비스를 복원하기 위해 노력으로 당신의 인내심을 주셔서 감사합니다.

6. 2026년 8월 1일 PM 6:21 UTCresolved

   알림 배달 지연은 완전히 해결되었습니다. 모든 누락된 알림이 처리되었습니다. 시스템은 현재 운영되고 있습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 31일 AM 2:51 UTCinvestigating

   Splunk APM 메트릭 처리 파이프라인의 성능 향상은 미터 설정 모니터링을 5 분 이상 지연시킵니다. Trace data ingest는 영향을받지 않지만 서비스, 엔드포인트 및 워크플로우 대시보드 및 기타 차트 및 디텍터가 모니터링을 통해 구축되었습니다.

2. 2026년 7월 31일 AM 2:54 UTCinvestigating

   이 문제를 계속 조사하고 있습니다.

3. 2026년 7월 31일 AM 3:44 UTCinvestigating

   이 문제를 조사하고 있습니다.

4. 2026년 7월 31일 AM 4:07 UTCidentified

   문제는 식별되고 수정이 구현됩니다.

5. 2026년 7월 31일 AM 4:08 UTCmonitoring

   수정이 구현되어 결과를 모니터링하고 있습니다.

6. 2026년 7월 31일 AM 4:33 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 24일 PM 9:54 UTCresolved

   새로운 또는 재 활성화 된 메트릭 시간 시리즈에 대한 데이터 포인트는 오후 2시 28 분 PST에서 2시 47 분 PST로 영향을 미쳤습니다. 그 시간 동안 새로운 미터 시간 시리즈에 대한 부분적인 데이터 손실이있었습니다. 이 상황은 이제 복구됩니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 22일 PM 6:02 UTCresolved

   새로운 미터 시간 시리즈에 대한 데이터 포인트는 10:37 AM PST와 10:39 AM PST로 영향을 미쳤습니다. 그 시간 동안 새로운 미터 시간 시리즈에 대한 부분적인 데이터 손실이있었습니다. 이 상황은 이제 복구됩니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 14일 AM 11:25 UTCinvestigating

   4a PT에서 시작, 우리는 Splunk Observability Cloud 웹 응용 프로그램의 주요 결과를 조사하고 있습니다. Data ingest는 이 시간에 영향을 미치지 않습니다. 우리는 가능한 한 빨리 업데이트를 제공 할 것입니다.

2. 2026년 7월 14일 PM 12:13 UTCinvestigating

   이 문제를 계속 조사하고 있습니다.

3. 2026년 7월 14일 PM 12:28 UTCmonitoring

   수정이 구현되어 결과를 모니터링하고 있습니다.

4. 2026년 7월 14일 PM 12:38 UTCresolved

   이 사건은 해결되었습니다. Splunk Observability Cloud API는 이 사건 중에도 영향을 미쳤습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 8일 AM 10:52 UTCresolved

   1a PDT와 2:50a PDT 사이, 모든 GCP 통합은 GCP에서 클라우드 모니터링 데이터의 일부가되었습니다. 이 문제는 해결되었습니다. GCP Cloud Monitoring metrics를 사용하는 차트 및 검지기의 간격을 볼 수 있습니다. AWS CloudWatch 및 Azure Monitor 메트릭은 영향을받지 않습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 4일 PM 5:07 UTCinvestigating

   고객은 새로 만들어진 메트릭 타임 시리즈를 볼 때 지연을 경험할 수 있습니다. Datapoint ingest는 기존 시간 시리즈에 영향을 미치지 않습니다. 우리는 투자하고 곧 업데이트를 제공 할 것입니다.

2. 2026년 7월 4일 PM 6:39 UTCresolved

   새로 만들어진 메트릭 타임 시리즈의 지연이 해결되었습니다. 미터 시간 시리즈 생성은 일반적으로 작동합니다. 기존 시간 시리즈의 Datapoint ingestion은 영향을받지 않았습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 1일 PM 3:08 UTCresolved

   Tag Spotlight에 영향을 미치는 문제가 해결되었습니다. 고객은 6월 30일 오후 4시 30분 PM PT에서 Tag Spotlight에서 제한된 기능을 경험할 수 있습니다. 전체 기능은 7 월 7 : 20 AM PT에서 복원되었습니다. 1.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 6월 26일 AM 7:37 UTCresolved

   최근 출시에 대한 회귀로 인해, 사용자가 APM TraceView 페이지에 로그 관련 내용에서 Log Observer 대신 APM TraceView로 다시 리디렉션되었습니다. US3 및 Gov를 제외한 모든 영역의 고객을 위한 Logs Correlation 경험에 영향을 미쳤습니다. 변화는 예상 탐색 경험을 복원하기 위해 거꾸로되었습니다. APM 및 Log Observer의 제품 가용성은 영향을받지 않았습니다. TraceView의 Logs Correlation 워크플로에 문제가 발생했습니다. 법인 시작 시간: 05:09 PDT, 6월 25, 2026 법인 종료 시간: 22:15 PDT, 6월 25, 2026

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 6월 12일 AM 12:03 UTCresolved

   Rum API Endpoints were not available for one of our IPs, resulting in degraded service or a partial outage at first, and possibly a complete outage towards the end. This issue occurred from 4:22pm PST to 4:57pm PST

1. 2026년 6월 3일 PM 10:49 UTCinvestigating

   Datapoint ingest is affected , some datapoints could be dropped. Team is investigating and will provide an update shortly.

2. 2026년 6월 3일 PM 11:25 UTCinvestigating

   Our engineering team is currently implementing an impact mitigation configuration change. The internal investigation is still ongoing. We will share an additional update as soon as possible.

3. 2026년 6월 4일 AM 12:05 UTCmonitoring

   Our engineering team has completed impact mitigating configuration changes and confirmed services are recovered as of 4:55 PDT. We will continue monitoring and share an update as soon as possible.

4. 2026년 6월 4일 AM 1:08 UTCresolved

   Our engineering team has confirmed that all the services recovered as of 4:55 PM PDT and remained stable during monitoring. This incident is now resolved.

1. 2026년 6월 2일 PM 12:50 UTCinvestigating

   We are investigating delays in processing Splunk Observability Synthetic Monitoring test results for a small subset of customers. Tests are still running, but metrics may be delayed until the issue is resolved.

2. 2026년 6월 2일 PM 4:51 UTCresolved

   We have identified and remediated an issue affecting synthetic test result ingestion for a subset of customers. We apologize for any inconvenience this may have caused and thank you for your patience. Time range of impact: June 1 20:00 UTC - June 2 15:30 UTC

1. 2026년 5월 29일 AM 5:40 UTCinvestigating

   Charts for customers may not be loading. App and UI availability is also impacted. We are investigating and will provide an update shortly.

2. 2026년 5월 29일 AM 5:43 UTCidentified

   The issue has been identified and a fix is being implemented.

3. 2026년 5월 29일 AM 5:56 UTCmonitoring

   A fix has been implemented and we are monitoring the status.

4. 2026년 5월 29일 AM 6:06 UTCresolved

   This Incident has been resolved.

1. 2026년 5월 12일 AM 10:38 UTCinvestigating

   A degradation of the Splunk O11y Cloud ingest path is causing ~20% of AWS CloudWatch metrics to be dropped. We are investigating the issue and will provide an update as soon as possible.

2. 2026년 5월 12일 PM 3:44 UTCresolved

   This incident has been resolved. We have since confirmed that only AWS CloudWatch metrics were impacted during this incident. Azure and GCP metrics were not impacted.

1. 2026년 5월 8일 AM 4:21 UTCinvestigating

   We are currently investigating this issue.

2. 2026년 5월 8일 AM 4:22 UTCinvestigating

   We are continuing to investigate this issue.

3. 2026년 5월 8일 AM 5:46 UTCidentified

   The issue has been identified and a fix is being implemented.

4. 2026년 5월 8일 AM 5:46 UTCresolved

   This incident has been resolved.

1. 2026년 5월 6일 PM 2:44 UTCinvestigating

   Charts for all customers may not be loading. Datapoint ingest is not affected. We are investigating and will provide an update shortly.

2. 2026년 5월 6일 PM 3:07 UTCinvestigating

   Our teams continue working to identify the cause and implement a fix.

3. 2026년 5월 6일 PM 3:36 UTCinvestigating

   Our investigation remains ongoing, and there is no change in status at this time. We are continuing to prioritize this issue and will provide the next update in thirty minutes.

4. 2026년 5월 6일 PM 4:14 UTCinvestigating

   Our teams are continuing their efforts to identify the root cause of this issue. There is no change in status to report at this time, but we are dedicating all necessary resources to reach a resolution. We will provide another update shortly.

5. 2026년 5월 6일 PM 4:31 UTCinvestigating

   Update (8:50 AM PST): We have observed that charts are now loading successfully. While service is recovering, our teams remain on-site to investigate the root cause and ensure full system stability. We will continue to monitor performance closely.

6. 2026년 5월 6일 PM 5:02 UTCinvestigating

   We are continuing to monitor the environment. There is no change in status at this time; our teams remain focused on resolving the remaining isolated issues.

7. 2026년 5월 6일 PM 5:31 UTCinvestigating

   Our teams are continuing to monitor the environment and are actively working to fully resolve the issue.

8. 2026년 5월 6일 PM 5:44 UTCinvestigating

   Update 10:30 PST: We are also investigating reports of login issues. Users may experience difficulty authenticating or accessing their accounts at this time.

9. 2026년 5월 6일 PM 5:58 UTCidentified

   The issue has been identified and a fix is being implemented.

10. 2026년 5월 6일 PM 6:13 UTCmonitoring

    A fix has been implemented and we are monitoring the results.

11. 2026년 5월 6일 PM 7:08 UTCmonitoring

    We are continuing to monitor the environment to ensure full remediation.

12. 2026년 5월 6일 PM 7:25 UTCresolved

    This incident has been resolved.

1. 2026년 4월 25일 PM 5:01 UTCinvestigating

   We are investigating an issue affecting Real User Monitoring (RUM) metrics across all realms. Customers may experience custom metric MTS quota limits being exceeded, resulting in metric data being dropped. RUM metric dimensions that were previously available may be missing.

2. 2026년 4월 25일 PM 5:02 UTCidentified

   The issue affecting Real User Monitoring (RUM) metrics  has been identified. The fix is currently being implemented. We are actively working to restore full service and will provide further updates as progress continues.

3. 2026년 4월 25일 PM 6:37 UTCidentified

   We are continuing to work on the fix. We expect to have further updates within the next hour. We appreciate your patience as we work diligently to resolve this issue and restore full service.

4. 2026년 4월 25일 PM 10:26 UTCidentified

   We are currently continuing to test the fix for the Real User Monitoring (RUM) metrics issue. We are thoroughly validating the mitigation to ensure it resolves the issue effectively and maintains system stability. We appreciate your ongoing patience and will provide further updates as testing progresses.

5. 2026년 4월 25일 PM 11:48 UTCidentified

   We are currently continuing to test the fix for the Real User Monitoring (RUM) metrics issue. We will share an update once we have further information.

6. 2026년 4월 26일 AM 12:55 UTCresolved

   The outage impacting RUM MMS Data Drop has been resolved after internal engineering teams deployed a fix. All systems are operational and stable. Thank you for your patience and understanding.

1. 2026년 4월 25일 AM 1:03 UTCinvestigating

   We are currently investigating an issue where RUM (Real User Monitoring) MMS data is being dropped, which may result in missing or incomplete data in charts and dashboards related to real user monitoring. We are actively investigating and will provide updates as the situation develops.

2. 2026년 4월 25일 AM 1:22 UTCidentified

   We have identified the cause of the issue resulting in missing or incomplete data in Real User Monitoring charts and dashboards. We are implementing a fix and will provide an update within 15 minutes.

3. 2026년 4월 25일 AM 2:02 UTCidentified

   A solution to address the issue causing missing or incomplete data in Real User Monitoring (RUM) charts and dashboards is currently being implemented. Our teams are actively working on deploying the fix and will continue to provide updates as progress is made

4. 2026년 4월 25일 AM 2:33 UTCidentified

   We have identified an issue causing missing or incomplete data in Real User Monitoring (RUM) custom charts and dashboards across multiple realms. A fix is currently being rolled out and validated

5. 2026년 4월 25일 AM 2:55 UTCmonitoring

   A fix for the issue affecting Real User Monitoring (RUM) charts and dashboards has been deployed and is being actively monitored across all realms; customers may now see data restored in charts and dashboards

6. 2026년 4월 25일 AM 3:13 UTCresolved

   The issue affecting Real User Monitoring (RUM) custom charts and dashboards across multiple realms has been resolved. The fix has been deployed, and data is now flowing normally.