Grafana 장애 기록

1. 2026년 9월 4일 PM 5:03 UTCidentified

   Grafana Cloud stacks가 사용되지 않거나 로드하지 못하는 문제가 있습니다. 원인은 우리의 클라우드 공급자의 가용성 영역 중 하나에 있는 compute 수용량을 감소시키고, 시작에서 영향을 받는 더미를 방지하. 다른 지역은 불완전합니다. 우리는 우리의 클라우드 제공 업체와 함께 용량을 복원합니다.

2. 2026년 9월 4일 PM 6:24 UTCmonitoring

   우리는 현재 최소한의 영향을 관찰하고 상황을 모니터링하기 위해 계속됩니다.

3. 2026년 9월 4일 PM 8:42 UTCresolved

   미국 중부 지역은 이제 완전히 운영되고이 사건은 이제 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 4일 PM 4:45 UTCidentified

   우리는 현재 지속적인 클라우드 공급자 사건 때문에 중앙 지역에 영향을 미치는 문제점을 조사하고 있습니다. 다수 성분은 충격을 주었습니다. 우리의 팀은 이 일에 적극적으로 일하고 있습니다. 감사합니다.

2. 2026년 9월 4일 PM 6:58 UTCmonitoring

   클라우드 공급자 문제는 아직 완전히 해결되지 않지만, 우리의 시스템은 복구 및 영향을받은 Grafana 클라우드 스택은 일반적으로 다시로드됩니다. 몇몇 고객은 아직도 간헐적인 감속을 볼지도 모릅니다. 우리는 우리의 공급자가 해결책을 확인합니다 때까지 감시자 계속됩니다.

3. 2026년 9월 4일 PM 11:00 UTCresolved

   미국 중부 지역은 이제 완전히 회복되고 문제는 이제 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 4일 PM 1:36 UTCinvestigating

   우리는 현재 prod-us-east-2의 알림 규칙 생성, 삭제 및 업데이트에 영향을 미치는 문제점을 조사하고 있습니다. 우리의 팀은 적극적으로 원인을 식별하기 위해 노력하고 있습니다. 감사합니다.

2. 2026년 9월 4일 PM 4:32 UTCresolved

   문제는 mitigated이고 코드 수정이 있습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 3일 PM 10:13 UTCidentified

   문제는 식별되고 수정이 구현됩니다.

2. 2026년 9월 3일 PM 10:31 UTCidentified

   클러스터 미터는 지난 15 분 동안 건강합니다

3. 2026년 9월 3일 PM 10:48 UTCmonitoring

   Tempo 복구.

4. 2026년 9월 4일 AM 12:55 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 3일 AM 9:32 UTCinvestigating

   우리는 현재 prod-ap-south-1의 배포에 영향을 미치는 문제를 조사하고 있습니다. 충격을 입힌 고객은 개량한 대기권 및 ingestion를 가진 문제점을 경험할지도 모릅니다.

2. 2026년 9월 3일 AM 11:37 UTCmonitoring

   수정이 적용되어 복구 표지판을 볼 수 있습니다. 우리는 복구를 계속 모니터링 할 것입니다.

3. 2026년 9월 3일 PM 12:49 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 2일 PM 2:14 UTCresolved

   우리는 Grafana Cloud Logs의 높은 대기 시간을 관찰했습니다. 08:00 과 11:00 UTC 사이 prod-ap-south-1에 배포의 하위 집합에 대한. 문제가 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 1일 PM 3:25 UTCinvestigating

   미국 중앙 Grafana Cloud에 영향을 미치는 오류의 조사 보고서입니다 (prod-us-central-0, prod-us-central-5). 이 지역에 있는 고객은 timeout 또는 실패한 요청을 쓸 때 또는 조회 로그 및 미터를 볼 수 있습니다. 우리는 이것을보고 우리가 더 많은 정보가 있기 때문에 다른 업데이트를 게시 할 것입니다.

2. 2026년 9월 1일 PM 4:14 UTCidentified

   우리는 우리의 클라우드 공급자의 미국 중부 지역의 문제점으로 원인을 발견했습니다. 소송은 장소와 복구가 진행 중입니다. prod-us-central-0 및 prod-us-central-5의 고객은 여전히 메트릭, 로그, 또는 Grafana와 오류 또는 지연을 볼 수 있습니다. 우리는이 페이지를 복구 계속 업데이트합니다.

3. 2026년 9월 1일 PM 8:20 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 28일 PM 5:12 UTCidentified

   Log writes에 영향을 미치는 문제의 원인을 확인했습니다. 우리의 팀은 현재 수정을 구현하고 있습니다.

2. 2026년 8월 28일 PM 5:55 UTCmonitoring

   이 사건은 또한 동일한 지역을 위한 Frontend Observability에 충격이 있었습니다. 수정이 배포되었습니다, 그리고 것들은 안정. 우리는 우리의 끝에 감시자 계속할 것입니다.

3. 2026년 8월 28일 PM 6:42 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 28일 AM 12:58 UTCidentified

   Grafana UI 기능은 사용할 수 없거나 레거시 행동을 반전할 수 있습니다

2. 2026년 8월 28일 AM 1:08 UTCidentified

   해결책은 문제를 해결하기 위하여 구르고 있습니다

3. 2026년 8월 28일 AM 2:40 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 27일 PM 12:09 UTCinvestigating

   우리는 prod-us-central-0에 메트릭에 영향을 미치는 높은 오류율을 조사하고 있습니다. 이 지역의 고객들은 대시보드 및 쿼리에 대한 최근 데이터의 손상 또는 지연된 메트릭 섭취, 간격 및 영향을받는 시리즈에 따라 접근하는 경고 규칙을 볼 수 있습니다.

2. 2026년 8월 27일 PM 12:37 UTCmonitoring

   수정이 적용되고 메트릭은 prod-us-central-0의 오류율을 정상 수준으로 반환했습니다. 미터 섭취는 예상대로 운영됩니다. 우리는 영향을받는 시스템을 모니터링하고이 사건을 해결하기 전에 전체 복구를 확인합니다.

3. 2026년 8월 27일 PM 1:06 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 27일 AM 1:54 UTCresolved

   Mimir는 prod-us-central-0 지역의 오류율을 1:05에서 1:20 UTC로 약 15 분 동안 높였습니다. 문제는 해결되었습니다. 우리는 모니터링하고 있습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 25일 AM 10:39 UTCinvestigating

   우리는 미국 중부 지역의 Grafana Incident에 영향을 미치는 정전을 조사하고 있습니다 (prod-us-central-0). 고객은 만들 수 없습니다, 전망, 또는 쿼리 Incidents, 그리고 Incident 공개 API에 요청은 타이밍. 이 지역의 모든 고객은 영향을받습니다. Grafana OnCall은 영향을받지 않습니다. - alert ingestion, alert group 생성 및 알림 전달은 일반적으로 모든 작동입니다.

2. 2026년 8월 25일 AM 10:49 UTCmonitoring

   수정은 미국 중앙의 적용 및 Incident 관리가 회복되었습니다. Incident 공개 API는 일반적으로 응답하고, 고객은, 전망, 그리고 조회 Incidents를 다시 만들 수 있습니다. 우리는 서비스를 완전히 안정적으로 확인하기 위해 복구를 모니터링하고 있습니다.

3. 2026년 8월 25일 AM 11:01 UTCmonitoring

   우리는 더 많은 문제를 모니터링하고 있습니다.

4. 2026년 8월 25일 AM 11:02 UTCresolved

   이 사건은 해결되었습니다. 미국 중앙의 Incident 관리는 정상으로 운영됩니다. 고객은 Incidents를 만들 수 있으며, Incident Public API를 사용할 수 있습니다. Grafana OnCall은이 사건 중 어떤 시점에서 영향을받지 않았습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 18일 PM 10:53 UTCresolved

   우리는 다음과 같은 서비스에 영향을 미치는 문제점을 관찰했습니다. eu-west-2 지역에 Cloud Logs를 읽습니다. Affected 서비스는 탐색, 대시보드, 로그를 쿼리 할 때 알림 평가를 포함합니다. 대략 22h15 및 22h23 UTC에서 지속되는 영향의 시간, loki-prod-012에. 이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 13일 PM 3:25 UTCmonitoring

   Telemetry push APIs went down at 15:06 UTC, causing tests to lose telemetry data, like metrics, logs, traces, and browser screenshots. This issue has now been mitigated, and we are monitoring to determine root cause as well as full resolution.

2. 2026년 8월 13일 PM 4:47 UTCresolved

   This incident has been resolved.

1. 2026년 8월 10일 PM 1:30 UTCresolved

   Between 12:20 and 13:15 UTC, we experienced elevated error rates for metrics reads and writes due to a networking issue. Impact was limited to a subset of deployments in the prod-us-central-0 region. A fix has been applied and error rates have since recovered.

1. 2026년 8월 8일 PM 7:48 UTCresolved

   Due to a software bug the evaluation of some alert rules (primarily ones that have recovery threshold setting) were failing to be evaluated starting 14:00 UTC to 19:30 UTC today.

1. 2026년 8월 5일 PM 5:57 UTCresolved

   약 13시 40분과 15시 05분 UTC 사이, 클라우드 테스트의 서브셋이 예기치 않게 종료되고 표시된 Aborted (시스템). 이 영향은 그 기간에 세 짧은 창 동안 진행 중이었다; 완료된 실행에 대한 결과와 메트릭을 테스트하지 않았다. 우리는 15:05 UTC 이후로 더 많은 발생이 관찰되지 않았습니다. 수정은 장소에 있습니다. 이 플랫폼은 현재 운영되고 테스트 실행은 예상대로 실행됩니다

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 5일 AM 11:41 UTCinvestigating

   We are currently investigating an issue with critical o11y requests being too large for nods in the prod-eu-west-2 region. This is leading to issues in scaling up services, and may may lead increased errors in requests.

2. 2026년 8월 5일 AM 11:44 UTCresolved

   This incident has been resolved.

1. 2026년 8월 4일 PM 7:11 UTCinvestigating

   We are currently investigating an issue that causing some Grafana deployments in prod-us-central-0 and prod-us-central-3 to become unavailable.

2. 2026년 8월 4일 PM 8:12 UTCinvestigating

   We are continuing to investigate this issue.

3. 2026년 8월 4일 PM 10:58 UTCinvestigating

   We have identified the cause: our cloud provider has exhausted compute capacity in the affected region. We are working directly with them and are moving affected workloads to alternative capacity to restore service.

4. 2026년 8월 5일 AM 12:54 UTCmonitoring

   We have rolled out a change to the affected regions to restore services.

5. 2026년 8월 5일 AM 1:32 UTCresolved

   We are observing a continued period of stability and at this point, we are marking the incident resolved.

1. 2026년 8월 4일 AM 10:34 UTCinvestigating

   We have identified minor latency increases in write endpoints within the prod-eu-west-3. Our team is currently monitoring and investigating this.

2. 2026년 8월 4일 PM 12:46 UTCinvestigating

   There's still a minor latency increase in this cell however we have identified that it is improving although not back to normal as of yet. We will continue to look into this.

3. 2026년 8월 4일 PM 1:49 UTCresolved

   This incident has been resolved.