Logrocket 장애 기록

1. 2026년 10월 24일 오후 4:12 UTCinvestigating

   분석 ingestion 시스템에서 높은 큐 백로를 투자하고 있습니다.

2. 2026년 10월 24일 오후 6:07 UTCmonitoring

   우리는 병목을 맑게하고 우리의 큐는 배수합니다.

3. 2026년 10월 24일 오후 7:51 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 22일 오전 1:31 UTCresolved

   7월 21일 오후 8시 50분과 오후 9시 10분 미국/New York 사이, 우리의 nginx 프록시 레이어의 업그레이드 동안 가용성 blips가있었습니다. SDK 클라이언트는 이 이벤트 동안 재향 군인을 갖게되며 오후 9시 30 분에 백로에서 회복됩니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 6월 15일 오후 3:05 UTCidentified

   We are investigating elevated queue backlogs for our analytics ingestion. Analytics and alerts may be delayed.

2. 2026년 6월 15일 오후 4:57 UTCmonitoring

   Latency is returning to normal. We are waiting on our remaining queues to drain.

3. 2026년 6월 15일 오후 6:21 UTCresolved

   This incident has been resolved.

1. 2026년 6월 2일 오전 5:23 UTCinvestigating

   We're investigating slow and failing dashboard queries.

2. 2026년 6월 2일 오전 5:41 UTCidentified

   We've identified the problem and are rolling out a fix.

3. 2026년 6월 2일 오전 6:10 UTCresolved

   This incident has been resolved.

1. 2025년 11월 18일 오후 12:19 UTCidentified

   An outage from our upstream CDN provider is causing instability for our dashboard. Data collection is not impacted.

2. 2025년 11월 18일 오후 1:37 UTCmonitoring

   Error rates are improving, we're continuing to monitor stability of the system.

3. 2025년 11월 18일 오후 2:52 UTCresolved

   This incident has been resolved.

1. 2025년 11월 5일 오후 7:43 UTCinvestigating

   We are investigating instability in our ingestion endpoints.

2. 2025년 11월 5일 오후 10:49 UTCresolved

   This incident is fully resolved.

1. 2025년 10월 14일 오후 2:53 UTCinvestigating

   We are investigating performance issues with our API server causing dashboard instability. Data collection is not impacted.

2. 2025년 10월 14일 오후 3:35 UTCidentified

   We have identified the cause of the issue and are deploying a mitigation.

3. 2025년 10월 14일 오후 3:59 UTCresolved

   The performance issue with our API server has been resolved.

1. 2025년 8월 4일 오후 4:55 UTCinvestigating

   We are currently investigating this issue.

2. 2025년 8월 4일 오후 5:56 UTCinvestigating

   We are continuing to investigate the issue and are working with our vendor to restore service.

3. 2025년 8월 4일 오후 7:03 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 2025년 8월 5일 오전 2:06 UTCresolved

   This incident has been resolved.

1. 2025년 6월 12일 오후 6:15 UTCinvestigating

   We are investigating a wide-spread issue with our cloud provider causing ingestion issues and limited access to the dashboard.

2. 2025년 6월 12일 오후 7:07 UTCidentified

   GCP is suffering a service outage. Google has opened an incident tracking this issue at https://status.cloud.google.com/incidents/ow5i3PPK96RduMcb1SsW#2c2sBHWU84yPDJ8y1ar4

3. 2025년 6월 12일 오후 8:42 UTCmonitoring

   The upstream issue has been resolved. We are monitoring and beginning to work through the backlog of session data.

4. 2025년 6월 12일 오후 8:42 UTCmonitoring

   We are continuing to monitor for any further issues.

5. 2025년 6월 13일 오전 1:18 UTCresolved

   This incident has been resolved.

1. 2025년 2월 24일 오후 7:14 UTCinvestigating

   We are currently investigating this issue.

2. 2025년 2월 24일 오후 8:04 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 2025년 2월 24일 오후 9:32 UTCresolved

   This incident has been resolved.

1. 2025년 2월 19일 오후 6:26 UTCinvestigating

   We are investigating issues causing ingestion delays. We're working with a vendor to identify the root cause of the problem

2. 2025년 2월 19일 오후 9:24 UTCinvestigating

   We are continuing to work with a vendor on identifying the root cause of our ingestion delays.

3. 2025년 2월 19일 오후 11:19 UTCmonitoring

   We've applied a fix and are monitoring the results

4. 2025년 2월 20일 오전 1:35 UTCresolved

   This incident has been resolved.

1. 2025년 2월 4일 오후 6:29 UTCinvestigating

   We are investigating issues causing ingestion delays and performance issues loading the dashboard and metrics.

2. 2025년 2월 4일 오후 7:11 UTCinvestigating

   Dashboard performance should be improved. We are continuing to work with a vendor on identifying the root cause of our ingestion delays.

3. 2025년 2월 4일 오후 8:38 UTCmonitoring

   We have identified a potential cause and observing significant improvements to ingestion delays. We are continuing to monitor.

4. 2025년 2월 4일 오후 9:14 UTCresolved

   This incident has been resolved.

1. 2025년 1월 29일 오후 10:04 UTCinvestigating

   The Streaming Data Export service is delayed. We've identified the issue and are working to remediate.

2. 2025년 1월 29일 오후 10:55 UTCinvestigating

   We are continuing to investigate this issue.

3. 2025년 1월 30일 오전 1:10 UTCidentified

   We've resolved the issue for most Streaming Data Export destinations. A few customers have been temporarily disabled until another fix goes out in the morning, at which time they will be caught up and we will resolve the incident.

4. 2025년 1월 30일 오후 9:42 UTCidentified

   We are continuing to work on a fix for this issue.

5. 2025년 1월 30일 오후 9:45 UTCresolved

   This incident has been resolved.

1. 2025년 1월 8일 오후 3:40 UTCinvestigating

   We are seeing significant infrastructure instability from our hosting provider.

2. 2025년 1월 8일 오후 4:37 UTCresolved

   The system has stabilized and our processing backlog is recovering.

1. 2024년 6월 21일 오후 3:00 UTCinvestigating

   We are investigating instability in our ingestion endpoints.

2. 2024년 6월 21일 오후 3:57 UTCmonitoring

   Ingestion has stabilized, we are continuing to monitor the recovery.

3. 2024년 6월 21일 오후 5:21 UTCmonitoring

   We are continuing to work down a backlog of ingestion from the initial outage, but have otherwise recovered from the outage.

4. 2024년 6월 21일 오후 6:22 UTCresolved

   The backlog has fully recovered.

1. 2024년 3월 30일 오후 5:03 UTCidentified

   We've identified an issue with our analytics database resulting in delayed ingestion and degraded alerting performance. The problem has been identified and we're working on a solution.

2. 2024년 3월 30일 오후 7:38 UTCmonitoring

   A fix has been implemented and ingestion is recovering

3. 2024년 3월 30일 오후 11:08 UTCresolved

   This incident has been resolved

1. 2023년 10월 30일 오후 8:12 UTCinvestigating

   We're seeing elevated error rates loading the UI.

2. 2023년 10월 30일 오후 8:25 UTCresolved

   This incident has been resolved.

1. 2023년 9월 22일 오후 4:35 UTCidentified

   Our Streaming Data Export system is not currently exporting data, we are working to resolve this. When this is reenabled it will catch up on data that would have been exported earlier.

2. 2023년 9월 22일 오후 5:24 UTCmonitoring

   The most recent export window ran successfully but we're continuing to monitor it for issues.

3. 2023년 9월 22일 오후 7:59 UTCmonitoring

   We've monitored several exports and believe this is resolved.

4. 2023년 9월 22일 오후 7:59 UTCresolved

   This incident has been resolved.

1. 2023년 8월 16일 오후 8:08 UTCinvestigating

   We are investigating an issue with slow and/or unresponsive application load times.

2. 2023년 8월 16일 오후 10:20 UTCidentified

   We've identified the source of the instability and are working through recovery.

3. 2023년 8월 16일 오후 10:35 UTCresolved

   This incident has been resolved.

1. 2023년 8월 9일 오후 2:09 UTCinvestigating

   We are investigating an issue with one of our search databases. Ingestion into this system is currently delayed, and loading data on the dashboard may be slow or timeout. Session Data collection is not impacted.

2. 2023년 8월 9일 오후 5:07 UTCinvestigating

   We are continuing to investigate this issue.

3. 2023년 8월 9일 오후 8:45 UTCidentified

   Our vendor has identified a root cause and we are working to restore the search database to full performance.

4. 2023년 8월 9일 오후 11:21 UTCmonitoring

   System performance has been restored. We are continuing to monitor as we work through the remaining backlog of events to process.

5. 2023년 8월 10일 오전 12:32 UTCmonitoring

   We are continuing to monitor for any further issues.

6. 2023년 8월 10일 오전 1:13 UTCresolved

   This incident has been resolved.