Webshare 장애 기록

1. 2026년 7월 28일 PM 6:34 UTCmonitoring

   사이 17:01 그리고 17:54 UTC 에 7월 28, 고객은 프록시 트래픽에 대한 연결 실패와 대쉬보드와 API에 액세스 오류. 원인은 프록시 할당 시스템에서 과도한 부하를 배치하는 내부 프로비저닝 작업이었습니다. 이는 프록시 인증을 평가했습니다. 서비스는 17:54 UTC에 완전히 복원되었습니다. 약 53 분의 영향을받은 후. 우리는 내부적으로 recurrence를 방지하기 위해.

2. 2026년 7월 28일 PM 6:35 UTCresolved

   17:54 UTC에 해결. 프록시 트래픽, 대쉬보드 및 API는 정상적으로 작동됩니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 6월 28일 AM 10:08 UTCidentified

   We've observed an increase in proxy and API error rate.

2. 2026년 6월 28일 AM 10:11 UTCmonitoring

   We've identified the source of the issue and applied a fix. We're monitoring to confirm full recovery.

3. 2026년 6월 28일 AM 10:29 UTCresolved

   This incident is now resolved. The fix has been confirmed and all systems are operating normally.

1. 2026년 6월 3일 PM 4:46 UTCinvestigating

   We're observing high proxy error rate.

2. 2026년 6월 3일 PM 5:37 UTCidentified

   We've identified the root cause and we're working on recovering our services.

3. 2026년 6월 3일 PM 5:42 UTCmonitoring

   All system metrics are back to normal.

4. 2026년 6월 3일 PM 6:21 UTCinvestigating

   Proxy error rate is low, but users are reporting issues logging into dashboard.webshare.io.

5. 2026년 6월 3일 PM 6:24 UTCinvestigating

   We're observing increased proxy error rate.

6. 2026년 6월 3일 PM 9:58 UTCidentified

   We're working to recover the system.

7. 2026년 6월 4일 AM 1:36 UTCidentified

   Proxy servers are back online and working normally. We are now working on bringing the dashboard back online as well.

8. 2026년 6월 4일 AM 1:43 UTCmonitoring

   All issues have been resolved. We are monitoring the system.

9. 2026년 6월 4일 AM 2:16 UTCresolved

   All the issues are resolved, the system is back to normal.

1. 2026년 5월 21일 AM 8:15 UTCidentified

   During a maintenance operation on one of our cluster nodes, the orchestrator entered a retry loop trying to reassign tasks that referenced a previous node identity. This blocked new task placement across the cluster for approximately 30 minutes, briefly affecting the availability of some services.

2. 2026년 5월 21일 AM 8:35 UTCmonitoring

   The issue has been mitigated and our services have returned to normal capacity. We are continuing to monitor the platform closely to ensure full stability and will provide a final update shortly.

3. 2026년 5월 21일 AM 9:44 UTCresolved

   All services have returned to normal capacity. We have confirmed stability throughout our monitoring period.

1. 2026년 5월 14일 AM 10:58 UTCinvestigating

   We've observing increased error rates in proxy requests.

2. 2026년 5월 14일 AM 11:55 UTCmonitoring

   We've remedied the issue. We're actively monitoring our systems.

3. 2026년 5월 14일 PM 12:02 UTCidentified

   We're observing increased error rates again. We've identified the issue and we're working on a fix.

4. 2026년 5월 14일 PM 12:11 UTCmonitoring

   We've deployed a fix and error rates are back to normal.

5. 2026년 5월 14일 PM 12:30 UTCresolved

   All systems are fully operational.

1. 2026년 5월 6일 AM 9:38 UTCidentified

   We've identified an issue causing elevated API error rates. A fix is being rolled out.

2. 2026년 5월 6일 AM 9:45 UTCresolved

   We've rolled out a fix that resolved the issue.

1. 2026년 4월 10일 PM 11:45 UTCinvestigating

   We are investigating an increase failure rate and slow dashboard

2. 2026년 4월 11일 AM 12:44 UTCidentified

   We've identified the issue and deployed a fix

3. 2026년 4월 11일 AM 12:51 UTCmonitoring

   We've implemented the fix and we are monitoring

4. 2026년 4월 11일 AM 1:01 UTCresolved

   proxy server and dashboard fully operational

1. 2026년 4월 10일 PM 8:35 UTCinvestigating

   We've identified an increased proxy error rate and we are identifying the root cause

2. 2026년 4월 10일 PM 8:56 UTCidentified

   We've identified the issue and implemented a fix

3. 2026년 4월 10일 PM 8:56 UTCmonitoring

   We are monitoring the system.

4. 2026년 4월 10일 PM 9:12 UTCresolved

   Proxy server and dashboard fully operational

1. 2026년 4월 10일 PM 5:32 UTCinvestigating

   We are experiencing issues with some of hour datacenters that affect the proxy usage and dashboard

2. 2026년 4월 10일 PM 5:34 UTCidentified

   We've identified the issue and implemented a fix

3. 2026년 4월 10일 PM 5:35 UTCmonitoring

   We are monitoring the system, proxy server and dashboard are operational.

4. 2026년 4월 10일 PM 5:40 UTCresolved

   Platform is completely operational

1. 2026년 4월 10일 AM 7:03 UTCinvestigating

   We are experiencing degraded performance in Dashboard and API. The incident is being investigated.

2. 2026년 4월 10일 AM 7:27 UTCmonitoring

   The problem has been identified and fixed. The service has recovered. We will continue monitoring the service.

3. 2026년 4월 10일 AM 7:49 UTCresolved

   Systems are stable.

1. 2026년 3월 23일 PM 1:49 UTCidentified

   A deployment caused degraded API and proxy performance, we're reverting the changes to mitigate.

2. 2026년 3월 23일 PM 1:58 UTCmonitoring

   We've reverted the changes and are observing recovery. We'll continue to monitor the services as they fully recover.

3. 2026년 3월 23일 PM 2:19 UTCresolved

   We've confirmed full recovery.

1. 2026년 3월 18일 PM 3:44 UTCinvestigating

   We're investigating degraded dashboard and proxy performance.

2. 2026년 3월 18일 PM 4:06 UTCmonitoring

   We've addressed the issue and are monitoring the situation.

3. 2026년 3월 18일 PM 4:16 UTCresolved

   Systems are stable.

1. 2026년 3월 12일 PM 1:35 UTCinvestigating

   Proxy list might load slow

2. 2026년 3월 12일 PM 1:39 UTCmonitoring

   We've identified the issue, fixed it and we are monitoring it.

3. 2026년 3월 12일 PM 1:51 UTCresolved

   Dashboard is fully operational.

1. 2026년 3월 11일 PM 2:00 UTCinvestigating

   We have identified a slower proxylist load times and we are investigating the cause.

2. 2026년 3월 11일 PM 2:30 UTCmonitoring

   We've fixed the issue and we are monitoring.

3. 2026년 3월 11일 PM 3:04 UTCresolved

   All systems are operating normally.

1. 2026년 3월 5일 AM 8:27 UTCidentified

   We are experiencing degraded performance, we've identified the issue and fixing it.

2. 2026년 3월 5일 AM 8:33 UTCmonitoring

   We've fixed the issue. We are monitoring.

3. 2026년 3월 5일 AM 9:14 UTCresolved

   After monitoring for a while, everything is working as expected.

1. 2026년 2월 26일 PM 6:15 UTCinvestigating

   We're investigating degraded API and proxy performance.

2. 2026년 2월 26일 PM 7:48 UTCmonitoring

   All systems are operational. We're actively monitoring for further issues.

3. 2026년 2월 26일 PM 7:58 UTCresolved

   Issue is resolved

1. 2026년 2월 26일 AM 10:54 UTCinvestigating

   We're investigating degraded API and proxy performance.

2. 2026년 2월 26일 PM 12:26 UTCmonitoring

   All systems are operational. We're actively monitoring for further issues.

3. 2026년 2월 26일 PM 12:41 UTCresolved

   Issues resolved

1. 2026년 2월 25일 AM 9:30 UTCinvestigating

   We're investigating degraded API and proxy performance.

2. 2026년 2월 25일 AM 9:41 UTCidentified

   We've paused updates to proxy lists while we implement a fix. Proxies are back to normal operation.

3. 2026년 2월 25일 AM 10:06 UTCmonitoring

   All systems are operational. We're actively monitoring for further issues.

4. 2026년 2월 26일 AM 12:52 UTCresolved

   Issues resolved.

1. 2026년 2월 21일 PM 10:42 UTCmonitoring

   due to some internal network issue, our proxy infrastructure went down

2. 2026년 2월 21일 PM 10:54 UTCresolved

   We had an internal network outage from 22:18-22:25 UTC. Proxies were unusable for that time.

1. 2026년 2월 19일 AM 10:15 UTCidentified

   We're working to fix to make the API available again.

2. 2026년 2월 19일 AM 10:19 UTCmonitoring

   API error levels are back to normal. We're monitoring the situation.

3. 2026년 2월 19일 AM 10:52 UTCresolved

   All systems are operational.