Knock App 장애 기록

1. 2026년 10월 1일 오후 2:09 UTCidentified

   고객 데이터 창고에 동기화 메시지가 지연됩니다. 우리는 지연을 해결하기 위해 노력하고 있습니다. 다른 데이터 동기화는 영향을 미치지 않습니다.

2. 2026년 10월 1일 오후 4:06 UTCidentified

   데이터 창고에 현재 메시지 데이터를 동기화하고 다음 3 시간 내에 완료 할 것으로 예상됩니다. 그 시간에, 우리는 최신 데이터로 모든 다운스트림 대상에 새로운 동기화를 발행합니다.

3. 2026년 10월 2일 오전 2:56 UTCidentified

   우리는 수출을 위한 최신 메시지 자료를 얻기에 적극적으로 일하고 있습니다. 작업이 실행하는 장시간 시간이 걸립니다. 이 작업이 완료되면 다시 실행 동기화가됩니다.

4. 2026년 10월 2일 오전 4:16 UTCmonitoring

   우리는 성공적으로 수출을위한 테이블을 재건하고 이제 동기화를 실행하고 있습니다. 우리는 모니터를 계속하고 몇 가지 요법과 앞으로의 안정화에 일할 것입니다.

5. 2026년 10월 2일 오후 9:05 UTCresolved

   우리는 우리의 자료 창고 연결관을 위한 정상적인 sync 계획으로 돌아갑니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 21일 오후 6:22 UTCinvestigating

   우리는 현재 마술 링크를 통해 대쉬보드 로그인으로 문제를 조사하고 있습니다. Google 및 Passkey를 통해 로그인하지 않습니다. API를 통해 보내는 메시지는 영향을 미치지 않습니다.

2. 2026년 9월 21일 오후 6:41 UTCmonitoring

   수정이 구현되었습니다. 현재 서비스를 모니터링하고 있습니다.

3. 2026년 9월 21일 오후 7:24 UTCresolved

   이 사건은 해결되고, 마술 연결은 완전히 기능적입니다. Malicious activity는 Knock 대시보드의 거래 메일을 기리기 위해 이메일 제공 업체가 발생했습니다. 우리는 활동과 복원 된 이메일 배달을 차단했습니다. [email protected]의 Knock의 이메일만 영향을 받았습니다. 고객 이메일 채널이 공개되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 8월 31일 오후 4:42 UTCidentified

   일부 고객은 워크플로우에서 오류를 볼 수 있습니다. 우리는 문제를 확인하고 수정을 구합니다.

2. 2026년 8월 31일 오후 4:59 UTCmonitoring

   수정이 구현되었습니다. 현재 서비스를 모니터링하고 있습니다. Earlier 고장나는 작업 흐름을 재생합니다.

3. 2026년 8월 31일 오후 5:35 UTCmonitoring

   수정이 구현되었습니다. 현재 서비스를 모니터링하고 있습니다.

4. 2026년 8월 31일 오후 6:26 UTCresolved

   이 사건은 지금 해결되고 서비스는 지금 완전히 가동입니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 30일 오후 6:10 UTCinvestigating

   우리는 현재 우리의 자료 창고 수출에 지연을 투자하고 있습니다. 우리는 곧 업데이트를 게시합니다.

2. 2026년 7월 31일 오후 4:49 UTCresolved

   이 사건은 지금 해결되고 서비스는 지금 완전히 가동입니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 17일 오후 7:37 UTCinvestigating

   Dashboard 및 V1 API의 워크플로우 실행 로그의 가용성을 조사하고 있습니다. 현재 우리는 일부 실행 로그에 대한 최대 18 분의 지연을 볼 수 있습니다.

2. 2026년 7월 17일 오후 7:57 UTCresolved

   이 사건은 지금 해결되고 서비스는 지금 완전히 가동입니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 16일 오후 3:32 UTCinvestigating

   우리는 현재 오류 처리 알림 워크플로우를 조사하고 일부 고객에게 메시지를 전송하고 있습니다.

2. 2026년 7월 16일 오후 3:35 UTCidentified

   우리는 수정을 발송하고 복구를 시작합니다. 우리는 밀접하게 감시하고 있습니다.

3. 2026년 7월 16일 오후 3:40 UTCmonitoring

   Workflow 처리와 메시지 납품은 다시 가동됩니다. 우리는 밀접하게 감시하고 있습니다.

4. 2026년 7월 16일 오후 3:45 UTCresolved

   이 사건은 지금 해결되고 서비스는 지금 완전히 가동입니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 10일 오후 3:17 UTCinvestigating

   We're currently investigating an issue with our service. We'll have an update soon.

2. 2026년 7월 10일 오후 3:28 UTCidentified

   We've identified the issue with the service and are actively working on a fix. We're seeing workflows and message deliveries process again at the usual rate.

3. 2026년 7월 10일 오후 3:33 UTCmonitoring

   A fix has been implemented, and we're currently monitoring the service. All our services seem to be recovering. We're in the process of replaying any failed work that happened during the window. We expect there was no loss of workflows during this incident, but some work may have been delayed.

4. 2026년 7월 10일 오후 3:40 UTCresolved

   This incident has now been resolved and the service is now fully operational. We're replaying any jobs that may have failed during the window. All our processing queues are fully caught up. We will share a full post mortem as soon as possible.

1. 2026년 7월 1일 오후 9:53 UTCmonitoring

   Message data synchronization into downstream customer data warehouse destinations is delayed for messages created after 8 PM ET on June 30, 2026. We have implemented a fix. We expect the issue to be fully resolved following the nightly synchronization job scheduled on July 2nd, 2026.

2. 2026년 7월 3일 오전 12:12 UTCresolved

   This incident has now been resolved and the service is now fully operational.

1. 2026년 6월 24일 오후 2:00 UTCinvestigating

   We are investigating delays processing workflow run event logs.

2. 2026년 6월 24일 오후 5:26 UTCinvestigating

   We're still investigating delays affecting workflow run event logs.

3. 2026년 6월 24일 오후 5:50 UTCresolved

   We've completely recovered any lag on workflow logs and we are back to normal.

4. 2026년 6월 25일 오후 3:30 UTCinvestigating

   We're currently investigating an issue with some workflow logs being delayed.

5. 2026년 6월 26일 오전 6:35 UTCresolved

   This incident has now been resolved and the service is now fully operational.

1. 2026년 6월 16일 오후 5:55 UTCinvestigating

   We're currently investigating elevated error rates connecting to the V1 Websocket API. Realtime behavior for in-app feed and guides is degraded as a result.

2. 2026년 6월 16일 오후 6:26 UTCmonitoring

   We have shipped a fix and are seeing resolution in websocket connections. We are continuing to monitor closely.

3. 2026년 6월 16일 오후 6:44 UTCresolved

   This incident has been resolved.

1. 2026년 6월 16일 오후 1:34 UTCinvestigating

   We are investigating delays in ingesting workflow run logs and triggering outbound webhooks from workflow run events.

2. 2026년 6월 16일 오후 1:36 UTCmonitoring

   We are seeing recovery in workflow run log and webhook delivery delays and are continuing to monitor.

3. 2026년 6월 16일 오후 1:38 UTCresolved

   This incident has been resolved.

1. 2026년 6월 15일 오후 2:35 UTCmonitoring

   We intermittently experienced delayed workflow logs between ~09:00 AM UTC and ~01:45 PM UTC today (2026/06/15). This was caused by some internal changes in how we fan out workflow logs, which caused consumers to get temporarily backlogged. The peak delay we experienced before processing workflow logs was around 15 minutes, but we intermittently saw delays of up to 5-6 minutes. This affected 1. Logs showing up in the dashboard. 2. Workflow batch mappings. We saw complete resolution at 01:43 PM UTC. Logs are being processed within our usual window (within up to ~5s) again.

2. 2026년 6월 15일 오후 4:31 UTCresolved

   We did not experience any further issues after we put the fix in place.

1. 2026년 6월 4일 오전 11:40 UTCinvestigating

   We're seeing elevated response times loading some log data. This is leading to slower page loads in the Dashboard and slower responses from some V1 API endpoints.

2. 2026년 6월 4일 오후 12:07 UTCmonitoring

   We have shipped a fix and we are seeing recovery of log data load times. We are continuing to monitor closely before resolving.

3. 2026년 6월 4일 오후 12:11 UTCresolved

   This incident has been resolved.

1. 2026년 5월 1일 오후 5:25 UTCinvestigating

   We're currently investigating an issue with our service. We'll have an update soon.

2. 2026년 5월 1일 오후 5:30 UTCmonitoring

   A fix has been implemented, and we're currently monitoring the service.

3. 2026년 5월 1일 오후 6:26 UTCresolved

   This incident has now been resolved and the service is now fully operational.

1. 2026년 5월 1일 오전 10:19 UTCinvestigating

   We're currently investigating an issue related to slow notification processing and message delivery. Some workflows will be delayed

2. 2026년 5월 1일 오전 10:33 UTCinvestigating

   We're seeing an extremely high amount of load on our services which is causing workflow and broadcast delays. We're working to relieve the pressure immediately.

3. 2026년 5월 1일 오전 10:56 UTCinvestigating

   We're seeing some recovery on our services but are dealing with delays in some workflow and broadcast processing still. Our logging service is also currently delayed, so may not reflect the latest as we catch up and work through a huge influx of work.

4. 2026년 5월 1일 오전 11:22 UTCidentified

   One of our workflow queues is currently still backlogged, but we're seeing good resolution across other areas of our service and we have effectively cordoned off the source of the issue. We're burning through remaining work and are exploring ways to shed the load further to get back to stability.

5. 2026년 5월 1일 오후 12:05 UTCidentified

   We've taken steps to shuffle around work in our system which has meant that we're processing new work for all customers again. We still have some queued workflow executions that we're working through and expect to be fully caught up in the next 40 minutes.

6. 2026년 5월 1일 오후 12:58 UTCidentified

   We are seeing a recovery in all workflow and broadcast processing delays. We are monitoring closely.

7. 2026년 5월 1일 오후 1:18 UTCresolved

   All behavior remains normal, we are considering this incident resolved.

1. 2026년 4월 14일 오후 3:09 UTCinvestigating

   We are investigating errors resolving and redirecting tracked links.

2. 2026년 4월 14일 오후 3:14 UTCmonitoring

   We've shipped a fix and are seeing resolution in tracked link resolution. We are monitoring closely.

3. 2026년 4월 14일 오후 3:19 UTCresolved

   This incident has now been resolved and the service is now fully operational.

1. 2026년 3월 31일 오후 1:06 UTCinvestigating

   We're currently investigating an issue with delayed ingestion of our API logs, putting pressure on our ingestion pipeline and resulting in some degraded state for browsing API logs as well.

2. 2026년 3월 31일 오후 1:29 UTCmonitoring

   We’ve shipped a fix and we’re seeing initial signs of recovery. We are continuing to monitor closely.

3. 2026년 3월 31일 오후 1:50 UTCmonitoring

   We are seeing full recovery of API log delays. We are continuing to monitor before closing out this incident

4. 2026년 3월 31일 오후 2:18 UTCresolved

   This incident has now been resolved and the service is now fully operational.

1. 2026년 3월 25일 오후 3:29 UTCinvestigating

   We are investigating delays in creating and processing message events. Some customers may experience delays seeing message events in the Knock Dashboard. Some customers may also experience delays in outbound webhook events triggered by message events.

2. 2026년 3월 25일 오후 4:21 UTCidentified

   We've implemented a fix and are seeing message event lag begin to recover.

3. 2026년 3월 25일 오후 4:22 UTCidentified

   Webhook delivery lag has resolved. We are still waiting for message event Dashboard availability lag to recover.

4. 2026년 3월 25일 오후 4:36 UTCresolved

   All message event lag has recovered. We are considering this incident resolved.

1. 2026년 3월 20일 오전 12:33 UTCinvestigating

   We're currently investigating an issue with promoting workflows. We're working on a fix now. This does not impact notification delivery.

2. 2026년 3월 20일 오전 12:47 UTCidentified

   We've identified the issue with workflow promotion and are deploying a fix for it now.

3. 2026년 3월 20일 오전 12:54 UTCresolved

   The fix has been deployed and workflows are able to be promoted again.

1. 2026년 3월 3일 오후 5:02 UTCinvestigating

   We're currently investigating an issue with log processing. There are no issues currently processing workflows and messages, but logs are affected.

2. 2026년 3월 3일 오후 5:23 UTCidentified

   We've identified the issue with the service and are actively working on a fix.

3. 2026년 3월 3일 오후 5:24 UTCmonitoring

   A fix has been implemented, and we're currently monitoring the service.

4. 2026년 3월 3일 오후 5:32 UTCresolved

   This incident has now been resolved and the service is now fully operational.