Ravelin 장애 기록

1. 2026년 10월 20일 오전 8:08 UTCmonitoring

   Revolut 발행 된 카드는 3DS 인증을 실패합니다. Revolut 플랫폼에 문제가 될 수 있습니다. 여기에서 Revolut의 상태를 추적 할 수 있습니다. [https://www.revolut.com/system-status/](https://www.revolut.com/system-status/ "https://www.revolut.com/system-status/") 다른 발행인의 카드는 일반적으로 처리됩니다. 우리는 신중하게 상황을 모니터링 할 것입니다. 우리는 불편을 끼쳐 드려 죄송합니다.

2. 2026년 10월 20일 오전 9:19 UTCmonitoring

   3DS 인증에 영향을 미치는 소스는 지역 유럽 서부 2.에서 Google Cloud Platform의 문제입니다. [https://status.cloud.google.com/incidents/Xs2XTHzAVC9YnafnPyzj] (https://status.cloud.google.com/incidents/Xs2XTHzAVC9YnafnPyzj "https://status.cloud.google.com/incidents/Xs2XTHzAVC9YnafnPyzj") 다음과 같은 Issuers' ACS가 영향을 미쳤습니다. • 3DS LOA ACS RELT 020301 01127 (레볼트) • 3DS LOA ACS OPES 020301 00996 (오픈웨이 유럽 S.A) 우리는 계속 상황을 모니터링 할 것입니다.

3. 2026년 10월 20일 오후 1:52 UTCmonitoring

   우리는 더 이상 Revolut 카드에 대한 실패 인증의 높은 수준을 볼 수 없습니다. 그러나 Revolut 상태 페이지와 Google Cloud Platform은 여전히 진행중인 사건을 보여줍니다. 앞으로도 플랫폼에 최적화되어 있습니다. 우리는 불편을 끼쳐 드려 죄송합니다.

4. 2026년 10월 21일 오전 7:59 UTCresolved

   이 사건은 이제 해결되었습니다. 우리는 불편을 끼쳐 드려 죄송합니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 3일 오전 11:01 UTCinvestigating

   Ravelin 대시보드에 액세스할 때 어떤 사용자가 오류를 수신하는 것이 좋습니다. 우리는 현재 원인을 조사하고 우리가 더 알고로 업데이트 할 것입니다.

2. 2026년 9월 3일 오전 11:12 UTCinvestigating

   대시보드 오류를 발생시킨 변경 사항을 다시 압연하고, 대략 10:45 UTC의 오류를 보았습니다. 우리는 문제점의 뿌리 원인을 조사하기 위해 계속됩니다.

3. 2026년 9월 3일 오전 11:27 UTCmonitoring

   대시보드는 다시 작동하며 오류가 중단되었습니다. 우리는 더 많은 대쉬보드 오류를 모니터링하고 루트 원인을 조사하기 위해 계속됩니다.

4. 2026년 9월 3일 오후 4:38 UTCresolved

   이전 사건은 이제 해결되었습니다. 우리는 불편을 끼쳐 드려 죄송합니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 9월 1일 오후 3:21 UTCinvestigating

   우리는 우리의 3DS API에서 증가된 과실율을 경험하고 있습니다. 미국 기반 교통은 유럽 연합 (EU) 클러스터 (EU)의 처리로 다시 시작되므로 응답 시간을 높일 수 있습니다. 우리는 현재 미국 클러스터를 수리하는 과정에서 있습니다. 우리는 원인을 발견하기 위해 투자하고 있습니다. 더 많은 업데이트를 위해 여기를 확인하시기 바랍니다.

2. 2026년 9월 1일 오후 3:44 UTCmonitoring

   ```````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````` 우리의 미국 클러스터는 복구 및 처리 트래픽은 일반적으로 다시. Google은 아래에 설명 된 발행물을 확인했습니다. 가상 프라이빗 클라우드 (VPC) - VM에서 VM 커뮤니케이션 - 내부 IP에 VM 통신에 VM 다음 위치에서: - asia-east1 (활성) - us-central1 (활성) 이것은 us-central1 지역을 실행하는 우리의 성분의 연결에 충격을 주었습니다. 우리는 상황을 계속 모니터링 할 것입니다. ````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````````

3. 2026년 9월 1일 오후 4:22 UTCmonitoring

   Google은 현재 투고 사건에 대한 세부 정보를 게시했습니다. [https://status.cloud.google.com/incidents/J5ia5t9p3g9Q5Wi7r8Ev](https://status.cloud.google.com/incidents/J5ia5t9p3g9Q5Wi7r8Ev "https://status.cloud.google.com/incidents/J5ia5t9p9p7v") 우리는 3DS API를 계속 모니터링 할 것입니다. 우리는 불편을 끼쳐 드려 죄송합니다.

4. 2026년 9월 1일 오후 5:01 UTCresolved

   이전 사건은 이제 해결되었습니다. 우리는 불편을 끼쳐 드려 죄송합니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 9일 오후 5:10 UTCinvestigating

   We are seeing a small number of errors periodically due to an issue in our aggregations service. We are currently investigating.

2. 2026년 7월 9일 오후 5:34 UTCidentified

   We have identified the issue and have mitigations in place such that the api should no longer be returning errors. We are continuing to monitor and address the root cause.

3. 2026년 7월 9일 오후 5:42 UTCmonitoring

   We have stopped returning 500s. We are monitoring the situation.

4. 2026년 7월 9일 오후 7:31 UTCresolved

   The incident has been resolved.

1. 2026년 6월 18일 오후 3:47 UTCmonitoring

   An issue regarding datalist configuration caused an increase in errors returned from the PSP API. This has now been resolved and we are monitoring.

2. 2026년 6월 18일 오후 4:11 UTCresolved

   API performance has returned to expected performance levels

1. 2026년 3월 2일 오후 4:40 UTCmonitoring

   Between 14:46 and 15:47 (UTC), some clients experienced 500 errors when accessing the Explore Customers and Orders features in the Dashboard. This was caused by a code deployment that inadvertently removed functionality required for filters in Explore. We have rolled back the problematic deployment and confirmed that the Explore feature is now functioning normally. All services have been restored to their previous stable state.

2. 2026년 3월 2일 오후 4:48 UTCresolved

   The dashboard is now fully operational.

1. 2026년 1월 21일 오후 4:45 UTCidentified

   An issue with a database update caused a subset of requests to return a 500 error.

2. 2026년 1월 21일 오후 4:45 UTCresolved

   This is now resolved

1. 2025년 8월 21일 오후 2:05 UTCinvestigating

   We're seeing elevated scoring response times at the moment. We are investigating as a priority

2. 2025년 8월 21일 오후 2:30 UTCmonitoring

   Response times have returned to normal. We are continuing to investigate and are monitoring the situation.

3. 2025년 8월 21일 오후 3:29 UTCresolved

   Our system is fully operational

1. 2025년 8월 18일 오후 3:09 UTCidentified

   We are seeing some elevated latency on the API. We have identified the issue and are looking to remedy it ASAP.

2. 2025년 8월 18일 오후 3:13 UTCmonitoring

   Response times have returned to normal levels.

3. 2025년 8월 18일 오후 3:29 UTCresolved

   The issue is resolved

1. 2025년 6월 12일 오후 6:11 UTCinvestigating

   We are experiencing a partial API outage. We are investigating and will provide updates when we have more information.

2. 2025년 6월 12일 오후 6:29 UTCinvestigating

   It appears GCP, where Ravelin is hosted, is experiencing an outage. This is also affecting the Ravelin dashboard and the PCI and 3DS API. We are continuing to investigate.

3. 2025년 6월 12일 오후 6:55 UTCidentified

   This appears to be a widespread issue with GCP, our cloud provider. We are continuing to look into it.

4. 2025년 6월 12일 오후 7:18 UTCmonitoring

   We are seeing the system start to recover, but are still seeing elevated response times. We expect this to continue as we retry failed requests. We are continuing to monitor and investigate.

5. 2025년 6월 12일 오후 7:43 UTCmonitoring

   Our system appears to have recovered. Error responses have stopped and response times have returned to normal. We are continuing to monitor the situation.

6. 2025년 6월 12일 오후 9:10 UTCresolved

   Our system is fully operational.

1. 2025년 4월 22일 오전 11:50 UTCidentified

   We are seeing elevated latency on the core Ravelin API. We have identified the issue and you should see latency coming down. We apologise for the issue.

2. 2025년 4월 22일 오후 12:36 UTCmonitoring

   Response times have recovered and we are monitoring the situation.

3. 2025년 4월 22일 오후 1:28 UTCresolved

   Latency has returned to normal levels.

4. 2025년 4월 22일 오후 4:26 UTCresolved

   One of our server nodes in our Kubernetes cluster was running with high CPU for all the pods provisioned on that node. We are unsure the cause at the moment (could be a noisy neighbour, could be hardware issues, etc) but we have removed that node which solved the issue.

1. 2025년 2월 19일 오후 3:22 UTCresolved

   Our API was generating 500 errors for about six minutes due to a delay in configuration between services

1. 2024년 9월 6일 오후 1:50 UTCinvestigating

   We are seeing an increase in error responses from our API. We are currently investigating.

2. 2024년 9월 6일 오후 2:18 UTCmonitoring

   We have identified the source of the issue and have taken steps to reduce the errors. Errors rates have now dropped. We are continuing to monitor the situation.

3. 2024년 9월 6일 오후 3:31 UTCresolved

   The API outage has been resolved, and all services are now fully operational.

4. 2024년 9월 6일 오후 4:04 UTCinvestigating

   We are now seeing issues accessing the Ravelin dashboard. We are also seeing a slight increase in API response times. We are not sure if this is related to the previous issue but are investigating.

5. 2024년 9월 6일 오후 4:25 UTCmonitoring

   We have made some changes which we believe have addressed the issues. We are continuing to monitor the situation.

6. 2024년 9월 6일 오후 5:44 UTCresolved

   We have not seen any further issues since our previous update. The dashboard and API are both operating normally.

1. 2024년 8월 7일 오후 12:28 UTCidentified

   We are experiencing errors on the fraud API. The issue has been identified and is being fixed now.

2. 2024년 8월 7일 오후 12:35 UTCmonitoring

   Things have recovered after a roll back of a deploy. We are monitoring the situation but expect no more errors at this point.

3. 2024년 8월 7일 오후 1:33 UTCresolved

   This is now resolved.

1. 2024년 5월 1일 오후 3:52 UTCinvestigating

   We're investigating an issue with connections to Ravelin's dashboard.

2. 2024년 5월 1일 오후 3:55 UTCinvestigating

   We seem to be getting some connections to the dashboard but still investigating the issue.

3. 2024년 5월 1일 오후 4:25 UTCmonitoring

   The issue has been identified as an increased load on the database due to an error case in a recent deploy. This has been mitigated and we are monitoring the issue

4. 2024년 5월 1일 오후 4:29 UTCresolved

   The incident is now resolved

1. 2024년 4월 22일 오전 9:19 UTCinvestigating

   We are currently investigating an issue with the thresholds displayed in the threshold configuration section of the dashboard. This was due to a recent config migration. We do not believe this is having any effect on the thresholds used for scoring. Please do not make any threshold changes via the dashboard based on the current values. We are currently investigating and working on a fix.

2. 2024년 4월 22일 오전 9:55 UTCidentified

   We have identified the problem and are deploying a fix.

3. 2024년 4월 22일 오전 10:11 UTCmonitoring

   Our fix has been deployed and the correct thresholds should now be displayed in the dashboard. We are continuing to monitor the situation. When rolling out the threshold config change we did also see a temporary issue with scoring requests between 08:20 and 08:25 UTC, when a small number of requests failed with a 500 response code. We will also be investigating this as part of this incident.

4. 2024년 4월 22일 오후 12:50 UTCresolved

   The issue has been resolved. We will continue to investigate the cause for this issue and provide an update on any further findings.

1. 2024년 2월 28일 오전 8:36 UTCinvestigating

   We are currently investigating issues loading the rules page on the dashboard.

2. 2024년 2월 28일 오전 9:16 UTCmonitoring

   We are continuing to monitor the situation but the affected component has recovered

3. 2024년 2월 28일 오후 1:23 UTCresolved

   This incident is resolved. It was an issue with queries not progressing within Bigquery. Bigquery has since recovered

1. 2024년 2월 6일 오전 11:57 UTCinvestigating

   We are seeing elevated errors on the API. We are investigating

2. 2024년 2월 6일 오후 12:07 UTCmonitoring

   This has settled down. It was caused by a short spike in latency on our primary database, we are continuing to investigate.

3. 2024년 2월 7일 오전 8:51 UTCresolved

   This incident has resolved. We are continuing to monitor and investigate isolated cases of increased latency.

1. 2024년 2월 1일 오후 4:59 UTCmonitoring

   We're seeing timeouts loading data from our primary database to view in the dashboard. We've scaled this up a little and are monitoring the situation. Although the same database is used for scoring that has not been effected so far

2. 2024년 2월 1일 오후 7:23 UTCmonitoring

   We continue to monitor the timeouts related to loading data from our primary database. Our primary and secondary databases have been swapped. That caused a spike in response times but those are now improving.

3. 2024년 2월 2일 오후 4:48 UTCmonitoring

   We're continuing to see intermittent performance issues with our main database. We've now seen it affect our main API as well as the dashboard. The overall impact remains small. We've scaled up the database server capacity and are monitoring the situation

4. 2024년 2월 6일 오전 11:57 UTCresolved

   This was resolved late last week

1. 2023년 12월 5일 오전 10:35 UTCinvestigating

   Searching in the dashboard will occasionally timeout or be slower than expected. We are currently investigating.

2. 2023년 12월 5일 오전 11:06 UTCidentified

   We are aware of a slow down in our search database. We are attempting to scale further nodes and investigate root cause.

3. 2023년 12월 5일 오전 11:59 UTCidentified

   We are still investigating and managing node scaling on our search database. We will update you further as things progress.

4. 2023년 12월 5일 오후 12:55 UTCidentified

   We have done some mitigation that will improve search latency for the dashboard but data will be delayed. We are continuing to work on the core database issue.

5. 2023년 12월 5일 오후 2:12 UTCidentified

   Mitigation is still ongoing. Search times have improved and index latency is improving. Not recovered yet but going in the right direction.

6. 2023년 12월 5일 오후 2:41 UTCmonitoring

   Index time has gone back to nominal latency. We are currently draining queues of backfilled data. Expect to have search data up to date shortly

7. 2023년 12월 5일 오후 3:06 UTCmonitoring

   We've fixed the elastic search database cluster issues, so we are no longer experiencing any errors or timeouts. However the cluster is not running completely up to date yet so there will be stale data returned on searches. We're running through the queues to fix that, and expect them to finish in ~2hrs by 5pm GMT

8. 2023년 12월 5일 오후 4:03 UTCresolved

   All data has now been updated. Searching within the dashboard should be up to date and running as normal. Thanks for your patience