73 Socure incidents · 2025년 9월 — official updates, affected components, duration and resolution details.
10 월 27, 2026, 일부 고객은 RiskOS Sandbox webhooks를받지 못했습니다. 문제가 발생했습니다. Sandbox 알림 발송인이 처리 이벤트를 중지하기 위해 잘못된 웹훅 구성. 변형 된 구성은 수정되었습니다. 모든 처리는 회복되고 webhook 납품은 성공적으로 재개했습니다
공식 인시던트 업데이트를 자동 번역했습니다.
SSA는 현재 Electronic Consent Based Social Security Number Verification (eCBSV) 서비스를 포함한 여러 응용 프로그램과 서비스에 영향을 미치는 서비스 영향 이벤트를 경험하고 있습니다. 10월 23일 오후 4시 47분 (ET)에 대한 소중한 거래는 중단으로 영향을 미칩니다. 우리는 일단 우리가 서비스가 복원 된 통지를 받으면 또 다른 업데이트를 공유하고, eCBSV는 일반적으로 다시 작동합니다.
대략 4:56 (ET)에, 서비스는 복원되고 eCBSV는 이 시간에 일반적으로 운영됩니다. 우리는이 발생 할 수 있습니다 어떤 불편에 대 한 사과.
공식 인시던트 업데이트를 자동 번역했습니다.
우리는 현재 완료된 거래의 작은 비율을 위한 DocV Images를 표시하고 다운로드하는 데 필요한 지연을 유발하는 문제점을 조사하고 있습니다. 이 시간에 DocV 또는 평가에 영향을 미치지 않지만 이미지는 더 많은 시간이 걸릴 수 있습니다.
우리의 팀은 DocV 이미지 전시와 다운로드를 위해 경험있는 대기권에 걸린 단계를 가지고 있습니다. 이 시간에 DocV 평가에 대한 영향은 계속되고 팀은 상황을 모니터링 할 것입니다. 모든 충격이 해결되면 또 다른 업데이트가 제공됩니다.
이 문제는 해결되었습니다. 우리는 서비스를 보장하기 위해 성능을 모니터링하고 안정적입니다. 우리는이 발생 할 수있는 불편에 대해 사과합니다.
공식 인시던트 업데이트를 자동 번역했습니다.
SSA는 전자 컨텐트 기반 Social Security Number Verification (eCBSV) 서비스를 포함한 여러 응용 프로그램과 서비스를 영향을 미치는 서비스 영향 이벤트를 경험했습니다. 2026년 10월 18일 오후 2시 50분(ET)에서 중단이 시작되었고, 약 3시 10분(ET)에서 해결되었습니다. 서비스는 복원되고, eCBSV는 이 시간에 일반적으로 운영됩니다.
공식 인시던트 업데이트를 자동 번역했습니다.
3:00 EDT에서 시작, 일부 고객은 RiskOS Evaluate API를 사용할 때 간헐적 오류 또는 실패 요청을 경험할 수 있습니다. 우리는 데이터베이스 문제를 식별하고 해결하기 위해 적극적으로 노력하고 있습니다. 우리는 파괴를 위해 사과하고 우리가 조사하는 동안 당신의 인내력을 평가합니다.
우리는 interim 측정을 가지고 있으며, 높은 오류율은 변합니다. 지난 15 분 동안 관련 오류를 관찰하지 않았습니다. 우리는 모니터링에 대한 사건을 이동하고 있습니다. 상황에 따라 다른 업데이트를 공유합니다.
우리는 우리의 팀으로 당신의 patience는 아직도 상황을 밀접하게 감시합니다. 오류율은 우리가 전체 해상도를 향해 일하는 것을 계속합니다.
사건은 해결되었습니다, 우리는 더 이상 오류를 볼 수 없습니다. 서비스는 정상적으로 운영되고, 우리는 성과를 감시하는 것을 계속할 것입니다. 우리는 이것을 통해 일하면서 당신의 인내력을 평가합니다.
공식 인시던트 업데이트를 자동 번역했습니다.
Socure RiskOS 및 ID+ 서비스는 복원되었습니다. 롤아웃의 오류는 18:12 및 18:56 동부 시간 사이에 우리의 서비스에서 오류율에 임시 스파이크 발생. 오류가 정확하고 서비스가 안정적입니다. 우리는이 아웃리지가 불확실하고 전체 RCA는 문제의 전체 분석이 완료되면 사용할 수 있습니다.
## ** 루트 원인 분석 ** **문의:** Socure APIs 결과 **일시 범위: ** 15-Oct-2026 ** 중요 사항: ** Socure API에 대한 서비스 중단 ** 서버:** 해결 된 ###**1. 요약** 15-Oct-2026에서 18:12 및 19:00 동부 시간 Socure는 RiskOS 및 ID \ + API에 대한 중단을 경험했으며 오류 및 타이머를 사용자에게 유발합니다. 첫 번째 단계는 18:12에서 18:20, 그리고 거의 모든 서비스에 대한 주요 중단이었다. 18:20에서 19:00까지 정전의 두 번째 단계, 그리고 KYC 데이터에 의존하는 서비스에 대한 부분적 정전이었다, 고객은 몇 가지 서비스에 대한 오류율과 비행을 보았다, 그러나 트래픽은 여전히 봉사했다. ##**2. 타임라인** **일시/시간 \(ET\)** | 이벤트 **18:12** | 일상의 청소 변화가 병합되어, 한 가지 코드 저장소에서 다른 소스 저장소로 이동. 우리의 검토 도구의 버그가 변경의 범위를 숨깁니다. **18:13** | ArgoCD는 한 번에 주요 쿠버네티스 클러스터에서 대부분의 서비스를 다시 시작합니다. **18:20** | 모든 서비스 팟이 실행됩니다. KYC 서비스는 여전히 높은 오류율을 볼 수 있지만 Partial API 서비스 복원. **18:21** | 시동 교통의 홍수는 KYC 검색 서비스를 압도합니다. 오류율 스파이크. **18:42 ** | SRE는 KYC 검색에 영향을 미치는 캐스케이드 실패를 진단하고 트래픽을 차단하여 올 수 있습니다. **18:56** | KYC 검색 서비스는 완전히, SRE는 트래픽을 반환합니다. Downstream 서비스 안정화. **19:00** | 정상으로 운행하는 모든 교통, 사고가 안정적으로 선언되었습니다. ###**3. 루트 원인** * **Primary 뿌리 원인: ** 지속적인 마이그레이션의 일환으로, On-call SRE는 ArgoCD로 변경하여, kubernetes clusters Socure가 서비스에 서비스를 실행하는 데 사용하는 시스템을 사용합니다. 변경은 단일 클러스터에 적용되었으며, 푸시하기 전에 신중하게 검토되었으며 다른 환경에서 문제가 발생하지 않으며 눈에 띄는 영향을 미쳤습니다. 불행히도, 변경은 변경 검토에서 나타나지 않은 유산 설정을 업데이트. 그 레거시 설정은 ArgoCD를 관리하고 ArgoCD에서 많은 라이브 서비스를 제거했습니다. 결과 ArgoCD는 생산에서 간단히 그 서비스를 제거했습니다. 설정이 정확하기 전에. * ** 기여 인자:** KYC 검색 서비스는 내부 제품의 여러 서비스를 제공하는 Socure 인프라의 백엔드 조각입니다. 그 서비스는 서비스의 모든 클라이언트와 동시에 스크래치에서 재시작 할 때, 부하의 밑에 추락된 서비스의 작은 수. 이것은 남아있는 팟에로드를 증가, 차례로 충돌의 일부. 이 캐스케이드 실패는 Socure의 인프라의 나머지를 자신의 방식으로 돌아 오는에서 서비스를 방지했습니다. 이 별도의 실패 모드를 진단하면 추가 시간이 발생했고, 초기 사건 후 나머지 오류를 수정합니다. ###**4. 해결책** ArgoCD 변경은 즉시 변경되었으며, 이전 상태로 돌아가는 서비스가 발생했습니다. KYC 검색 서비스는 서비스에서 대부분의 파드가 올 때까지 트래픽을 차단하는 데 필요한 수동 노력이 필요합니다. 서비스가 건강 한 후에는 트래픽을 복원하고 전반적인 사고를 해결 할 수 있습니다. ### **5. 부정확하고 예방 조치 ** ###**6. 학습하는 교훈** * Socure의 툴링은 생산이 제대로 작동하지 않았다. 우리는이 도구를 검토하여 모든 사용 사례에서 올바르게 작동하고 변경의 전체 범위가 명확하지 않은 경우를 수정합니다. * 기존의 변화 검토 프로세스를 Agentic 지원. 이 경우 특정 변경은 계획에서 볼 수 없지만 광범위한 교육 모델에 의해 지원되는 추가 검토자가 제출하기 전에 문제가 잡을 수 있도록 도와줍니다. * 그들은 우리의 생산 일을 위한 주관 체계에 할 때 충격이 없는, 나타나는 조차 변화는, 위험할 수 있고, 미국 사업 시간의 더 많은 것을 교대되어야 합니다. * 우리의 KYC 검색 서비스는 완전히 온라인 때 전체 트래픽 흐름을받을 때 "thundering-herd"문제에 취약합니다. 우리는 우리의 회로 차단기를 강화하여이 문제를 재발견 방지해야합니다. * 우리는 단 하나 kubernetes 클러스터에 있는 우리의 핵심 API 서비스의 너무 많은 것을 달립니다. 클러스터는 여러 가지 가용성 영역에서 배포되었지만, 공유 컨트롤 비행기는 그 클러스터로 변경할 때 너무 높은 폭발 반경을 만듭니다. ###**7. 다음 단계 및 양파 ** Socure는 중요한 사업 교류에 있는 중요한 공급자로 우리의 고객을 rely 이해하고, 이 서비스 중단은 수락가능합니다. 우리는이 문제가 발생하는 영향에 대해 사과하고, 그것을 재발하지 않도록합니다. 그 끝에, 우리는 11 월에 우리의 응용 프로그램 레이아웃을 재건축 할 계획에 대한 세부 사항을 제공 할뿐만 아니라 다음 해의 Q1에서 KYC 검색 서비스의 탄력을 향상시킵니다.
공식 인시던트 업데이트를 자동 번역했습니다.
Socure RiskOS 및 ID+ 서비스는 복원되었습니다. 롤아웃의 오류는 18:12 및 18:56 동부 시간 사이에 우리의 서비스에서 오류율에 임시 스파이크 발생. 오류가 정확하고 서비스가 안정적입니다. 우리는이 아웃리지가 불확실하고 전체 RCA는 문제의 전체 분석이 완료되면 사용할 수 있습니다.
공식 인시던트 업데이트를 자동 번역했습니다.
우리는 현재 서비스 가용성에 영향을 미치는 활성 사건을 경험하고 있습니다. 우리는 현재 문제가 투자하고 추가 정보가 있기 때문에 업데이트를 제공 할 것입니다.
Socure RiskOS 및 ID+ 서비스는 복원되었습니다. 롤아웃의 오류는 18:20 및 18:56 동부 시간 사이에 우리의 서비스에서 오류율에 임시 스파이크 발생. 오류가 정확하고 서비스가 안정적입니다. 우리는이 아웃리지가 불확실하고 전체 RCA는 문제의 전체 분석이 완료되면 사용할 수 있습니다.
Socure RiskOS 및 ID+ 서비스는 복원되었습니다. 롤아웃의 오류는 18:12 및 18:56 동부 시간 사이에 우리의 서비스에서 오류율에 임시 스파이크 발생. 오류가 정확하고 서비스가 안정적입니다. 우리는이 아웃리지가 불확실하고 전체 RCA는 문제의 전체 분석이 완료되면 사용할 수 있습니다.
Socure RiskOS 및 ID+ 서비스는 복원되었습니다. 롤아웃의 오류는 18:12 및 18:56 동부 시간 사이에 우리의 서비스에서 오류율에 임시 스파이크 발생. 오류가 정확하고 서비스가 안정적입니다. 우리는이 아웃리지가 불확실하고 전체 RCA는 문제의 전체 분석이 완료되면 사용할 수 있습니다.
## ** 루트 원인 분석 ** **문의:** Socure APIs 결과 **일시 범위: ** 15-Oct-2026 ** 중요 사항: ** Socure API에 대한 서비스 중단 ** 서버:** 해결 된 ###**1. 요약** 15-Oct-2026에서 18:12 및 19:00 동부 시간 Socure는 RiskOS 및 ID \ + API에 대한 중단을 경험했으며 오류 및 타이머를 사용자에게 유발합니다. 첫 번째 단계는 18:12에서 18:20, 그리고 거의 모든 서비스에 대한 주요 중단이었다. 18:20에서 19:00까지 정전의 두 번째 단계, 그리고 KYC 데이터에 의존하는 서비스에 대한 부분적 정전이었다, 고객은 몇 가지 서비스에 대한 오류율과 비행을 보았다, 그러나 트래픽은 여전히 봉사했다. ##**2. 타임라인** **일시/시간 \(ET\)** | 이벤트 **18:12** | 일상의 청소 변화가 병합되어, 한 가지 코드 저장소에서 다른 소스 저장소로 이동. 우리의 검토 도구의 버그가 변경의 범위를 숨깁니다. **18:13** | ArgoCD는 한 번에 주요 쿠버네티스 클러스터에서 대부분의 서비스를 다시 시작합니다. **18:20** | 모든 서비스 팟이 실행됩니다. KYC 서비스는 여전히 높은 오류율을 볼 수 있지만 Partial API 서비스 복원. **18:21** | 시동 교통의 홍수는 KYC 검색 서비스를 압도합니다. 오류율 스파이크. **18:42 ** | SRE는 KYC 검색에 영향을 미치는 캐스케이드 실패를 진단하고 트래픽을 차단하여 올 수 있습니다. **18:56** | KYC 검색 서비스는 완전히, SRE는 트래픽을 반환합니다. Downstream 서비스 안정화. **19:00** | 정상으로 운행하는 모든 교통, 사고가 안정적으로 선언되었습니다. ###**3. 루트 원인** * **Primary 뿌리 원인: ** 지속적인 마이그레이션의 일환으로, On-call SRE는 ArgoCD로 변경하여, kubernetes clusters Socure가 서비스에 서비스를 실행하는 데 사용하는 시스템을 사용합니다. 변경은 단일 클러스터에 적용되었으며, 푸시하기 전에 신중하게 검토되었으며 다른 환경에서 문제가 발생하지 않으며 눈에 띄는 영향을 미쳤습니다. 불행히도, 변경은 변경 검토에서 나타나지 않은 유산 설정을 업데이트. 그 레거시 설정은 ArgoCD를 관리하고 ArgoCD에서 많은 라이브 서비스를 제거했습니다. 결과 ArgoCD는 생산에서 간단히 그 서비스를 제거했습니다. 설정이 정확하기 전에. * ** 기여 인자:** KYC 검색 서비스는 내부 제품의 여러 서비스를 제공하는 Socure 인프라의 백엔드 조각입니다. 그 서비스는 서비스의 모든 클라이언트와 동시에 스크래치에서 재시작 할 때, 부하의 밑에 추락된 서비스의 작은 수. 이것은 남아있는 팟에로드를 증가, 차례로 충돌의 일부. 이 캐스케이드 실패는 Socure의 인프라의 나머지를 자신의 방식으로 돌아 오는에서 서비스를 방지했습니다. 이 별도의 실패 모드를 진단하면 추가 시간이 발생했고, 초기 사건 후 나머지 오류를 수정합니다. ###**4. 해결책** ArgoCD 변경은 즉시 변경되었으며, 이전 상태로 돌아가는 서비스가 발생했습니다. KYC 검색 서비스는 서비스에서 대부분의 파드가 올 때까지 트래픽을 차단하는 데 필요한 수동 노력이 필요합니다. 서비스가 건강 한 후에는 트래픽을 복원하고 전반적인 사고를 해결 할 수 있습니다. ### **5. 부정확하고 예방 조치 ** ###**6. 학습하는 교훈** * Socure의 툴링은 생산이 제대로 작동하지 않았다. 우리는이 도구를 검토하여 모든 사용 사례에서 올바르게 작동하고 변경의 전체 범위가 명확하지 않은 경우를 수정합니다. * 기존의 변화 검토 프로세스를 Agentic 지원. 이 경우 특정 변경은 계획에서 볼 수 없지만 광범위한 교육 모델에 의해 지원되는 추가 검토자가 제출하기 전에 문제가 잡을 수 있도록 도와줍니다. * 그들은 우리의 생산 일을 위한 주관 체계에 할 때 충격이 없는, 나타나는 조차 변화는, 위험할 수 있고, 미국 사업 시간의 더 많은 것을 교대되어야 합니다. * 우리의 KYC 검색 서비스는 완전히 온라인 때 전체 트래픽 흐름을받을 때 "thundering-herd"문제에 취약합니다. 우리는 우리의 회로 차단기를 강화하여이 문제를 재발견 방지해야합니다. * 우리는 단 하나 kubernetes 클러스터에 있는 우리의 핵심 API 서비스의 너무 많은 것을 달립니다. 클러스터는 여러 가지 가용성 영역에서 배포되었지만, 공유 컨트롤 비행기는 그 클러스터로 변경할 때 너무 높은 폭발 반경을 만듭니다. ###**7. 다음 단계 및 양파 ** Socure는 중요한 사업 교류에 있는 중요한 공급자로 우리의 고객을 rely 이해하고, 이 서비스 중단은 수락가능합니다. 우리는이 문제가 발생하는 영향에 대해 사과하고, 그것을 재발하지 않도록합니다. 그 끝에, 우리는 11 월에 우리의 응용 프로그램 레이아웃을 재건축 할 계획에 대한 세부 사항을 제공 할뿐만 아니라 다음 해의 Q1에서 KYC 검색 서비스의 탄력을 향상시킵니다.
공식 인시던트 업데이트를 자동 번역했습니다.
현재 SSA 응답으로 인해 eCBSV 모듈에 영향을 미치는 예상치 못한 정전을 경험하고 있으며, 5xx 오류로 발생했습니다. Socure는 문제를 조사하고 서비스가 복원 될 것으로 결정하기 위해 공급 업체에 연락했습니다.
오류율은 지난 몇 분 동안 부과됩니다. 우리는 이러한 비율을 모니터링하고, 우리의 공급 업체 응답을 종료합니다.
SSA는 전자 컨텐트 기반 Social Security Number Verification (eCBSV) 서비스를 포함한 여러 응용 프로그램과 서비스를 영향을 미치는 서비스 영향 이벤트를 경험했습니다. 붕괴는 10 월 15 일 오전 10시 19 분 (ET)에서 시작되며 약 10시 41 분 (ET)에 해결되었습니다. 서비스는 복원되고, eCBSV는 이 시간에 일반적으로 운영됩니다.
공식 인시던트 업데이트를 자동 번역했습니다.
Watchlist Plus 및 Watchlist Premier에 영향을 미치는 높은 거래 실패를 경험했습니다. 이 문제는 해결되었습니다. 우리는 서비스를 보장하기 위해 성능을 모니터링하고 안정적입니다. 우리는이 발생 할 수있는 불편에 대해 사과합니다.
공식 인시던트 업데이트를 자동 번역했습니다.
RiskOS Case Management UI에 반영된 사례 업데이트에서 지연이 발생되는 문제를 조사하고 있습니다. 우리의 엔지니어링 팀은 뿌리 원인을 확인하고 정상 업데이트 행동을 복원하기 위해 적극적으로 노력하고 있습니다. 더 많은 정보로 더 많은 업데이트를 제공할 것입니다. API 평가 요청에 영향을 미치지 않습니다.
우리는 RiskOS Case Management UI의 업데이트에 영향을 미치는 문제의 뿌리 원인을 발견했습니다. 이 문제는 케이스의 하위 세트에 제한되며, 특히 케이스 검색 기능에 영향을 미칩니다. 일시적으로 표시된 케이스 상태를 표시할 수 있습니다. Case List 및 개별 Case Details 페이지에서 표시된 상태 데이터가 정확하고 최신 상태를 반영합니다. 우리의 엔지니어링 팀은 새로 업데이트된 모든 사례에 대한 수정을 배포하고 검색에 걸쳐 데이터 일관성을 보장하기 위해 나머지 영향을받는 사례를 재 동기화하는 데 적극적으로 노력하고 있습니다. 우리는 일단 정상적인 행동이 완전히 복원되면 또 다른 업데이트를 제공 할 것입니다.
사건 상태 업데이트에 영향을 미치는 문제는 해결되었습니다. 모든 새로운 사례가 제대로 처리됩니다. 우리는 진심으로 우리의 팀이 그것을 해결하기 위해 일한 동안 모든 불편에 대한 사과가 발생하고 당신의 인내심을 평가 할 수 있습니다.
공식 인시던트 업데이트를 자동 번역했습니다.
사이 6:28 오전 및 6:57 오전 ET 9 월 21, 작업 활동에 문제가 발생 일부 웹훅 알림 과거 달에서 이전 평가와 관련된 다시 전달. 현재 평가 및 webhook 처리는 영향을받지 않았습니다. 문제는 해결되었습니다. 우리는 어떤 혼란 또는 추가적인 소음든지를 위해 이것을 일으키는 원인이 될지도 모릅니다.
공식 인시던트 업데이트를 자동 번역했습니다.
우리는 대시보드에 일괄 처리에 영향을 미치는 투자 지연입니다. 고객은 우리가 문제점을 검토하는 동안 지연된 가공을 경험할지도 모릅니다.
이 사건은 해결되었습니다.
공식 인시던트 업데이트를 자동 번역했습니다.
우리는 우리의 Fraud와 합성 제품을 사용하여 몇몇 고객에 영향을 미치는 증가한 대기권을 관찰하고 있습니다. 우리의 팀은 적극적으로 문제를 조사하고 있습니다. API 요청은 성공적으로 완료되고, 우리는 이 시간에 API 실패를 관찰하지 않습니다. 더 많은 정보로 더 많은 업데이트를 제공할 것입니다.
우리는 우리의 Fraud와 합성 제품을 사용하여 몇몇 고객에 영향을 미치는 지연에 있는 개선을 보았습니다. 우리는 계속해서 상황을 모니터링 할 것입니다.
Fraud 및 합성 서비스에 영향을 미치는 문제는 해결되고, 서비스는 정상 작동으로 돌아 왔습니다. 고객은 더 이상 경험이 더 늦게 증가하거나 Fraud 및 합성 서비스에 접근할 때 지연이 발생하지 않아야 합니다
공식 인시던트 업데이트를 자동 번역했습니다.
오전 8시 30 분과 오후 2시 사이, 우리는 5xx 오류율의 증가를 관찰, 이는 간헐적 오류 또는 일부 고객을위한 실패 요청. 전반적인 충격은 최소한, 0.01% 보다는 더 적은이었습니다. 오류율은 정상으로 반환되어 있습니다. 이 문제는이 시간에 완전히 해결됩니다. 우리는 어떤 혼란을 위해 사과하고 당신의 인내를 평가합니다.
공식 인시던트 업데이트를 자동 번역했습니다.
오전 7 시부 터 오후 7시 20 분 사이, 우리는 5xx 오류율에서 증가 관찰, 이는 간헐적 오류 또는 일부 고객을위한 실패 요청으로 발생할 수 있습니다. 오류율은 정상으로 돌아가기 때문에, 우리는 우리가 완전히 문제를 해결하기 위해 뿌리 원인을 조사하고 있습니다. 우리는 어떤 혼란을 위해 사과하고 당신의 인내를 평가합니다.
** 루트 원인 분석 ** **문의:** 서비스 전역의 Intermittent 5xx 오류 **일시 범위 : ** 9 월 9, 2026, 7 : 00 AM - 9 : 20 AM EDT \ (약 2 시간 20 분 간헐적 충격 \) ** 중요 사항: ** EmailAuthScore API 및 관련 서비스에 제출 된 일부 요청은 간헐적으로 오류 응답을 반환합니다. 충격은 연속적이지 않고, 아래 타임라인에 설명된 정의된 창에 제한되었습니다. ** 서버:** 해결 된 ###**1. 요약** 9 월 9, 2026에서 백엔드 처리 용량의 계획 증가는 내부 인프라 구성 요소에 연결 하중을 높일 수 있으며 여러 서비스에 대한 다운스트림 처리를 지원합니다. 이 구성 요소는 내부 용량 임계 값에 도달하여 처리 지연을 도입하고 이메일에 대한 간헐적 오류 응답 및 요청의 하위 설정에 대한 관련 서비스. 이 문제는 내부 모니터링의 조합을 통해 식별되고 영향 창 중 보고서. Socure Engineering correlated the errors with the 최근의 용량 변경 및 변경, 이는 오류의 초기 증가를 중지. 두 번째, 오류에 관련 증가 다음 다른 내부 서비스에 대해 이전 된 별도의 용량 변경이 발생했을 때, 동일한 공유 구성 요소에 추가 부하를 배치; 엔지니어링 적용 더 완화, 모든 영향을받는 서비스가 정상으로 반환 한 후, 안정적인 작동. Section 5 outlines the corrective and preventive action Socure is committing to, 우선은 인프라 용량으로 가시성을 개선하고 고객 기반 요청 처리에 영향을 미치는 단일 내부 구성 요소에서 지연을 방지하기 위해. ##**2. 타임라인** |**일시/시간 \(EDT\)** |**이벤트** | 인포메이션 |**9월 9일, 2026일 07:00 AM** | 백엔드 처리 용량의 계획 증가에 따라, EmailAuthScore API는 오류 응답을 간헐적으로 반환하기 시작했습니다. · |**9월 9일, 2026일 07:20 AM** | 최근의 용량 변경이 변경되었습니다. 오류율이 정상으로 반환되었습니다. | | **9월 9, 2026 08:45 AM** | 다른 내부 서비스에 대한 별도의 용량 변경이 동일한 내부 구성품에 추가 로드를 배치하고, EmailAuthScore API를 다시 시작으로 오류 응답을 반환합니다. · |**9월 9일, 2026년 09시 20분** | 부가가치세가 적용됩니다. | **9월 9, 2026 01:13 오후 ** | 전분으로, Socure는 일시적으로 영향을받은 내부 부품에서 내부 처리의 일부를 안전하게 잔여 용량 증가를 완료합니다. 이 변경 후 더 오류가 관찰되지 않았습니다. | ###**3. 루트 원인** * **Primary 뿌리 원인: ** 예상된 수요의 앞서 시스템 용량을 늘리기 위해 계획된 작업의 일환으로, Socure는 백엔드 서비스의 처리 용량을 증가시킵니다. 이 변경은 이러한 서비스에 대한 다운스트림 처리를 지원하기 위해 사용되는 내부 메시징 구성 요소에 대한 연결 수를 증가. 이 구성 요소는 연결 및 처리 지연으로 인한 내부 연결 용량 제한에 도달했습니다. 이러한 지연은 추가 대기시간을 도입했으며, 일부 경우에, 백압은 요청 처리로, 이메일에 대한 과도한 높은 오류율에 기여한 이메일AuthScore API 및 상기의 영향 창에 대한 요청에 대한 관련 서비스. * ** 기여 인자:** * 인프라 용량 수요의 급격한 증가는 내부 메시징 부품 내에서 즉시 사용할 수 없었던 용량을 초과했습니다. ###**4. 해결책** 높은 오류율이 최근의 용량 변경에 연결되었는지 확인하면, Socure Engineering은 오류의 초기 증가를 중단합니다. 두 번째, 오류의 관련 증가 다음 다른 내부 서비스에 대한 이전을 만들 때 발생, 동일한 공유 구성 요소에 추가 부하를 배치. 공학은 영향을받는 부품의 영향을받는 서비스에서 내부 처리의 일부를 일시적으로 재떨어뜨리고 추가 완화를 적용했습니다. 이러한 행동에 따라, 모든 영향을받는 서비스는 정상에 돌려, 안정적인 작동, Socure가 계속 모니터링을 통해 확인. ### **5. 부정확하고 예방 조치 ** |**Action** |**Description** | **ETA / 상태** | 인포메이션 | Optimize Infrastructure Capacity utilization | 지원되는 인프라 한계 내에서 처리가 유지되도록 백엔드 서비스 용량 및 연결 사용을 조정하고 유사한 용량 관련 문제의 위험을 줄일 수 있습니다. | 모자 | | 증가하는 메시징 인프라 용량 | 추가 헤드룸 및 지원 미래가 트래픽 볼륨으로 증가하는 기본 메시징 인프라의 용량 증가. | 모자 | | 향상된 용량 모니터링 및 경고 | 서비스 성능에 영향을 미치지 전에 잠재적 인프라 용량 제약을 식별하기 위해 능동적 모니터링 및 경고를 추가합니다. · 진행 중. 에타 30 9월 2026. | ###**6. 학습하는 교훈** * 인프라 건강의 적극적인 모니터링은 용량 변화의 앞서야 할 필요, 뿐만 아니라 애플리케이션 수준 모니터링. ###**7. 다음 단계 및 양파 ** 우리는에 투입됩니다: * 섹션 5에 나열된 교정 및 예방 조치를 완료 * 미래 스케일링 활동의 앞서 중요한 내부 인프라의 건강 및 용량에 대한 가시성을 향상. * 모든 교정 작업이 완료되면 후속 업데이트 제공.
공식 인시던트 업데이트를 자동 번역했습니다.
우리는 현재 DocV 및 Watchlist 모니터링 서비스에 대한 영향을 창출 한 문제를 조사하고 있습니다. 오류가 오늘 9 월 8 일 09:05 AM EST에서 09:30 AM EST. 시스템은 복구, 우리는이 시간에 루트 원인을 결정에 작업하고있다.
9월 8일 DocV 및 Watchlist 모니터링 서비스에 미치는 영향은 해결되었습니다. 고객 영향은 오전 10시 35 분부터 관찰되었습니다. 우리는이 발생 할 수있는 모든 혼란에 대해 사과합니다.
####**Root 원인 분석** ** Incident:** 서비스 중단 계정 데이터 액세스 **일시 범위:** 9월 8, 2026 \(10:04 오전 10:31 AM EDT\) ** 충격: ** DocV 및 시계 모니터 ** 서버:** 해결 된 ##1. 요약 백엔드 데이터베이스 용량의 예기치 않은 depletion는 클라이언트 요청의 하위 설정에 대한 계정 정보를 검색하여 플랫폼을 일시적으로 방지했습니다. 사건 창 중 \(10:04 AM에서 10:31 AM EDT of 8-Sep-2026\), 클라이언트 요청 중 일부는 계정 세부 사항을 쿼리 할 때 높은 오류율을 경험. 일상 유지 보수 업데이트 후, 백업 환경에서 동시 연결은 일반 임계값을 초과, 사용 가능한 데이터베이스 용량을 포화. 공학 팀은 안전하게 과다한 환경을 분리하고 활성 연결, 전체 시스템 응답 및 안정성을 복원. ##2. 타임라인 |**일시/시간 \(ET\)** |**이벤트** | 인포메이션 | 첫 번째 오류 | 10:04 AM EST, 8 Sep 2026 | 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 인포메이션 | 중복 환경 연결 풀 절연 | 10:30 AM EST, 8 Sep 2026 | 인텐시브 인텐시브 인텐시브 인텐시브 인텐시브 인텐시브 인텐시브 ##3. 뿌리 원인 * **Primary 뿌리 원인: ** 예정된 시스템 업데이트 중, 배포 환경 간의 높은 연결 유지는 데이터베이스 연결 풀 포화로 주도. 피크 트래픽 아래,이 발생 처리 지연 및 특정 플랫폼 서비스에 대한 타임 아웃 요청. * ** 기여 인자:** * 엄밀한 연결 timeout 모수는 수동적인 환경에 의하여 idle 데이타베이스 할당의 적시 방출을 연기했습니다. * Inadequate 데이터베이스 노드 헤드룸은 대기 환경에 의해 생성된 여분의 연결 처리를 방해했습니다. * **Non-contributing 인자: ** * 없음 ## 4. 해결책 전체 서비스 무결성은 다음과 같은 즉각적인 행동을 통해 복원되었습니다. 1. 즉시 자유로운 데이타베이스 수영장 수용량에 비활동성 환경 연결 격리. 2. Active Service 노드의 롤링 리셋을 수행하여 명확한 데이터베이스 연결 기반을 재구성합니다. # # # 5. 부정확하고 예방 조치 |**Action** |**Description** | **ETA / 상태** | 인포메이션 | 데이터 액세스 패턴 개선 | 계정 데이터에 의존하는 내부 서비스에서 캐싱 전략 및 데이터 액세스 패턴 개선 | 15 10월 2026일| | 자동화된 커넥션 | 인사이트를 위한 연결 수명주기 관리 및 자동화된 클린업 루틴을 향상시킵니다. | 15 10월 2026일| ##6. 배운 교훈 * ** 배포 절연:** 우리는 우리의 배포 절차를 업데이트하여 활성 및 수동 환경에 걸쳐 리소스의 전체 분리를 보장하고, 업그레이드 중 크로스 환경 리소스 콘텐츠 제거. * ** 데이터베이스 리소스 할당 : ** 최고봉 성과를 지키기 위하여, 우리는 우리의 workload와 증가 전반적인 체계 수용량 및 효율성을 균형을 잡습니다. ### 7. 다음 단계 & 양파 우리는에 투입됩니다: * 공유된 타임라인에 의해 식별된 루트 원인을 해결 * 영구적 인 애플리케이션 및 인프라 향상이 최종화되는 동안 유능한 안전 감시 및 모니터링 임계값을 구현합니다.
공식 인시던트 업데이트를 자동 번역했습니다.
우리의 공급 업체, SSA는 현재 eCBSV 모듈에 영향을 미치는 높은 지연 문제가 있다고보고했습니다. 결과적으로 높은 응답 시간을 경험할 수 있습니다. 우리 팀은 신속하게 문제를 해결하기 위해 적극적으로 노력하고 있습니다. 우리는 어떤 불편을 끼쳐 드려 죄송합니다.
SSA는 2:00 AM ET의 eCBSV 모듈에 영향을 미치는 높은 대기시간을 해결했습니다. 응답 시간은 정상에 돌려보내집니다. 당신의 인내와 이해에 감사드립니다.
공식 인시던트 업데이트를 자동 번역했습니다.
We are investigating a slight degradation on the Watchlist product due to latency. Affecting both ID+ and RiskOS. The team is actively investigating this issue at this time.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
This incident has been resolved.
Between 1:21 AM and 2:15 AM EDT on August 4, 2026, a subset of DocV webhook delivery notifications experienced elevated 401 response rates. The issue is fully resolved and webhook delivery is now operating normally. A full Root Cause Analysis (RCA) will be shared once the investigation concludes.
