RETROACTIVE: [SEV3] - Sandbox Riskos Webhooks Not Fireing
A început 27 octombrie 2026 la 16:00 UTC · 0m
Pending
resolved
Pe 27 octombrie 2026, unii clienți nu au putut primi site-uri RiskOS Sandbox. Problema a fost cauzată de configuraţii nevalabile de webhook care au determinat expeditorul de notificare Sandbox să oprească procesarea evenimentelor. Configuraţiile malformate au fost corectate de atunci. Toate procesarea a recuperat și livrarea webhook a reluat cu succes
Traducere automată din actualizarea oficială a incidentului.
[SEV3] eCBSV API Outage Rezultat în 5xx Erori
A început 23 octombrie 2026 la 21:00 UTC · 12m
IssuesIncident minor
Componente afectate
eCBSVeCBSV
monitoring
SSA se confruntă în prezent cu un eveniment de impact al serviciilor care afectează mai multe aplicații și servicii, inclusiv serviciul electronic de verificare a numărului de securitate socială bazat pe consimțământ (eCBSV). Un număr mic de tranzacții sunt afectate, deoarece perturbarea a fost observată pentru prima dată la aproximativ 4:47 PM (ET) la 23 octombrie 2026. Vom împărtăși o altă actualizare odată ce vom primi notificare că serviciul a fost restaurat, și eCBSV funcționează din nou în mod normal.
resolved
La aproximativ 4:56 (ET), serviciul a fost restaurat și eCBSV funcționează în mod normal în acest moment. Ne cerem scuze pentru orice neplăceri cauzate.
Traducere automată din actualizarea oficială a incidentului.
[SEV3] Latentă intermitentă în tabloul de bord pentru afișarea și descărcarea imaginilor DocV
A început 19 octombrie 2026 la 19:04 UTC · 6h 54m
IssuesIncident minor
Componente afectate
Predictive DocVPredictive DocV
investigating
Investigăm în prezent o problemă care cauzează latență intermitentă prin afișarea și descărcarea Images DocV pentru un procent mic de tranzacții finalizate. Nu există nici un impact asupra DocV și nici evaluări în acest moment, dar imaginile pot lua timp suplimentar pentru a apărea.
monitoring
Echipa noastră a luat măsuri pentru a atenua latența experimentată pentru afișarea și descărcarea imaginilor DocV. Evaluarea DocV continuă să nu aibă impact în acest moment, iar echipa va continua să monitorizeze situația. Vom oferi o altă actualizare odată ce impactul va fi rezolvat.
resolved
Această problemă a fost rezolvată şi noi monitorizăm performanţele pentru a ne asigura că serviciile rămân stabile. Ne cerem scuze pentru orice neplăceri cauzate.
Traducere automată din actualizarea oficială a incidentului.
RETROACTIV: [SEV3] - ECBSV API Outage Rezultat în 5xx Erori
A început 18 octombrie 2026 la 19:33 UTC · 0m
Pending
Componente afectate
eCBSVeCBSV
resolved
SSA a experimentat un eveniment de impact al serviciilor care a afectat mai multe aplicații și servicii, inclusiv serviciul electronic de verificare a numărului de securitate socială bazat pe consimțământ (eCBSV). Un număr mic de tranzacții au fost afectate, deoarece perturbarea a început la aproximativ ora 2:50PM (ET) la 18 octombrie 2026 și a fost rezolvată la aproximativ 3:10PM (ET). Serviciul a fost restaurat, iar eCBSV funcționează normal în acest moment.
Traducere automată din actualizarea oficială a incidentului.
[Sev3] Rata de eroare crescută pentru API de evaluare a riscurilor
A început 16 octombrie 2026 la 20:20 UTC · 5h 51m
IssuesIncident minor
Componente afectate
RiskOS
investigating
Începând cu ora 3:00 EDT, unii clienți pot experimenta erori intermitente sau cereri eșuate atunci când utilizează API-urile de evaluare a riscurilor. Am identificat o problemă de bază de date și lucrăm activ pentru a o rezolva. Ne cerem scuze pentru deranj şi apreciem răbdarea ta în timp ce investigăm.
monitoring
Am luat o măsură intermediară, iar rata de eroare ridicată a scăzut. Am observat erori legate în ultimele 15 minute. Trecem incidentul la monitorizare în timp ce lucrăm la o rezoluție completă. Vom împărtăși o altă actualizare atunci când situația se schimbă.
monitoring
Vă apreciem răbdarea, deoarece echipa noastră încă monitorizează situaţia îndeaproape. Ratele de eroare s-au diminuat pe măsură ce continuăm să lucrăm la o rezoluție completă.
resolved
Incidentul a fost rezolvat şi nu mai vedem erori. Serviciile funcționează în mod normal, și vom continua să monitorizeze performanța. Apreciem răbdarea ta în timp ce am lucrat prin asta.
Traducere automată din actualizarea oficială a incidentului.
Serviciile Socure RiskOS și ID+ au fost restaurate. O eroare în desfăşurare a cauzat o creştere temporară a ratelor de eroare de la serviciile noastre între 18:12 şi 18:56. Eroarea a fost corectată și serviciile sunt stabile acum. Înţelegem că această întrerupere este inacceptabilă şi că un RCA complet va fi disponibil imediat ce analiza completă a problemei va fi completă.
postmortem
## **Root Cause Analysis**
**Incident:** Socure API Outage
**Date Range:** 15-Oct-2026
**Impact:** Întrerupere în serviciu pentru Socure API
**Status:** Rezolvat
"Rezumat"
Pe 15-Oct-2026, între 18:12 și 19:00 Ora de Est Socure a experimentat o întrerupere a API-urilor sale RiskOS și ID\+, cauzând erori și timeout-uri utilizatorilor. Prima fază a avut loc de la 18:12 la 18:20 și a fost o întrerupere majoră pentru aproape fiecare serviciu. A doua fază a întreruperii a avut loc între 18:20 și 19:00 și a fost o întrerupere parțială a serviciilor care se bazează pe datele KYC, unde clienții au văzut rate ridicate de eroare și latențe pentru unele servicii, dar traficul era încă în curs de servire.
Cronologie
**Data / Timpul\(ET\) **
**18:12** O eroare în instrumentul nostru de revizuire ascunde domeniul de aplicare a schimbării.
**18:13**
**18:20** Serviciul parţial API restaurat, deşi serviciile KYC încă văd o rată de eroare crescută.
**18:21** Rata de eroare creşte.
**18:42**
**18:56** Serviciile în aval se stabilizează.
**19:00**
"Root Cause"
* **Cauză primară:**
Ca parte a unei migraţii în curs de desfăşurare, un SRE de gardă a făcut o schimbare în ArgoCD, sistemul pe care îl folosim pentru a gestiona clusterele kubernete Socure îşi desfăşoară serviciile. Schimbarea a fost vizată de un singur grup, a fost revizuită cu atenție înainte de împingere, nu a cauzat probleme în alte medii în care a fost testată și nu ar fi trebuit să aibă impact vizibil. Din păcate, modificarea a actualizat un cadru moștenitor care nu a apărut în revizuirea schimbării. Acest cadru moștenitor a guvernat ce servicii a gestionat ArgoCD, și a eliminat multe servicii live de la ArgoCD. În consecință, ArgoCD a eliminat aceste servicii de la producție pe scurt, înainte ca scenariul să fie corectat.
* ** Factorii de contribuţie:**
KYC Search Service este un suport de infrastructură Socure care oferă servicii pentru mai multe dintre produsele noastre interne. Atunci când acest serviciu a revenit de la zero în același timp cu toți clienții serviciului, un număr mic de capsule în serviciul prăbușit sub sarcină. Acest lucru a crescut sarcina pe capsulele rămase, unele dintre care sa prăbușit la rândul său. Acest eșec în cascadă a împiedicat serviciul să revină pe cont propriu așa cum a făcut restul infrastructurii Socure. Diagnosticarea acestui mod separat de defectare a luat timp suplimentar, iar remedierea acestuia a remediat erorile rămase după incidentul inițial.
"Rezoluţia"
Schimbarea ArgoCD a fost reversibilă imediat, determinând serviciile să revină la starea lor anterioară. Serviciul de căutare KYC a necesitat eforturi manuale pentru a bloca traficul să ajungă la el până când ar putea apărea majoritatea capsulelor din serviciu. După ce serviciul a fost sănătos, am putea restabili traficul şi să rezolvăm incidentul general.
### **5. Acțiuni corective și preventive
Lecţii învăţate
* Socure lui instrumentare pentru vizualizarea modificărilor pe care le face la producţie nu a funcţionat corect. Examinăm aceste instrumente pentru a ne asigura că funcționează corect în toate cazurile de utilizare și pentru a rezolva orice cazuri de acest gen în care domeniul de aplicare al unei schimbări nu este clar.
* Extinderea procesului existent de revizuire a schimbărilor cu suport agentic. Deși în acest caz, modificarea specifică nu a fost vizibilă în plan, având un revizor suplimentar care este susținut de un model de formare extins va contribui la asigurarea faptului că problemele sunt capturate înainte de depunere.
* Chiar şi schimbările care par să nu aibă nici un impact, atunci când acestea sunt făcute la sistemul de guvernanţă pentru locurile noastre de muncă de producţie, pot fi riscante, şi ar trebui să fie mutate mai departe din programul de afaceri al SUA.
* Serviciul nostru KYC Search este vulnerabil la o problemă de Tundering-herd Trebuie să ne întărim întrerupătoarele de circuit pentru a preveni repetarea acestei probleme.
* Conducem prea multe dintre serviciile noastre de bază API într-un singur grup de kubernete. Chiar dacă acest cluster este distribuit în mai multe zone de disponibilitate, planul de control comun creează o rază de explozie prea mare pentru a schimba acel grup.
Următorii pași și angajamentul în curs
Socure înțelege clienții noștri se bazează pe noi ca un furnizor cheie în fluxurile critice de afaceri, și că această întrerupere a serviciului nu este acceptabilă. Ne cerem scuze pentru impactul cauzat de această problemă şi ne angajăm să ne asigurăm că aceasta nu se va repeta. În acest scop, vom oferi detalii cu privire la planurile noastre de a re-arhitecta aspectul nostru de aplicare până în noiembrie, precum și de a îmbunătăți reziliența serviciului de căutare KYC în Q1 anul viitor.
Traducere automată din actualizarea oficială a incidentului.
Serviciile Socure RiskOS și ID+ au fost restaurate. O eroare în desfăşurare a cauzat o creştere temporară a ratelor de eroare de la serviciile noastre între 18:12 şi 18:56. Eroarea a fost corectată și serviciile sunt stabile acum. Înţelegem că această întrerupere este inacceptabilă şi că un RCA complet va fi disponibil imediat ce analiza completă a problemei va fi completă.
Traducere automată din actualizarea oficială a incidentului.
Ne confruntăm în prezent cu un incident activ care afectează disponibilitatea serviciilor. Investigăm în prezent problema și vom furniza actualizări imediat ce vom avea informații suplimentare.
monitoring
Serviciile Socure RiskOS și ID+ au fost restaurate. O eroare în desfăşurare a cauzat o creştere temporară a ratelor de eroare de la serviciile noastre între 18:20 şi 18:56. Eroarea a fost corectată și serviciile sunt stabile acum. Înţelegem că această întrerupere este inacceptabilă şi că un RCA complet va fi disponibil imediat ce analiza completă a problemei va fi completă.
monitoring
Serviciile Socure RiskOS și ID+ au fost restaurate. O eroare în desfăşurare a cauzat o creştere temporară a ratelor de eroare de la serviciile noastre între 18:12 şi 18:56. Eroarea a fost corectată și serviciile sunt stabile acum. Înţelegem că această întrerupere este inacceptabilă şi că un RCA complet va fi disponibil imediat ce analiza completă a problemei va fi completă.
resolved
Serviciile Socure RiskOS și ID+ au fost restaurate. O eroare în desfăşurare a cauzat o creştere temporară a ratelor de eroare de la serviciile noastre între 18:12 şi 18:56. Eroarea a fost corectată și serviciile sunt stabile acum. Înţelegem că această întrerupere este inacceptabilă şi că un RCA complet va fi disponibil imediat ce analiza completă a problemei va fi completă.
postmortem
## **Root Cause Analysis**
**Incident:** Socure API Outage
**Date Range:** 15-Oct-2026
**Impact:** Întrerupere în serviciu pentru Socure API
**Status:** Rezolvat
"Rezumat"
Pe 15-Oct-2026, între 18:12 și 19:00 Ora de Est Socure a experimentat o întrerupere a API-urilor sale RiskOS și ID\+, cauzând erori și timeout-uri utilizatorilor. Prima fază a avut loc de la 18:12 la 18:20 și a fost o întrerupere majoră pentru aproape fiecare serviciu. A doua fază a întreruperii a avut loc între 18:20 și 19:00 și a fost o întrerupere parțială a serviciilor care se bazează pe datele KYC, unde clienții au văzut rate ridicate de eroare și latențe pentru unele servicii, dar traficul era încă în curs de servire.
Cronologie
**Data / Timpul\(ET\) **
**18:12** O eroare în instrumentul nostru de revizuire ascunde domeniul de aplicare a schimbării.
**18:13**
**18:20** Serviciul parţial API restaurat, deşi serviciile KYC încă văd o rată de eroare crescută.
**18:21** Rata de eroare creşte.
**18:42**
**18:56** Serviciile în aval se stabilizează.
**19:00**
"Root Cause"
* **Cauză primară:**
Ca parte a unei migraţii în curs de desfăşurare, un SRE de gardă a făcut o schimbare în ArgoCD, sistemul pe care îl folosim pentru a gestiona clusterele kubernete Socure îşi desfăşoară serviciile. Schimbarea a fost vizată de un singur grup, a fost revizuită cu atenție înainte de împingere, nu a cauzat probleme în alte medii în care a fost testată și nu ar fi trebuit să aibă impact vizibil. Din păcate, modificarea a actualizat un cadru moștenitor care nu a apărut în revizuirea schimbării. Acest cadru moștenitor a guvernat ce servicii a gestionat ArgoCD, și a eliminat multe servicii live de la ArgoCD. În consecință, ArgoCD a eliminat aceste servicii de la producție pe scurt, înainte ca scenariul să fie corectat.
* ** Factorii de contribuţie:**
KYC Search Service este un suport de infrastructură Socure care oferă servicii pentru mai multe dintre produsele noastre interne. Atunci când acest serviciu a revenit de la zero în același timp cu toți clienții serviciului, un număr mic de capsule în serviciul prăbușit sub sarcină. Acest lucru a crescut sarcina pe capsulele rămase, unele dintre care sa prăbușit la rândul său. Acest eșec în cascadă a împiedicat serviciul să revină pe cont propriu așa cum a făcut restul infrastructurii Socure. Diagnosticarea acestui mod separat de defectare a luat timp suplimentar, iar remedierea acestuia a remediat erorile rămase după incidentul inițial.
"Rezoluţia"
Schimbarea ArgoCD a fost reversibilă imediat, determinând serviciile să revină la starea lor anterioară. Serviciul de căutare KYC a necesitat eforturi manuale pentru a bloca traficul să ajungă la el până când ar putea apărea majoritatea capsulelor din serviciu. După ce serviciul a fost sănătos, am putea restabili traficul şi să rezolvăm incidentul general.
### **5. Acțiuni corective și preventive
Lecţii învăţate
* Socure lui instrumentare pentru vizualizarea modificărilor pe care le face la producţie nu a funcţionat corect. Examinăm aceste instrumente pentru a ne asigura că funcționează corect în toate cazurile de utilizare și pentru a rezolva orice cazuri de acest gen în care domeniul de aplicare al unei schimbări nu este clar.
* Extinderea procesului existent de revizuire a schimbărilor cu suport agentic. Deși în acest caz, modificarea specifică nu a fost vizibilă în plan, având un revizor suplimentar care este susținut de un model de formare extins va contribui la asigurarea faptului că problemele sunt capturate înainte de depunere.
* Chiar şi schimbările care par să nu aibă nici un impact, atunci când acestea sunt făcute la sistemul de guvernanţă pentru locurile noastre de muncă de producţie, pot fi riscante, şi ar trebui să fie mutate mai departe din programul de afaceri al SUA.
* Serviciul nostru KYC Search este vulnerabil la o problemă de Tundering-herd Trebuie să ne întărim întrerupătoarele de circuit pentru a preveni repetarea acestei probleme.
* Conducem prea multe dintre serviciile noastre de bază API într-un singur grup de kubernete. Chiar dacă acest cluster este distribuit în mai multe zone de disponibilitate, planul de control comun creează o rază de explozie prea mare pentru a schimba acel grup.
Următorii pași și angajamentul în curs
Socure înțelege clienții noștri se bazează pe noi ca un furnizor cheie în fluxurile critice de afaceri, și că această întrerupere a serviciului nu este acceptabilă. Ne cerem scuze pentru impactul cauzat de această problemă şi ne angajăm să ne asigurăm că aceasta nu se va repeta. În acest scop, vom oferi detalii cu privire la planurile noastre de a re-arhitecta aspectul nostru de aplicare până în noiembrie, precum și de a îmbunătăți reziliența serviciului de căutare KYC în Q1 anul viitor.
Traducere automată din actualizarea oficială a incidentului.
[SEV3] - ECBSV API Outage Rezultat în 5xx Erori
A început 15 octombrie 2026 la 14:52 UTC · 1h 7m
IssuesIncident minor
Componente afectate
eCBSVeCBSV
identified
În prezent avem o pană neplanificată care afectează modulul eCBSV din cauza răspunsurilor SSA, rezultând erori 5xx. Socure a contactat vânzătorul pentru a investiga problema și a determina când este de așteptat ca serviciul să fie restaurat.
monitoring
Ratele de eroare au scăzut în ultimele câteva minute. Monitorizăm aceste rate, și în așteptarea răspunsului nostru furnizor.
resolved
SSA a experimentat un eveniment de impact al serviciilor care a afectat mai multe aplicații și servicii, inclusiv serviciul electronic de verificare a numărului de securitate socială bazat pe consimțământ (eCBSV). Întreruperea a început la aproximativ 10:19AM (ET) pe 15 octombrie 2026 și a fost rezolvată la aproximativ 10:41AM (ET). Serviciul a fost restaurat, iar eCBSV funcționează normal în acest moment.
Traducere automată din actualizarea oficială a incidentului.
RETROACTIV: modulul de supraveghere Latență
A început 9 octombrie 2026 la 23:25 UTC · 0m
OutageIncident major
Componente afectate
Watchlist PremierWatchlist Plus
resolved
Am experimentat eșecuri ridicate ale tranzacțiilor care afectează Watchlist Plus și Watchlist Premier. Problema a fost rezolvată şi monitorizăm performanţele pentru a ne asigura că serviciile rămân stabile. Ne cerem scuze pentru orice neplăceri cauzate.
Traducere automată din actualizarea oficială a incidentului.
[Sev3] Actualizări întârziate ale cazurilor în cazul IU
A început 22 septembrie 2026 la 12:26 UTC · 1h 43m
IssuesIncident minor
Componente afectate
RiskOS
identified
Investigăm o problemă care cauzează întârzieri în cazul în care actualizările sunt reflectate în IU de gestionare a cazurilor RiskOS. Echipa noastră de Inginerie lucrează în mod activ pentru a identifica cauza principală și pentru a restabili comportamentul normal de actualizare. Vom furniza actualizări suplimentare pe măsură ce vor fi disponibile mai multe informații.
Acest lucru nu afectează cererile de evaluare API.
monitoring
Am identificat cauza principală a problemei care afectează actualizările în IU de gestionare a cazurilor RiskOS. Această problemă este limitată la un subset de cazuri și afectează în mod specific funcționalitatea Case Search, care poate prezenta temporar stări de caz depășite. Vă rugăm să rețineți că datele privind situația cazului afișate în lista de cazuri și în paginile individuale Detaliile cazului sunt exacte și reflectă cele mai recente stări. Echipa noastră de Inginerie a implementat un fix pentru toate cazurile nou actualizate și lucrează activ pentru a re-sincroniza celelalte cazuri afectate pentru a asigura coerența datelor în întreaga căutare. Vom oferi o altă actualizare odată ce comportamentul normal este complet restaurat.
resolved
Problema care afectează actualizările stării cazului a fost rezolvată. Toate cazurile noi sunt prelucrate corect. Ne cerem sincer scuze pentru orice inconveniente pe care le-ar fi putut cauza şi aprecia răbdarea dvs. în timp ce echipa noastră a lucrat pentru a rezolva problema.
Traducere automată din actualizarea oficială a incidentului.
RETROACTIVE: [Sev3] Riskos Replay Webhook
A început 21 septembrie 2026 la 11:57 UTC · 0m
Pending
Componente afectate
RiskOS
resolved
Între 6:28 AM și 6:57 AM ET la 21 septembrie, o problemă din timpul unei activități operaționale a cauzat unele notificări de webook asociate cu evaluări mai vechi din ultima lună pentru a fi livrate din nou.
Evaluările actuale și prelucrarea webhook nu au fost afectate. Problema a fost rezolvată.
Ne cerem scuze pentru orice confuzie sau zgomot suplimentar care ar fi putut cauza.
Traducere automată din actualizarea oficială a incidentului.
[SEV3] Întârzieri de procesare a lotului pe tabloul de bord
A început 16 septembrie 2026 la 14:36 UTC · 14m
IssuesIncident minor
Componente afectate
Admin Dashboard
investigating
Investigăm întârzieri care afectează procesarea lotului pe tabloul de bord. Clienții pot experimenta procesare întârziată în timp ce vom revizui problema.
resolved
Acest incident a fost rezolvat.
Traducere automată din actualizarea oficială a incidentului.
[Sev3] Creşterea Latenţiei cu Frauda Sigma şi Synthetic
Observăm latența sporită care afectează unii clienți folosind produsele noastre frauduloase și sintetice. Echipa noastră investighează în mod activ problema. Solicitările API se completează cu succes și nu observăm niciun eșec API în acest moment.
Vom furniza actualizări suplimentare pe măsură ce vor fi disponibile mai multe informații.
monitoring
Vedem o îmbunătăţire a latenţiei care afectează unii clienţi folosind produsele noastre Fraude şi Sintetice. Vom continua să monitorizăm situaţia îndeaproape.
resolved
Problema care afectează frauda și serviciile sintetice a fost rezolvată, iar serviciul a revenit la funcționarea normală. Clienții nu ar trebui să mai experimenteze întârzieri sau întârzieri în accesarea serviciilor de fraudă și sinteză
Traducere automată din actualizarea oficială a incidentului.
RETROACTIV: [SEV3] - Erori minime 5xx în producţie
Intre 8:30 AM si 2:00 PM EST, am observat o crestere a ratelor de eroare de 5xx, ceea ce a dus la erori intermitente sau cereri eşuate pentru unii clienti. Impactul global a fost minim, sub 0,01%. Rata de eroare a revenit de atunci la normal. Această problemă este pe deplin rezolvată în acest moment.
Ne cerem scuze pentru orice întrerupere şi vă apreciem răbdarea.
Traducere automată din actualizarea oficială a incidentului.
RETROACTIV: [Sev3] A crescut 5XX erori pentru fraudă, KYC, Watchlist
A început 9 septembrie 2026 la 11:37 UTC · 0m
Pending
Componente afectate
Sigma Identity FraudGlobal Watchlist Screening with MonitoringKYC
resolved
Intre orele 7:00 AM si 7:20 AM EST, am observat o crestere a ratelor de eroare de 5xx, care ar fi putut duce la erori intermitente sau cereri esuate pentru unii clienti.
Rata de eroare a revenit de atunci la normal şi investigăm cauza principală pentru a ne asigura că am rezolvat pe deplin problema.
Ne cerem scuze pentru orice întrerupere şi vă apreciem răbdarea.
postmortem
**Root Cause Analysis**
**Incident:** Erorile intermitente ridicate de 5xx în cadrul serviciilor
**Date Range:** Septembrie 9, 2026, 7:00 AM
**Impact:** Unele cereri depuse la EmailAuthScore API, și servicii conexe, răspuns de eroare returnat intermitent. Impactul a fost intermitent mai degrabă decât continuu și s-a limitat la ferestrele definite descrise în cronologia de mai jos.
**Status:** Rezolvat
"Rezumat"
La 9 septembrie 2026, o creștere planificată a capacității de procesare a backend-ului a condus la o sarcină de conectare ridicată pe o componentă de infrastructură internă utilizată pentru sprijinirea prelucrării în aval pentru mai multe servicii. Această componentă a atins un prag de capacitate internă, care a introdus întârzieri de procesare și a dus la răspunsuri intermitente de eroare pe EmailAuthScore API și servicii conexe pentru un subset de cereri.
Problema a fost identificată printr-o combinație de monitorizare internă și rapoarte în timpul perioadei de impact. Ingineria Socure a corelat erorile cu schimbarea recentă a capacității și a inversat-o, ceea ce a oprit creșterea inițială a erorilor. O a doua creştere legată de erori a avut loc atunci când o schimbare separată a capacităţii, efectuată anterior pentru un serviciu intern diferit, a plasat încărcătură suplimentară pe aceeaşi componentă comună; ingineria a aplicat alte atenuări, după care toate serviciile afectate au revenit la o funcţionare normală şi stabilă.
Secțiunea 5 prezintă acțiunile corective și preventive pe care Socure le întreprinde, cu prioritate în ceea ce privește îmbunătățirea vizibilității în capacitatea de infrastructură și prevenirea întârzierilor în ceea ce privește orice componentă internă unică care afectează prelucrarea cererilor orientate către clienți.
Cronologie
Traducerea şi adaptarea:
- Da.
Traducerea şi adaptarea: Modificarea recentă a capacității a fost reverificată; ratele de eroare au revenit la normal.
Traducerea şi adaptarea: Ca măsură de precauție, Socure a redirecționat temporar o parte din prelucrarea internă departe de componenta internă afectată pentru a finaliza în siguranță creșterea capacității rămase. Nu s-au observat alte erori după această schimbare.
"Root Cause"
* **Cauză primară:** Ca parte a activităților planificate de creștere a capacității sistemului înaintea cererii anticipate, Socure a crescut capacitatea de prelucrare a serviciilor de suport. Această modificare a crescut numărul de conexiuni la o componentă de mesagerie internă utilizată pentru a sprijini procesarea în aval a acestor servicii. Această componentă a atins o limită internă a capacității de conectare, care a dus la întârzieri de conectare și prelucrare.
Aceste întârzieri au introdus latență suplimentară și, în unele cazuri, contrapresiune în procesarea cererilor, ceea ce a contribuit la creșterea intermitentă a ratelor de eroare pe EmailAuthScore API și servicii conexe pentru un subset de cereri în timpul ferestrelor de impact descrise mai sus..
* ** Factorii de contribuţie:**
* O creştere bruscă a cererii de capacitate de infrastructură a depăşit capacitatea care nu a fost imediat disponibilă în cadrul componentei de mesagerie internă.
"Rezoluţia"
La identificarea faptului că ratele ridicate de eroare au fost legate de modificarea recentă a capacității, ingineria Socure a inversat modificarea, care a oprit creșterea inițială a erorilor. O a doua creștere a erorilor a avut loc atunci când o schimbare separată a capacității, efectuată anterior pentru un serviciu intern diferit, a plasat sarcină suplimentară pe aceeași componentă comună. Ingineria a aplicat atenuări suplimentare, inclusiv redirecționarea temporară a unei părți de prelucrare internă din componenta afectată pentru serviciile afectate. În urma acestor acţiuni, toate serviciile afectate au revenit la o funcţionare normală şi stabilă, lucru confirmat de Socure prin continuarea monitorizării.
### **5. Acțiuni corective și preventive
Traducerea şi adaptarea:
- Da.
S - a făcut
Creşterea capacităţii de utilizare a infrastructurii de mesagerie S - a făcut
În cazul în care este necesar, se aplică următoarele cerințe: În desfăşurare. ETA 30 septembrie 2026.
Lecţii învăţate
* Monitorizarea proactivă a sănătăţii infrastructurii trebuie să fie în vigoare înaintea schimbărilor de capacitate, nu numai a monitorizării nivelului de aplicare.
Următorii pași și angajamentul în curs
Ne-am angajat să:
* Finalizarea acțiunilor corective și preventive enumerate în secțiunea 5.
* Îmbunătăţirea vizibilităţii în sănătate şi capacitatea infrastructurii interne critice înaintea activităţii viitoare de scalare.
* Furnizarea unei actualizări ulterioare odată ce toate acțiunile corective sunt complete.
Traducere automată din actualizarea oficială a incidentului.
[SEV3] Impactul asupra evenimentelor de monitorizare DocV și Watchlist
A început 8 septembrie 2026 la 14:54 UTC · 46m
Pending
Componente afectate
Predictive DocVPredictive DocVGlobal Watchlist Screening with Monitoring
investigating
Investigăm în prezent o problemă care a creat un impact asupra serviciilor de monitorizare DocV și Watchlist în cazul în care erorile au fost observate astăzi 8 septembrie, de la 09:05 AM EST la 09:30 EST.
Sistemul s-a recuperat, lucrăm la determinarea unei cauze profunde în acest moment.
resolved
Problema care afectează serviciile de monitorizare DocV și Watchlist la 8 septembrie a fost rezolvată. Nu s-a observat niciun impact al clientului de la ora 10:35 AM EST. Ne cerem scuze pentru orice întrerupere care ar fi putut fi cauzată.
postmortem
"Root Cause Analysis"
**Incident:** Interrupția serviciului afectează accesul la date al contului
**Date Range:** Septembrie 8, 2026 \(10:04 AM to 10:31 AM EDT\)
** Impact:** Monitore DocV și Watchlist
**Status:** Rezolvat
### 1. Rezumat
O epuizare neașteptată a capacității bazei de date backend a împiedicat temporar platforma noastră să obțină informații despre cont pentru un subset de cereri de client.
În timpul ferestrei incidentului \(10:04 AM până la 10:31 AM EDT de 8-Sep-2026\), unele dintre cereri de client au experimentat rate de eroare ridicate atunci când încearcă să interogheze detaliile contului.
După o actualizare de rutină de întreținere, conexiunile simultane din mediile de rezervă au depășit pragurile normale, saturând capacitatea de bază de date disponibile.
Echipele de ingineri au deconectat în siguranță mediile redundante și au reîmprospătat conexiunile active, restaurând capacitatea de reacție și stabilitatea sistemului complet.
2. Cronologie
Traducerea şi adaptarea:
- Da.
Cauza rădăcină
* **Cauză primară:** În timpul unei actualizări programate a sistemului, o retenţie crescută a conexiunilor între mediile de implementare a dus la saturarea rezervei de date. În traficul de vârf, acest lucru a cauzat întârzieri de procesare și a solicitat termene pentru serviciile de platformă dependente.
* ** Factorii de contribuţie:**
* Parametrii de temporizare a conexiunii rigide au întârziat eliberarea la timp a alocărilor de baze de date inactive de către mediul pasiv.
* Neadecvată bază de date headroom nod împiedicat prelucrare fără probleme de conexiuni suplimentare generate de mediul standby.
* ** Factori necontributivi:**
* Niciuna
Rezoluţia 4.
Integritatea completă a serviciului a fost restabilită prin următoarele acțiuni imediate:
1. Izolarea conexiunilor non-active de mediu la capacitatea de bază de date imediat liberă.
2. Efectuarea unei resetări a nodurilor de serviciu active pentru a restabili liniile de bază de conectare clare.
### 5. Acțiuni corective și preventive
Traducerea şi adaptarea:
- Da.
15 octombrie 2026
15 octombrie 2026
6. Lecţii învăţate
* **Enhancing Deslocation Izolation:** Actualizăm procedurile noastre de implementare pentru a asigura separarea completă a resurselor între mediile active și pasive, eliminând disputa dintre resursele de mediu în timpul actualizărilor.
* ** Optimizarea alocării resurselor bazei de date:** Pentru a asigura performanţa maximă, reechilibrăm volumul de muncă şi creştem capacitatea globală şi eficienţa sistemului.
### 7. Urmatorii pasi si angajament continuu
Ne-am angajat să:
* Rezolva cauzele root identificate de cronologie comune
* Punerea în aplicare a unor măsuri proactive de siguranță și de monitorizare a pragurilor în timp ce aplicarea permanentă și îmbunătățirea infrastructurii sunt finalizate.
Traducere automată din actualizarea oficială a incidentului.
eșecul tranzacției eCBSV din cauza latentității ridicate
A început 2 septembrie 2026 la 18:31 UTC · 20h 47m
IssuesIncident minor
Componente afectate
eCBSVeCBSV
identified
Vânzătorul nostru, SSA, a raportat că există în prezent o problemă de latență ridicată care afectează modulul eCBSV. Ca urmare, este posibil să prezentaţi valori crescute ale timpului de răspuns. Echipa noastră lucrează activ cu ei pentru a rezolva problema cât mai repede posibil.
Ne cerem scuze pentru orice inconvenient care ar putea cauza şi aprecia răbdarea şi înţelegerea dumneavoastră.
resolved
SSA a rezolvat latenta crescută care afectează modulul eCBSV începând cu ora 2:00 AM ET. Timpul de răspuns a revenit la normal. Vă mulţumesc pentru răbdare şi înţelegere.
Traducere automată din actualizarea oficială a incidentului.
[SEV3] Observed ID+ WL transactions failures due to latency
A început 10 august 2026 la 15:40 UTC · 22m
IssuesIncident minor
Componente afectate
Watchlist PremierWatchlist PlusGlobal Watchlist Screening with Monitoring
investigating
We are investigating a slight degradation on the Watchlist product due to latency. Affecting both ID+ and RiskOS. The team is actively investigating this issue at this time.
identified
The issue has been identified and a fix is being implemented.
monitoring
A fix has been implemented and we are monitoring the results.
resolved
This incident has been resolved.
RETROACTIVE: [Sev3] DocV Webhook Delivery Issue
A început 4 august 2026 la 05:00 UTC · 0m
IssuesIncident minor
resolved
Between 1:21 AM and 2:15 AM EDT on August 4, 2026, a subset of DocV webhook delivery notifications experienced elevated 401 response rates. The issue is fully resolved and webhook delivery is now operating normally.
A full Root Cause Analysis (RCA) will be shared once the investigation concludes.