RETROACTIVE: [SEV3] - サンドボックスのリスクOSのWebhooksは燃えません
- resolved
2026年10月27日には、リスクOSのサンドボックスのWebhookを受け取ることができませんでした。 問題は、処理イベントの処理を停止するためにサンドボックス通知送信者を引き起こした無効なWebhook構成によって引き起こされました。 誤った設定が修正されました。 すべての処理は回復し、webhook配達は首尾よく再開しました
公式のインシデント更新を自動翻訳しています。
73 Socure incidents · 2025年9月 — official updates, affected components, duration and resolution details.
2026年10月27日には、リスクOSのサンドボックスのWebhookを受け取ることができませんでした。 問題は、処理イベントの処理を停止するためにサンドボックス通知送信者を引き起こした無効なWebhook構成によって引き起こされました。 誤った設定が修正されました。 すべての処理は回復し、webhook配達は首尾よく再開しました
公式のインシデント更新を自動翻訳しています。
SSAは、現在、電子一貫性に基づく社会保障番号認証(eCBSV)サービスを含む複数のアプリケーションやサービスに影響を及ぼすサービスインパクトイベントを経験しています。 2026年10月23日の午後4時47分(ET)に、混乱が発生したため、少々の取引が影響されます。 当社は、サービスが復元されたこと、eCBSVが正常に動作しているという通知を受け取ったら、別のアップデートを共有します.
約4:56(ET)では、サービスが復元され、eCBSVが正常に動作しています。 ご迷惑をおかけいたしますが、何卒ご了承くださいますようお願い申し上げます.
公式のインシデント更新を自動翻訳しています。
現在、完了したトランザクションの少々の割合でDocV Imagesを表示およびダウンロードして、断続的な遅延を引き起こしている問題について調査しています。 今回はDocVや評価に影響はありませんが、画像は表示する時間がかかります.
当社のチームは、DocVイメージ表示とダウンロードのために経験されたレイテンシを緩和するための手順を講じています。 今回DocV評価に影響を与えず、引き続き状況を監視していきます。 あらゆる影響が解決されたら別の更新を提供します.
この問題は解決され、サービスが安定していることを確認するために性能を監視しています。 ご迷惑をおかけいたしますが、何卒ご了承くださいますようお願い申し上げます.
公式のインシデント更新を自動翻訳しています。
SSAは、電子一貫性に基づく社会保障番号の検証(eCBSV)サービスを含む複数のアプリケーションやサービスに影響を及ぼしたサービスインパクトのあるイベントを経験しました。 2026年10月18日(火)に約2:50PM(ET)で中断が始まったため、取引件数が少ないため、約3:10PM(ET)で解決しました。 eCBSVは、サービスが復元され、この時点で正常に動作しています.
公式のインシデント更新を自動翻訳しています。
3:00 EDT で始まると、一部の顧客は、RiskOS Evaluate API を使用した際に、断続的なエラーや失敗したリクエストが発生することがあります。 データベースの問題を特定し、解決に積極的に取り組んでいます。 調査中、ご迷惑をおかけし、ご迷惑をおかけいたしますが、何卒ご了承ください.
中間測定を行い、高値の誤差率が下落しました。 過去15分に関連した誤差は認められません。 引き続き、全解像度で作業を続けながら、モニタリングにインシデントを移行しています。 状況が変化すると、別のアップデートを共有します.
弊社チームが引き続き状況を監視しているとお詫び申し上げます。 エラー率は、引き続き完全な解像度に取り組んでまいります.
事故が解決し、エラーが見つからなくなりました。 サービスは正常に動作しており、引き続き性能を監視します。 皆様のお越しをお待ちしております.
公式のインシデント更新を自動翻訳しています。
リスクOSおよびID+サービスの復元 ロールアウトのエラーは、18:12と18:56の間の当社のサービスからのエラーレートで一時的なスパイクを引き起こしました。 エラーが修正され、サービスが安定しています。 問題の完全な分析が完了すると、この停電は受容不能であり、完全なRCAが利用可能であることを理解しています.
##**ルート原因分析** **事件:** Socure API の停電 **日付範囲:** 15 Oct-2026 **影響:** Socure API サービスの中断 **ステータス:** 解決する ##**1. 概要** 15 Oct-2026 では、18:12 と 19:00 の東部時間の間、Socure は、ユーザーにエラーとタイムアウトを引き起こし、その RiskOS と ID\ + API への中断を経験しました。 18:12から18:20までの最初のフェーズは、ほぼすべてのサービスの大きな中断でした。 18:20〜19:00の停電の第2相は、KYCデータに依存するサービスの部分的な停電でした。これにより、一部のサービスに対する誤差率やレイテンシーが上昇し、トラフィックは引き続き提供されていました。 ##**2. タイムライン** **日時 \(ET\)** | イベント **18:12** | 定期的なクリーンアップ変更が統合され、1つのコードリポジトリから別のコードへソースリポジトリを移動する。 当社のレビューツールのバグは変更のスコープを隠します。 **18:13** | ArgoCDは、一度に主要なKubernetesクラスターでほとんどのサービスを再起動します。 **18:20** | すべてのサービスポッドが実行中 部分的な API サービスが復元されますが、KYC サービスはまだ高いエラー率を見ています。 **18:21** | スタートアップのトラフィックの洪水がKYC検索サービスに圧倒されます。 エラーレートスパイク。 **18:42** | SREは、KYC検索とブロックトラフィックに影響するカスケード障害を診断し、トラフィックを増加させることができます。 **18:56** | KYC検索サービスが本格化し、SREはそれにトラフィックを返します。 下流サービスは安定します。 **19:00** | 正常に走るすべての交通、事故は安定して宣言した。 ##**3. ルート原因** ***主なルート原因:** 進行中のマイグレーションの一環として、オンコールSREはArgoCDに変更を加え、kubernetesクラスターSocureを管理するために使用するシステムがサービスを実行しました。 変更は、単一のクラスターにスコープ付けされ、プッシュする前に慎重に見直し、テストされた他の環境の問題を引き起こし、目に見える影響がなかったはずです。 残念ながら、変更は変更レビューに表示されないレガシーの設定を更新しました。 そのレガシーの設定は、ArgoCD が管理するサービスの管理と、ArgoCD から多くのライブサービスを削除しました。 その結果、ArgoCDは、設定が修正される前に、制作からこれらのサービスを簡潔に削除しました。 * * **工場の建設:** KYC検索サービスは、社内製品の一部にサービスを提供するSocureインフラストラクチャのバックエンドです。 そのサービスは、サービスのクライアントのすべてと同じ時間にゼロから再起動したとき, 負荷の下でサービス内のPodの数がクラッシュ. これは残りのポッドの負荷を増加させました。そのうちのいくつかはターンでクラッシュしました。 このキャスケーディングの失敗により、Socureのインフラの残りの部分は、サービスが戻って来るのを防ぐことができました。 この別々の故障モードを診断すると、追加時間がかかり、初期インシデント後の残りのエラーを修正しました。 ##**4. 解像度** ArgoCD の変更はすぐに再変換され、サービスが以前の状態に戻ってくるようになりました。 KYC検索サービスは、サービスのポッドの大部分が現れるまで、トラフィックをブロックする手動の努力が必要でした。 サービスが健全だった後、トラフィックを回復し、全体的なインシデントを解決できます。 ##**5. 是正と予防措置** ##**6. レッスン学習** * 生産が正しく機能しなかった変更を表示するためのSocureのツーリング。 これらのツールを見直し、すべてのユースケースで正しく動作し、変更のフルスコープがクリアされていないようなケースを修正します。 * 既存の変更レビュープロセスをエージェントのサポートで拡張します。 この場合、特定の変更は計画では表示されませんが、広範なトレーニングモデルがサポートする追加の査読者は、送信前に問題がキャッチされるように役立ちます。 ※ 生産ジョブのガバナンス体制にとらわれていると、影響を受けないような変更であっても、リスクを負うことができ、米国の営業時間外にシフトする必要があります。 ※KYC検索サービスは、完全オンラインでないと、フルトラフィックフローを受信したときに「雷神」の問題に脆弱です。 この問題の再発を防ぐため、当社の遮断器を強化する必要があります。 ※1つのkubernetesクラスターで、当社のコアAPIサービスを多数運営しています。 そのクラスターは複数の可用性ゾーンに分散しているにもかかわらず、共有制御平面は、そのクラスターの変更のためにあまりにも高いブラスト半径を作成します。 ##**7. 次のステップ & 開始コミット** 当社は、お客さまが重要な業務フローにおいて重要なプロバイダーとして信頼されるものと認識し、本サービスの中断は認められません。 この問題が原因となったこと、再発しないようご注意ください。 そのためには、来年のQ1でKYC検索サービスのレジリエンスを改善し、11月にアプリケーションレイアウトを再設計する計画の詳細を配信します.
公式のインシデント更新を自動翻訳しています。
リスクOSおよびID+サービスの復元 ロールアウトのエラーは、18:12と18:56の間の当社のサービスからのエラーレートで一時的なスパイクを引き起こしました。 エラーが修正され、サービスが安定しています。 問題の完全な分析が完了すると、この停電は受容不能であり、完全なRCAが利用可能であることを理解しています.
公式のインシデント更新を自動翻訳しています。
現在、サービスの利用可能性に影響を及ぼす積極的な事故を経験しています。 現在、問題を調査し、追加情報がある場合に速やかに更新を行います.
リスクOSおよびID+サービスの復元 ロールアウトのエラーは、18:20と18:56の間の当社のサービスからのエラーレートで一時的なスパイクを引き起こしました。 エラーが修正され、サービスが安定しています。 問題の完全な分析が完了すると、この停電は受容不能であり、完全なRCAが利用可能であることを理解しています.
リスクOSおよびID+サービスの復元 ロールアウトのエラーは、18:12と18:56の間の当社のサービスからのエラーレートで一時的なスパイクを引き起こしました。 エラーが修正され、サービスが安定しています。 問題の完全な分析が完了すると、この停電は受容不能であり、完全なRCAが利用可能であることを理解しています.
リスクOSおよびID+サービスの復元 ロールアウトのエラーは、18:12と18:56の間の当社のサービスからのエラーレートで一時的なスパイクを引き起こしました。 エラーが修正され、サービスが安定しています。 問題の完全な分析が完了すると、この停電は受容不能であり、完全なRCAが利用可能であることを理解しています.
##**ルート原因分析** **事件:** Socure API の停電 **日付範囲:** 15 Oct-2026 **影響:** Socure API サービスの中断 **ステータス:** 解決する ##**1. 概要** 15 Oct-2026 では、18:12 と 19:00 の東部時間の間、Socure は、ユーザーにエラーとタイムアウトを引き起こし、その RiskOS と ID\ + API への中断を経験しました。 18:12から18:20までの最初のフェーズは、ほぼすべてのサービスの大きな中断でした。 18:20〜19:00の停電の第2相は、KYCデータに依存するサービスの部分的な停電でした。これにより、一部のサービスに対する誤差率やレイテンシーが上昇し、トラフィックは引き続き提供されていました。 ##**2. タイムライン** **日時 \(ET\)** | イベント **18:12** | 定期的なクリーンアップ変更が統合され、1つのコードリポジトリから別のコードへソースリポジトリを移動する。 当社のレビューツールのバグは変更のスコープを隠します。 **18:13** | ArgoCDは、一度に主要なKubernetesクラスターでほとんどのサービスを再起動します。 **18:20** | すべてのサービスポッドが実行中 部分的な API サービスが復元されますが、KYC サービスはまだ高いエラー率を見ています。 **18:21** | スタートアップのトラフィックの洪水がKYC検索サービスに圧倒されます。 エラーレートスパイク。 **18:42** | SREは、KYC検索とブロックトラフィックに影響するカスケード障害を診断し、トラフィックを増加させることができます。 **18:56** | KYC検索サービスが本格化し、SREはそれにトラフィックを返します。 下流サービスは安定します。 **19:00** | 正常に走るすべての交通、事故は安定して宣言した。 ##**3. ルート原因** ***主なルート原因:** 進行中のマイグレーションの一環として、オンコールSREはArgoCDに変更を加え、kubernetesクラスターSocureを管理するために使用するシステムがサービスを実行しました。 変更は、単一のクラスターにスコープ付けされ、プッシュする前に慎重に見直し、テストされた他の環境の問題を引き起こし、目に見える影響がなかったはずです。 残念ながら、変更は変更レビューに表示されないレガシーの設定を更新しました。 そのレガシーの設定は、ArgoCD が管理するサービスの管理と、ArgoCD から多くのライブサービスを削除しました。 その結果、ArgoCDは、設定が修正される前に、制作からこれらのサービスを簡潔に削除しました。 * * **工場の建設:** KYC検索サービスは、社内製品の一部にサービスを提供するSocureインフラストラクチャのバックエンドです。 そのサービスは、サービスのクライアントのすべてと同じ時間にゼロから再起動したとき, 負荷の下でサービス内のPodの数がクラッシュ. これは残りのポッドの負荷を増加させました。そのうちのいくつかはターンでクラッシュしました。 このキャスケーディングの失敗により、Socureのインフラの残りの部分は、サービスが戻って来るのを防ぐことができました。 この別々の故障モードを診断すると、追加時間がかかり、初期インシデント後の残りのエラーを修正しました。 ##**4. 解像度** ArgoCD の変更はすぐに再変換され、サービスが以前の状態に戻ってくるようになりました。 KYC検索サービスは、サービスのポッドの大部分が現れるまで、トラフィックをブロックする手動の努力が必要でした。 サービスが健全だった後、トラフィックを回復し、全体的なインシデントを解決できます。 ##**5. 是正と予防措置** ##**6. レッスン学習** * 生産が正しく機能しなかった変更を表示するためのSocureのツーリング。 これらのツールを見直し、すべてのユースケースで正しく動作し、変更のフルスコープがクリアされていないようなケースを修正します。 * 既存の変更レビュープロセスをエージェントのサポートで拡張します。 この場合、特定の変更は計画では表示されませんが、広範なトレーニングモデルがサポートする追加の査読者は、送信前に問題がキャッチされるように役立ちます。 ※ 生産ジョブのガバナンス体制にとらわれていると、影響を受けないような変更であっても、リスクを負うことができ、米国の営業時間外にシフトする必要があります。 ※KYC検索サービスは、完全オンラインでないと、フルトラフィックフローを受信したときに「雷神」の問題に脆弱です。 この問題の再発を防ぐため、当社の遮断器を強化する必要があります。 ※1つのkubernetesクラスターで、当社のコアAPIサービスを多数運営しています。 そのクラスターは複数の可用性ゾーンに分散しているにもかかわらず、共有制御平面は、そのクラスターの変更のためにあまりにも高いブラスト半径を作成します。 ##**7. 次のステップ & 開始コミット** 当社は、お客さまが重要な業務フローにおいて重要なプロバイダーとして信頼されるものと認識し、本サービスの中断は認められません。 この問題が原因となったこと、再発しないようご注意ください。 そのためには、来年のQ1でKYC検索サービスのレジリエンスを改善し、11月にアプリケーションレイアウトを再設計する計画の詳細を配信します.
公式のインシデント更新を自動翻訳しています。
現在、SSA 応答による eCBSV モジュールに未計画の停電が発生しており、5xx エラーが発生しています。 ソキュアは、ベンダーに問題の調査やサービスが復元されるタイミングを判断するために連絡を取りました.
エラー率は、最後の数分で下落しています。 これらのレートを監視し、ベンダーの応答を終了します.
SSAは、電子一貫性に基づく社会保障番号の検証(eCBSV)サービスを含む複数のアプリケーションやサービスに影響を及ぼしたサービスインパクトのあるイベントを経験しました。 2026年10月15日、約10時19分(ET)で崩壊し、約10時41分(ET)で解決しました。 eCBSVは、サービスが復元され、この時点で正常に動作しています.
公式のインシデント更新を自動翻訳しています。
Watchlist PlusとWatchlist Premierに影響するトランザクションの失敗を増加させました。 問題は解決され、サービスが安定していることを確認するために性能を監視しています。 ご迷惑をおかけいたしますが、何卒ご了承くださいますようお願い申し上げます.
公式のインシデント更新を自動翻訳しています。
リスク・ケース・マネジメント・UIに反映されるケース・アップデートの遅延を引き起こした課題を調査しています。 当社のエンジニアリングチームは、根本的な原因を特定し、正常な更新行動を回復するために積極的に取り組んでいます。 情報が増えるにつれて、さらなるアップデートが提供されます。 API の評価リクエストには影響しません.
リスクOS ケース管理 UI の更新に影響を与える問題の根本原因を特定しました。 この問題は、ケースのサブセットに限られ、特にケース検索機能に影響を及ぼします。これにより、ケースの状態を一時的に表示することができます。 ケースリストや個別のケース詳細ページ内で表示されたケースのステータスデータは正確で最新の状態を反映しています。 当社のエンジニアリングチームは、新たに更新されたすべてのケースの修正を導入し、残りの影響を受けたケースを再同期して、検索全体でデータの一貫性を確保しています。 通常の動作が完全に復元されると、別の更新を行います.
ケースの状態の更新に影響を及ぼす問題が解決しました。 新しいケースはすべて正しく処理されます。 誠に有難うございますので、ご迷惑をおかけいたしますが、ご理解のほどよろしくお願い申し上げます.
公式のインシデント更新を自動翻訳しています。
6:28 AM と 6:57 AM ET 間 9 月 21, 運用活動中にいくつかの webhook 通知は、過去の月からの古い評価に再び配信されます. 現行の評価やWebhook処理は影響しません。 問題は解決しました。 万一の混乱や騒音が発生してもお詫び申し上げます.
公式のインシデント更新を自動翻訳しています。
ダッシュボード上でのバッチ処理に影響を及ぼす遅延を調査しています。 お客さまは、問題点を見直しながら、処理を遅延させる場合があります.
この事件は解決しました.
公式のインシデント更新を自動翻訳しています。
フロイトや合成製品を使用して、一部の顧客に影響するレイテンシの増加を観察しています。 私たちのチームは積極的に問題を調査しています。 API のリクエストは正常に完了しており、現時点では API の失敗を観察していません。 情報が増えるにつれて、さらなるアップデートが提供されます.
フラウドや合成製品を使って、一部のお客さまに影響を及ぼすレイテンシーの改善を図っています。 今後も状況を監視してまいります.
不正および合成サービスに影響を及ぼす問題は解決され、サービスが正常な動作に戻りました。 ユーザーは、不正および合成サービスにアクセスしたときにレイテンシーや遅延が増加しなくなった
公式のインシデント更新を自動翻訳しています。
午前8時30分から午後2時00分まで、間接的なエラーや一部の顧客の失敗したリクエストが発生した5xxエラー率が増加しました。 全面的な衝撃は0.01%以下です。 エラー率は正常に戻ったためです。 この問題は、この時点で完全に解決されます。 ご迷惑をおかけいたしますが、何卒ご理解賜りますようお願い申し上げます.
公式のインシデント更新を自動翻訳しています。
午前7時~午後7時20分 ESTは、5xxのエラー率の増加を観察しました。これにより、断続的なエラーや一部の顧客の失敗したリクエストが発生する可能性があります。 エラー率は正常に戻り、問題を完全に解決するために根本的な原因を調べています。 ご迷惑をおかけいたしますが、何卒ご理解賜りますようお願い申し上げます.
**ルート原因分析** **事件:** 断続的にサービス全体で5xxエラーが上昇 **日時範囲:** 9月9日、2026日、7:00 AM - 9:20 AM EDT \(約2時間20分) **影響:** メールAuthScore API および関連サービスに送信されたリクエストは、間接的に返されたエラー応答を送信します。 影響は継続的ではなく断続的であり、以下のタイムラインで記述された定義されたウィンドウに限定されていました。 **ステータス:** 解決する ##**1. 概要** 2026年9月9日、バックエンド処理能力の計画的増加により、複数のサービスのダウンストリーム処理をサポートする内部インフラコンポーネントの接続負荷が上昇しました。 このコンポーネントは内部容量のしきい値に達し、処理の遅延が導入され、EmailAuthScore API の断続的なエラー応答とリクエストのサブセットに対する関連サービスが送信されました。 問題は、インパクトウィンドウ内のモニタリングとレポートの組み合わせで特定されました。 Socure エンジニアリングは、最近の容量変化でエラーを関連づけ、エラーの初期増加を停止しました。 2 つは、別の容量の変更が、別の内部サービスのためにより前になされたとき、同じ共有された部品に付加的な負荷を置くとき、関連した増加の間違い起こりました; 工学は正常な、安定した操作に戻ったすべての影響を受けたサービスの後で更に緩和を加えました。 セクション5は、是正と予防措置を概説しています。Socureは、インフラストラクチャ容量の可視性を改善し、顧客の面での要求処理に影響を与える単一の内部コンポーネントの遅延を防ぐことを優先してコミットしています。 ##**2. タイムライン** |**日時/時間\(EDT\)** | **イベント** | | お問い合わせ | |※9月9日、2026 07:00 AM** | バックエンド処理能力の計画的増加に伴い、EmailAuthScore API は間続的にエラー応答を返すようになりました。 お問い合わせ | ※9月9日(月)2026日(火)13時20分まで 最近の容量変更が再変換され、エラー率は正常に戻りました。 | |**9月9日 2026 08:45 AM** | 異なる内部サービスが同じ共有内部コンポーネントに付加的な負荷を置くために、以前の別の容量の変更が行われたため、EmailAuthScore APIは、再度、エラー応答を断続的に返し始めた。 お問い合わせ | ※2019年9月9日(土)2026日(日)9時20分〜20時30分まで ※追加ミシグレーション、エラー発生率は正常に戻り、安定した状態になります。 | | ※9月9日(土)2026日(日)13時迄 予報として、影響を受けた内部コンポーネントから内部処理の一部を一時的に再ルートし、残りの容量を安全に完了させます。 変更後のエラーは未確認です。 | ##**3. ルート原因** ***主なルート原因:** 予想される要求の先のシステム容量を増加させる計画された仕事の部分として、Socureはバックエンドサービスの処理能力を高めました。 この変更により、これらのサービスに対するダウンストリーム処理をサポートするために使用される内部メッセージングコンポーネントへの接続数が増加しました。 そのコンポーネントは内部接続容量制限に達し、接続と処理遅延が発生しました。 これらの遅延は、追加のレイテンシを導入し、場合によっては、要求処理へのバックプレッシャーが導入され、EmailAuthScore API の断続的なエラー率と、上記に示すインパクトウィンドウのサブセットに対する要求のサブセットのための関連サービスに寄与しました。 * * **工場の建設:** * インフラ容量の需要が急増し、内部メッセージングコンポーネント内ですぐに利用できなかった容量を上回りました。 ##**4. 解像度** 昨今の容量変化に上昇した誤差率がリンクされたことを識別すると、Socure エンジニアリングは変更を反転し、エラーの初期増加を停止しました。 2つ目は、別々の容量が異なる内部サービスのために以前作られた別の容量が変更されたとき、同じ共有コンポーネントに追加の負荷を置くエラーの増加が発生しました。 エンジニアリングは、影響を受けたサービスに対する影響を受けたコンポーネントから離れた内部処理の一部を一時的に再ルーすることを含む追加の緩和を適用しました。 これらの行動に続いて、すべての影響を受けたサービスは正常で安定した動作に戻り、継続的な監視で確認した結果に返されます。 ##**5. 是正と予防措置** | 特定商取引法に基づく表記 | お問い合わせ | | インフラ容量の活用を最適化 | バックエンドサービス容量と接続使用量を調整し、対応するインフラの限界を超えて処理し、同様の能力問題のリスクを低減します。 | 寄付 | | メッセージングインフラ容量の増大 | 増設型メッセージングインフラの能力を増大させ、さらなるヘッドルームの提供や、今後の交通量の拡大を支援 | 寄付 | | 能力監視・警戒を強化 | 積極的な監視とアラートを追加し、サービス性能に影響を与える前に潜在的なインフラ容量の制約を特定します。 お問い合わせ 進行中。 ETA 30 9月 2026. | ##**6. レッスン学習** * インフラ健康の積極的な監視は、アプリケーションレベルの監視だけでなく、容量変化の先にある必要があります。 ##**7. 次のステップ & 開始コミット** 我々 は、コミットします。: * セクション5に記載されている是正および予防措置を完了します。 *将来のスケールアップ活動の先にある重要な内部インフラの健全性と能力を可視化する。 * 是正措置が完了したら、フォローアップアップデートを提供.
公式のインシデント更新を自動翻訳しています。
現在、0905 AM EST から 09:30 AM EST まで、今日9月8日、エラーが観察された DocV および Watchlist 監視サービスに影響を及ぼす問題を調査しています。 システムが回復し、今度は根本原因を判断して取り組んでいます.
9月8日にDocVとWatchlistモニタリングサービスに影響を及ぼす問題が解決しました。 午前10時35分以降、顧客への影響は認められません。 ご迷惑をおかけいたしますが、何卒ご了承ください.
###**ルート原因分析** **事件:** サービスの中断の欠陥のアカウントデータアクセス **日時範囲:** 9月 8, 2026 \(10:04 10:31 AM EDT\) **影響:** DocVおよびWatchlistのモニター **ステータス:** 解決する ##1. 概要 バックエンドデータベース容量の予期しない枯渇は、クライアント要求のサブセットに対するアカウント情報の取得を一時的に防止しました。 インシデントウィンドウの場合、(10:04 AM から 10:31 AM 8-Sep-2026\のEDT)、クライアントのリクエストの一部は、クエリアカウントの詳細を試みるときに高値のエラー率を経験しました。 定期的なメンテナンス更新後、バックアップ環境からの同時接続は、通常のしきい値を超え、利用可能なデータベース容量を飽和させます。 エンジニアリングチームは、冗長環境を安全に切断し、アクティブな接続をリフレッシュし、システム全体の応答性と安定性を回復させました。 ##2. タイムライン |**開催日/時間\(ET\)** |** | お問い合わせ | | ファーストエラー | 10:04 AM EST, 8 9月 2026 | | 事件報告 | 10:17 EST, 8 9月 2026 | | 冗長環境接続プール 隔離 | 10:30 EST, 8 Sep 2026 | | 事件の解決 | 10:31 午前 EST, 8 9月 2026 | ##3. 根本原因 ***主なルート原因:** スケジュールされたシステム更新中は、デプロイ環境間の接続保持を高め、データベース接続プール飽和につながります。 ピークトラフィックでは、これにより、依存するプラットフォームサービスに対する処理遅延とリクエストタイムアウトが発生しました。 * * **工場の建設:** * 厳格な接続タイムアウトパラメータは、パッシブ環境によるアイドルデータベース割り当てのタイムリーなリリースを遅らせました。 * スタンバイ環境で生成された余分な接続のデータベース ノード ヘッドルームを不必要なシームレスな処理。 ***非結合因子:** * なし ##4. 決断 フルサービスの完全性は、次の即時の行動によって復元されました。 1. 即時に自由なデータベース プール容量への非活動的な環境の関係を隔離して下さい。 2。 明確なデータベース接続ベースラインを再確立するために、アクティブなサービスノードのロールリセットを実行します。 ##5. 是正と予防措置 | 特定商取引法に基づく表記 | お問い合わせ | | データアクセスパターンの改善 | アカウントデータに依存する社内サービスにおけるキャッシュ戦略やデータアクセスパターンの改善 | 10月15日 | | 自動接続管理 | 接続ライフサイクル管理の強化と、非アクティブバックグラウンドタスクの自動クリーンアップルーチンの強化 | 10月15日 | ##6. 学習したレッスン * **展開の分離を高めること:** 導入手順を更新し、有効環境とパッシブ環境全体でリソースの完全な分離を確保し、アップグレード中にクロス環境リソースのコンテンツを排除します。 ***データベースリソースの割り当ての最適化:** ピーク性能を確保するために、ワークロードを見直し、システム全体の能力と効率性を高めています。 ##7. 次のステップと開始約束 我々 は、コミットします。: * 共有されたタイムラインによって識別された根本原因を解決する ※ 永続的用途とインフラ強化の最終化に伴い、積極的な安全監視・監視を行います.
公式のインシデント更新を自動翻訳しています。
当社のベンダー、SSA は、現在 eCBSV モジュールに影響を与える高レイテンシの問題があることを報告しています。 その結果、高い応答時間を体験することができます。 当社のチームは、可能な限り迅速に問題を解決するために積極的に取り組んでいます。 ご迷惑をおかけしますが、ご理解とご協力を賜りますようお願い申し上げます.
SSA は eCBSV モジュールに 2:00 ET として影響する高レイテンシを解決しました。 応答時間は正常に戻りました。 誠に有難うございます.
公式のインシデント更新を自動翻訳しています。
We are investigating a slight degradation on the Watchlist product due to latency. Affecting both ID+ and RiskOS. The team is actively investigating this issue at this time.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
This incident has been resolved.
Between 1:21 AM and 2:15 AM EDT on August 4, 2026, a subset of DocV webhook delivery notifications experienced elevated 401 response rates. The issue is fully resolved and webhook delivery is now operating normally. A full Root Cause Analysis (RCA) will be shared once the investigation concludes.