支払い通知サービスの中断/支払い通知サービスの中断
- investigating
失敗率 このモジュールを使用しているマーチャンドへの後払い通知の送信に影響するインシデントが特定されました。 インシデントは分析中です。 で モジュールを使用しているマーチャントへの支払い後通知の配信に影響するインシデントを特定しました。 このインシデントは現在調査中です。
- resolved
TSR-3421 -デビュー/開始:2026年6月19日 18:00:00 CEST -日/終了:2026年6月20日 15:17:00 CEST -カテゴリー/カテゴリー:生産/加工 -責任/責任:社外 -優先順位/優先度:P1 失敗率 モジュールを使用しているマーチャンドの後払い通知の送信に影響するインシデントは解決されました。このサービスは 15 時 17 分に復旧し、正常に動作しなくなりました。 このオペレーションでは、インシデントの開始後に送信されなかった通知を再度更新し、この 18 時まで処理を続けます。 で モジュールを使用するマーチャントへの支払い後通知の配信に影響する問題は解決されました。サービスは 15:17 に復旧し、現在は正常に稼働しています。 昨日 18:00 に始まったインシデントの発生以降、送信できなかった通知をリプレイする運用が行われます。
- postmortem
# _以下の英語版_ # 事後分析 **リファレンスインシデント** TSR-3421 **懸念されるサービス** 支払い通知。 **インパクトクライアント** 支払い通知がマーチャンドに送信されなくなりました。 **インシデント合成** * **6 月 19 日 18 時:** 大量の支払い情報を送信します。 * **6 月 19 日 18:30: インシデントの始まり。** * **33 年 6 月 20 日:** 通知の問題に関するアラートが更新されました。 * **46 年 6 月 20 日 11 時:** 専用クライスセルの作成。調査開始。 * **48 年 6 月 20 日 11 時:** 支払い通知が送信されなかったことの確認。調査を続ける。 * **50 年 6 月 20 日 12 時:根本原因の特定** * **02 年 6 月 20 日午後 13 時-15 時:** さまざまな是正措置の導入。 * **17 年 6 月 20 日 15 時:インシデント終了。** * **32 年 6 月 20 日:** 通知を自動送信するようになりました。 * 6月21日午前11時57分:** 通知一括送信の確認。 **根本原因** 使用できない URL への自動再送信試行に関連して、通知量が異常に増加したため、通知処理ファイルが飽和状態になりました。この飽和状態により、通知の送信がブロックされました。 **Payplugによるアントレプレナーアクション** | **症状** | **アクション** | |---|---| | 通知処理ファイルに対する特定の警告の非表示 | 処理ファイルの飽和状態を事前に検出して予測するための特定の警告を追加しました。| | マーチャードごとの支払いリクエストの送信制限の解除 | マーチャンドごとの制限を設けることで、通知フローを制限し、処理ファイルが飽和状態になるのを防ぐことができます。| | | 不適当なタイムアウト管理 | 通知処理ファイルが飽和状態になるのを防ぐためのタイムアウトシグネチャを改訂しました。| | インシデントサポートの遅延 | インシデント手順を営業時間外に改訂し、特定のチームと通信できるようにしました。| ============= 英語版============ # ポストモーテム **インシデントリファレンス** TSR-3421 **インシデントの影響を受けた支払いサービス** 支払い通知。 **クライアントへの影響** 支払い通知はマーチャントに送信されなくなりました。 **インシデント概要** * **6 月 19 日午後 6 時:** 大量の支払い取引が処理されました。 * **6 月 19 日午後 6 時 30 分:インシデントが始まりました。** * **6 月 20 日午前 10 時 33 分:** 通知の問題に関するアラートが発生しました。 * **6 月 20 日午前 11 時 46 分:** 専任の危機管理チームが設立されました。調査が開始されました。 * **6 月 20 日午前 11 時 48 分:** 支払い通知の送信に失敗したことが確認されました。調査は継続されました。 * **6 月 20 日午後 12 時 50 分:根本原因が特定されました。** * **6月20日午後1時2分~午後3時15分:** さまざまな是正措置が講じられました。 * **6 月 20 日午後 3 時 17 分:インシデントは解決しました。** * **6 月 20 日午後 10 時 32 分:** 通知を再送信するための自動プロセスが開始されました。 * **21 6 月 21 日午前 11 時 57 分:** すべての通知が正常に再送信されたことの確認。 **根本原因** 異常に大量の失敗通知と、利用できない URL への自動再試行が相まって、通知処理キューが飽和状態になりました。その結果、飽和状態になったために支払い通知が送信されなくなりました。 **Payplugが取るべきアクション** | **症状** | **アクション** | |---|---| | 通知処理キューには特定のアラートは設定されていませんでした。| 処理キューの飽和を検出して事前に予測するために、特定のアラートが導入されました。| | 支払いリクエストの送信にはマーチャントごとの制限は設けられていませんでした。| 通知トラフィックを制御し、処理キューが飽和状態にならないように、マーチャントごとの制限が導入されました。| | 不適切なタイムアウト設定 | 通知処理キューが飽和状態にならないように、タイムアウトしきい値の見直しが行われている。| | インシデント対応の遅れ | 時間外のインシデント管理手順は現在見直されており、関連チームに通知される予定です。|
公式のインシデント更新を自動翻訳しています。