Zakłócenie usługi powiadamiania o płatności/ Payment notification service disruption
- investigating
FR Zidentyfikowaliśmy incydent mający wpływ na wysyłanie powiadomień po płatnościach za pomocą naszych modułów. Incydent jest w trakcie analizy. EN Zidentyfikowaliśmy incydent mający wpływ na dostarczanie powiadomień po płatności dla sprzedawców korzystających z naszych modułów. Incydent jest obecnie przedmiotem dochodzenia.
- resolved
TSR-3421 - Początek/ Początek: 19/06/2026 18:00:00 CEST - Zakończenie: 20/06/2026 15:17:00 CEST - Kategoria/ Kategoria: Produkcja/Przetwórstwo - Odpowiedzialność/Odpowiedzialność: Zewnętrzna - Priorytet/Priorytet: P1 FR Incydent, który wpłynął na wysyłanie powiadomień po płatnościach dla rynków korzystających z modułów, został rozwiązany. Usługa była regulowana do 15h17 i działała normalnie. Operacje zostaną podane w celu przeglądania powiadomień, które nie mogą być wysyłane od początku zdarzenia, które pojawią się tutaj o 18:00. EN Incydent mający wpływ na dostarczanie powiadomień po płatnościach dla sprzedawców korzystających z modułów został rozwiązany. Usługa została przywrócona o 15:17 i teraz działa normalnie. Przeprowadzone zostaną operacje w celu powtórzenia powiadomień, których nie można wysłać od początku incydentu, który rozpoczął się wczoraj o 18:00.
- postmortem
# _Wersja angielska poniżej_ # Post Mortem **Referencja incydentu** TSR-3421 **Usługa objęta** Powiadomienia o płatnościach. **Klient wpływu** Powiadomienia o płatnościach nie są wysyłane do rynków. **Syntezę incydentu** * **19 czerwca 18h: ** wysłanie masywnego wolumenu płatności. * **19 czerwca 18h30: Początek incydentu. ** * **20 czerwca 10h33: ** naprawa alertu o problemie z powiadomieniem. * **20 czerwca 11h46: ** utworzenie uszkodzonej komórki kryzysowej. Początek dochodzeń. * **20 czerwca 11h48: ** Identyfikacja braku zgłoszeń płatniczych. Dlaczego śledztwo. * **20 czerwca 12h50: identyfikacja pierwotnej przyczyny. ** * **20 czerwca 13h02 - 15h15: ** uruchomienie różnych działań korekcyjnych. * **20 czerwca 15h17: koniec incydentu. ** * **20 czerwca 22h32: ** Uruchomienie automatów do odnawiania powiadomień. * **21 czerwca 11h57: ** potwierdzenie zwrotu zgłoszeń. **Przyczyna korzenia** Nieprawidłowo ustawiony wolumen powiadomień, powiązany z automatycznymi próbami wysyłania na niedostępny adres URL, przesyła plik przetwarzania powiadomień. To nasycenie przez co blokuje wysyłanie powiadomień. **Działania prowadzone przez Payplug** | **Symptomy** | **Działanie** | | --- | --- | | Brak określonego ostrzeżenia w pliku przetwarzania powiadomień. | Dodaj ostrzeżenie specjalne do wykrywania i zapobiegania całkowitemu nasyceniu pliku przetwarzania. | | Brak limitu żądań płatniczych na rynek | Aktualizacja zamiast limitu na rynek, aby ograniczyć przepływ powiadomień i zapobiec całkowitemu nasyceniu pliku przetwarzania. | | Niedostosowane zarządzanie limitami czasu | Zmiana przekroczenia limitu czasu, aby zapobiec nasyceniu plików przetwarzania powiadomień. | | Opóźnienie w ściganiu odpowiedzialnym za incydent | Rewizja procesu incydentu w nieotwartych godzinach i komunikacji z określonymi zespołami. | ============ WERSJA ANGIELSKA ============== # Post Mortem **Odniesienie do incydentu** TSR-3421 **Usługi płatnicze dotknięte incydentem** Powiadomienia o płatnościach. **Wpływ klienta** Powiadomienia o płatnościach nie były już wysyłane do sprzedawców. **Przegląd incydentów** * **19 czerwca 18:00: ** przetworzono dużą liczbę transakcji płatniczych. * **19 czerwca 18:30: rozpoczął się incydent. ** * **20 czerwca 10:33: ** podniesiony alert dotyczący problemu z powiadomieniem. * **20 czerwca 11:46: ** powołano dedykowany zespół zarządzania kryzysowego. Rozpoczęły się dochodzenia. * **20 czerwca 11:48: ** stwierdzono brak wysłania powiadomień o płatnościach. Dochodzenia trwały. * **20 czerwca 12:50: zidentyfikowano pierwotną przyczynę. ** * **20 czerwca 13:02 — 15:15: ** wdrożono różne działania naprawcze. * **20 czerwca 15:17: incydent rozwiązany. ** * **20 czerwca 22:32: ** uruchomiono zautomatyzowane procesy ponownego wysyłania powiadomień. * **21 czerwca 11:57: ** potwierdzenie, że wszystkie powiadomienia zostały ponownie wysłane. **Przyczyna korzenia** Nienormalnie duża liczba nieudanych powiadomień w połączeniu z automatycznymi próbami ponownej próby niedostępnego adresu URL nasycała kolejkę przetwarzania powiadomień. W rezultacie nasycenie uniemożliwiło wysyłanie powiadomień o płatnościach. **Działania do podjęcia przez Payplug** | **Objawy** | **Działanie** | | --- | --- | | W kolejce przetwarzania powiadomień nie wprowadzono konkretnego ostrzegania. | Wprowadzono specjalne alerty w celu wykrycia i proaktywnego przewidywania nasycenia kolejki przetwarzania. | | Nie obowiązywał limitu na sprzedawcę w przypadku składania wniosków o płatność. | Wdrożono limit na sprzedawcę, aby kontrolować ruch powiadomień i zapobiec nasyceniu kolejki przetwarzania. | | Niewłaściwe ustawienia limitu czasu | Trwa przegląd progów limitu czasu, aby zapobiec nasyceniu kolejek przetwarzania powiadomień. | | Opóźnienie w reagowaniu na incydenty. | Procedura zarządzania incydentami poza godzinami pracy jest obecnie poddawana przeglądowi i zostanie przekazana odpowiednim zespołom. |
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.