Ιστορικό διακοπών του Clearhaus

1. 14 Οκτωβρίου 2026 στις 8:55 π.μ. UTCinvestigating

   Από το 2026-10-14 07:15 CEST, έχουμε δει ένα αυξημένο ποσοστό απορρίψεων για τις πιστωτικές και χρεωστικές συναλλαγές Visa (Visa Direct OCT και AFT, που αποστέλλονται μέσω των /πιστώσεων και /χρεώσεις καταληκτικά σημεία), συμπεριλαμβανομένων των επιστροφών των χρεώσεων. Αυτό αφορά μόνο αυτούς τους τύπους συναλλαγών, όχι πιστωτικές κάρτες Visa ή χρεωστικές κάρτες Visa. Δυστυχώς, βλέπουμε το ίδιο υποκείμενο ζήτημα όπως χθες, και βρισκόμαστε σε συνεχή επικοινωνία με τη Visa προσπαθώντας να επιλύσουμε πλήρως το ζήτημα. Τακτικές άδειες Visa, συλλαμβάνει, επιστροφές και κενά δεν επηρεάζονται, όπως και όλες οι συναλλαγές Mastercard. Δουλεύουμε με τον πάροχο μας ανάντη για να ερευνήσουμε και θα δημοσιεύσουμε μια ενημέρωση όταν γνωρίζουμε περισσότερα.

2. 14 Οκτωβρίου 2026 στις 10:38 π.μ. UTCmonitoring

   Ένα hotfix αναπτύχθηκε στις 12:03 CEST, και η πληγείσα υπηρεσία εκτελεί κανονικά και πάλι. Παρακολουθούμε την κατάσταση και θα δημοσιεύσουμε μια ενημέρωση μόλις επιβεβαιώσουμε ότι το ζήτημα έχει επιλυθεί.

3. 16 Οκτωβρίου 2026 στις 8:08 π.μ. UTCresolved

   Αναπτύξαμε μια σταθερή λύση στο 2026-10-14 14:09 CEST την οποία παρακολουθούμε και επιβεβαιώνουμε ότι είναι επιτυχής. Είμαστε ακόμα σε επικοινωνία με τη Visa για να κατανοήσουμε τη βασική αιτία από την πλευρά της Visa, αλλά καθώς δεν υπάρχει πλέον αντίκτυπος αυτού του συμβάντος, θα θεωρηθεί ότι έχει επιλυθεί. Κατά την περίοδο συμβάντος 07:15–12:03 CEST, το 86 % των πιστώσεων ή των χρεώσεων Visa έλαβε τον κωδικό κατάστασης 50000. Οι αντικρουόμενοι έμποροι θα λάβουν άμεση επικοινωνία από εμάς για να αποσαφηνίσουν την πραγματική κατάσταση των αντικρουόμενων συναλλαγών που έλαβαν τον κωδικό καθεστώτος 50000 και ένα μήνυμα κατάστασης που θα δηλώνει “άγνωστη κατάσταση”.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 13 Οκτωβρίου 2026 στις 7:15 μ.μ. UTCresolved

   Μεταξύ 18:18 και 18:53 UTC, τα στοιχεία διακανονισμού δεν ήταν διαθέσιμα στο εμπορικό API λόγω διακοπής της βάσης δεδομένων. Η επεξεργασία συναλλαγών Gateway δεν επηρεάστηκε σε κανένα σημείο. Ζητάμε συγγνώμη για κάθε ενόχληση.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 13 Οκτωβρίου 2026 στις 9:33 π.μ. UTCinvestigating

   Από το 2026-10-13 08:16 CEST, έχουμε δει ένα αυξημένο ποσοστό απορρίψεων για τις πιστωτικές και χρεωστικές συναλλαγές Visa (Visa Direct OCT και AFT, που αποστέλλονται μέσω των /πιστωτικών και /χρεωστικές καταληκτικά σημεία), συμπεριλαμβανομένων των επιστροφών των χρεώσεων. Αυτό αφορά μόνο αυτούς τους τύπους συναλλαγών, όχι πιστωτικές κάρτες Visa ή χρεωστικές κάρτες Visa. Τακτικές άδειες Visa, κρατήσεις, επιστροφές και κενά δεν επηρεάζονται, όπως και όλες οι συναλλαγές Mastercard. Δουλεύουμε με τον πάροχο μας ανάντη για να ερευνήσουμε και θα δημοσιεύσουμε μια ενημέρωση όταν γνωρίζουμε περισσότερα.

2. 13 Οκτωβρίου 2026 στις 11:06 π.μ. UTCmonitoring

   Από το 2026-10-13 12:30 CEST, Visa Direct OCT και AFT, που αποστέλλονται μέσω των /πιστώσεων και /χρεώσεις καταληκτικά σημεία), συμπεριλαμβανομένων των επιστροφών των χρεώσεων, λειτουργεί ως κανονικό. Παρακολουθούμε την κατάσταση σε περίπτωση που επανέλθει.

3. 13 Οκτωβρίου 2026 στις 1:10 μ.μ. UTCresolved

   Παρακολουθήσαμε την κατάσταση και επιβεβαιώσαμε ότι τα ποσοστά σφάλματος έχουν ομαλοποιηθεί. Το περιστατικό έκλεισε.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 9 Οκτωβρίου 2026 στις 7:20 π.μ. UTCinvestigating

   Ξεκινώντας από 2026-10-09T02:00Z αντιμετωπίζουμε διαλείποντα ζητήματα συνδεσιμότητας προς τον ανάντη πάροχο μας για άδειες και άκυρα (και χρεώσεις Mastercard και επιστροφές χρέωσης). Αυτόματη αποτυχία και ανάκτηση είναι πολύ ανακούφιση του αντίκτυπου, αλλά έχουμε παρατηρήσει ποσοστά σφάλματος 0,75 % μεταξύ 2026-10-09T02:00Z – 2026-10-09T07:00Z. Ερευνούμε και προσεγγίζουμε τον πάροχο μας για να το λύσουμε. Δεσμεύσεις και επιστροφές σύλληψης και χρεώσεις Visa και επιστροφές χρέωσης δεν επηρεάζονται.

2. 9 Οκτωβρίου 2026 στις 8:26 π.μ. UTCmonitoring

   Από τις 06:36Z κλειδώσαμε όλη την κυκλοφορία προς το ανάντη κέντρο δεδομένων του παρόχου μας όπου είδαμε χαμηλότερο ποσοστό σφάλματος ~0.04 %. Στις 07:42Z πληροφορηθήκαμε ότι το πρόβλημα λύθηκε από τον πάροχο μας. Από τις 07:53Z μετακινήσαμε την κυκλοφορία πίσω στο πρωταρχικό κέντρο δεδομένων και δεν έχουν δει περαιτέρω λάθη.

3. 9 Οκτωβρίου 2026 στις 9:37 π.μ. UTCresolved

   Κλείνουμε αυτό το περιστατικό καθώς δεν έχουν παρατηρηθεί σφάλματα από τις 06:36Z και δεδομένου ότι το πρόβλημα επιβεβαιώνεται για να επιλυθεί. Ένα μέσο ποσοστό αποτυχίας 1,14 % παρατηρήθηκε μεταξύ 2026-10-09T04:01Z και 2026-10-09T06:35Z (από όταν συνέβη το πρώτο και το τελευταίο σφάλμα) με μέγιστο ποσοστό σφάλματος εντός ενός λεπτού 31 %. Επιπλέον, παρατηρήσαμε μια μικρή συλλογή σφαλμάτων 2026-10-08T22:32Z – 2026-10-08T22:41Z με μέσο ποσοστό αποτυχίας ~11 %. Διόρθωση των επηρεαζόμενων τύπων συναλλαγών! Οι άδειες, τα κενά, οι επιστροφές σύλληψης και οι πιστώσεις Mastercard επηρεάστηκαν. Οι υπόλοιποι τύποι συναλλαγών (περιλήψεις, χρεώσεις, επιστροφές χρέωσης και πιστώσεις Visa) δεν επηρεάστηκαν.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 10 Σεπτεμβρίου 2026 στις 2:47 μ.μ. UTCresolved

   Μεταξύ 2026-08-27T00:30:35Z και 2026-08-27T00:48:01Z, όλες οι εξουσιοδοτήσεις Visa απέτυχε με τον κωδικό κατάστασης 40400, " πρόβλημα υποστήριξης. Μερικές συναλλαγές Visa είχαν αποτύχει ήδη ξεκινώντας 2026-08-27T00:25:25Z. Οι άδειες Mastercard μαζί με όλες τις κρατήσεις, επιστροφές, κενά και πιστώσεις δεν επηρεάστηκαν. Δεν έχουμε δει περαιτέρω σφάλματα συνδεσιμότητας από το 2026-08-27T00:48:01Z. Οι αποτυχημένες εξουσιοδοτήσεις δεν φορτίστηκαν και μπορούν να ξαναδοκιμάσουν. Συνεργαζόμαστε με τον πάροχο μας ανάντη για να προσδιορίσουμε τη βασική αιτία και να αποτρέψουμε παρόμοια ζητήματα στο μέλλον.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 11 Αυγούστου 2026 στις 1:24 μ.μ. UTCinvestigating

   Από 2026-08-07 00:00 CEST, έχουμε δει μια αύξηση στις απορρίψεις των πιστωτικών συναλλαγών από Mastercard. Οι πιστωτικές συναλλαγές που χρησιμοποιούν ευρώ ως νόμισμα δεν επηρεάζονται. Επικοινωνούμε με τον πάροχο μας και θα δημοσιεύσουμε άλλη ενημέρωση μόλις έχουμε περισσότερες πληροφορίες. Οι τακτικές άδειες και όλοι οι άλλοι τύποι συναλλαγών δεν επηρεάζονται.

2. 11 Αυγούστου 2026 στις 2:15 μ.μ. UTCidentified

   We have now confirmed with our upstream provider that all non-EUR Credits are currently being rejected by Mastercard, due to a configuration change between Clearhaus, upstream provider and Mastercard. Our upstream provider are working on a rollback, and believe to be able to complete this during the night.

3. 12 Αυγούστου 2026 στις 3:32 π.μ. UTCresolved

   Since 2026-08-12 00:05 CEST, approval rate of Mastercard Credits are back to normal. We are still working with the upstream provider to investigate the core issue, and ensure continued operations. Regular authorizations and all other transaction types remain unaffected.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 7 Αυγούστου 2026 στις 8:33 π.μ. UTCresolved

   Στις 2026-08-06 μεταξύ 13:00 και 16:56 UTC, όλες οι συναλλαγές Google Pay απέτυχε με τον κωδικό κατάστασης 40000, "Google Pay σφάλμα εισόδου, καμία έγκυρη υπογραφή του ενδιάμεσου κλειδιού. Δεν επηρεάστηκαν άλλες μέθοδοι πληρωμής, συμπεριλαμβανομένων των συναλλαγών με Apple Pay και τακτικών καρτών. Βελτιώνουμε την ειδοποίησή μας σε αυτόν τον τομέα για να αποτρέψουμε μελλοντικές παλινδρομήσεις.

2. 1 Σεπτεμβρίου 2026 στις 9:42 π.μ. UTCpostmortem

   Τι συνέβη; Μια αλλαγή ρύθμισης προκάλεσε την αποτυχία των συναλλαγών Google Pay. Η αλλαγή έγινε για τον καθαρισμό των ανακολουθιών διαμόρφωσης μεταξύ των περιβαλλόντων. Το Google Pay είχε έμμεση εξάρτηση από μία από αυτές τις ρυθμίσεις. Πριν προχωρήσουμε την κυκλοφορία σε μια νέα ανάπτυξη, πάντα τρέχουμε αυτοματοποιημένες συναλλαγές δοκιμών. Ωστόσο, το Google Pay δεν δοκιμάζεται αυτόματα αλλά μόνο ανά ανάγκη, καθώς είναι μια περίπλοκη μέθοδος πληρωμής και δύσκολο να αυτοματοποιηθεί. Δεδομένου ότι αυτή η ανάπτυξη δεν περιελάμβανε αλλαγές στο Google Pay και δεν αναμενόταν να το επηρεάσει, δεν έγινε καμία πρόσθετη προσπάθεια για να δοκιμαστεί το Google Pay. Γιατί αργήσαμε να το εντοπίσουμε; Το Google Pay έχει σημαντικά λιγότερη κίνηση από άλλες μεθόδους πληρωμής και έτσι χτυπά κάτω από το όριο ειδοποίησης, και εξαιτίας αυτού αργήσαμε να προσέξουμε το ζήτημα. Προληπτικές ενέργειες * Έχουμε επανεξετάσει τις υπόλοιπες ρυθμίσεις για παρόμοιες σιωπηρές εξαρτήσεις και δεν βρέθηκε καμία. * Έχουμε βελτιώσει την ειδοποίησή μας \ (δείτε παρακάτω\). Βελτιωμένη προειδοποίηση Έχουμε βελτιώσει την ειδοποίησή μας για να πιάσουμε αποτυχίες που επηρεάζουν ένα μικρό μέρος της κυκλοφορίας. Για να αποφύγουμε ένα σημαντικό αριθμό ψευδών θετικών, έχουμε κάνει ενδελεχή ανάλυση και backtests για να δημιουργήσουμε προηγμένες ειδοποιήσεις που ελέγχουν για να επιβεβαιώσουν ότι τα σφάλματα δεν συμβαίνουν μόνο σε μεμονωμένους εμπορικούς λογαριασμούς ή για μεμονωμένους εκδότες. Αυτό μας επιτρέπει να προειδοποιούμαστε ανά μέθοδο πληρωμής — ακόμη και για μικρότερες όπως το Google Pay — αλλά και ανά τύπο συναλλαγής — ακόμη και για μικρότερες όπως οι πιστώσεις. Με αυτές τις νέες προειδοποιήσεις στη θέση τους θα είχαμε ειδοποιηθεί για την διακοπή μέσα σε 15 λεπτά το πολύ.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 6 Ιουλίου 2026 στις 12:17 μ.μ. UTCinvestigating

   Αυτή τη στιγμή ερευνούμε το θέμα. Η επεξεργασία συναλλαγών Gateway δεν επηρεάζεται.

2. 6 Ιουλίου 2026 στις 12:54 μ.μ. UTCmonitoring

   Συναλλαγές διαθέσιμες και πάλι στο Merchant API Το θέμα αυτό έχει επιλυθεί. Οι συναλλαγές είναι πλέον διαθέσιμες στο Merchant API και η υπηρεσία λειτουργεί κανονικά. Η επεξεργασία συναλλαγών Gateway δεν επηρεάστηκε σε κανένα σημείο. Ζητάμε συγγνώμη για κάθε ενόχληση.

3. 6 Ιουλίου 2026 στις 1:02 μ.μ. UTCresolved

   Το περιστατικό λύθηκε.

Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.

1. 4 Φεβρουαρίου 2026 στις 12:21 μ.μ. UTCresolved

   The /settlements endpoint in Merchant API was unavailable and returning 500 between 2026-02-03T08:55Z - 2026-02-03T09:15Z. The incident was resolved with no lingering issues.

1. 22 Δεκεμβρίου 2025 στις 8:55 π.μ. UTCinvestigating

   Starting 07:48 UTC we are seeing timeouts and general connectivity issues towards both the primary and secondary data centres of our upstream provider. Authorization success rates fluctuate between ~50 % and 100 % on the primary data centre and worse on the secondary. We are in contact with our upstream provider who have confirmed that they are having a wider incident impacting several of their systems. We will update you as soon as we have more information to share, and no later than in 1 hour. Authorizations and voids are affected. Captures, capture refunds, debits and debit refunds are unaffected. Mastercard credits are affected. Visa credits are unaffected.

2. 22 Δεκεμβρίου 2025 στις 9:45 π.μ. UTCmonitoring

   We saw fluctuations of success rates between 75 % and 100 % until 9:23 UTC and have seen no connectivity errors since. We continue to monitor the situation.

3. 22 Δεκεμβρίου 2025 στις 10:57 π.μ. UTCresolved

   We are closing this incident as no error has been observed since 9:23 UTC and since our upstream provider confirms that service has been restored. An average failure rate of 8.98 % was observed between 07:48:49 UTC and 09:23:30 UTC (of when the first and last error occurred). Authorizations and voids were affected. Captures, capture refunds, debits and debit refunds were unaffected. Mastercard credits were affected. Visa credits were unaffected.

1. 25 Απριλίου 2025 στις 7:15 π.μ. UTCresolved

   Starting April 11th 11:00 CEST, approximately 8% of subsequent-in-series Mastercard transactions were rejected with status code 40416 by specific issuers. For the affected issuers, a significant percentage of subsequent-in-series are rejected. No Visa transactions nor non-series Mastercard transactions were affected by this. On April 14th, the problem was noticed, and investigations have been ongoing together with Mastercard, an affected issuer, and our upstream provider. On April 17th, the problem was confirmed to be an issue with our upstream provider. On April 18th 22:00 CEST, our upstream provider released a fix. On April 19th, we confirmed that the fix was working for PAN-initiated transactions, but the problem still persisted on token-initiated subsequent-in-series Mastercard authorizations. We continued to work with our upstream provider to get this fully fixed. On April 24th 12:00 CEST, we managed to implement a workaround to mitigate the problems for token-initiated subsequent-in-series Mastercard authorizations. This fully resolved the impact of this incident. We continue to work with our upstream provider to coordinate the removal of the workaround when a fix is in place. Partners and merchants are recommended to retry both PAN- and token-initiated subsequent-in-series Mastercard authorizations that failed with 40416.

1. 3 Μαρτίου 2025 στις 9:28 π.μ. UTCresolved

   On the night of 2025-03-02 we saw timeouts and connectivity issues towards our upstream provider OmniPay. Mostly we’ve been able to route traffic to a healthy data-center, but between 2025-03-02T05:27Z and 2025-03-02T05:35Z, all data-centers were not responding. The incident was resolved within 8 minutes, and we have not seen any further connectivity issues since then. We are actively working with our upstream provider to determine how similar issues can be prevented in the future when they do network updates.

1. 20 Νοεμβρίου 2024 στις 2:03 μ.μ. UTCresolved

   Between 2024-11-20T02:27:09Z and 2024-11-20T02:40:09Z we experienced connectivity issues towards our upstream provider, reaching up to 26% error rate at the peak of the incident. Only a few transactions were affected but we are posting this update for transparency. The incident was resolved within 14 minutes, and we have not seen any further connectivity issues since then.

1. 31 Οκτωβρίου 2024 στις 4:09 π.μ. UTCinvestigating

   Due to a service provider we are experiencing degraded performance in the Merchant API. This does not affect our ability to process transactions.

2. 8 Νοεμβρίου 2024 στις 9:16 π.μ. UTCresolved

   After taking remedial action, performance of the degraded components has returned to normal during the course of the week. Additionally, we have taken measures to improve visibility into the affected systems in order to strengthen our infrastructure and prevent similar events in the future. We are in contact with the service provider to continue to investigate the root cause of the issue and explore additional measures to increase the robustness of our systems.

1. 4 Οκτωβρίου 2024 στις 11:27 π.μ. UTCresolved

   At 2024-10-03T11:26Z a warning triggered an investigation of an increase in the error rate for authorizations. The investigation showed that we were receiving a subtle amount of declines from issuers reasoned with “format error” starting 2024-10-02T05:45Z. These rejects are normal and have numerous times shown issuers to be misbehaving – which is why we have a non-zero threshold that must be met before we become aware. Together with the “format error” must be an identification of the malformatted field. This led us to identify an issue with an update we applied during 2024-10-02 resulting in AUD authorizations to be consistently declined in the time span 2024-10-02T19:55Z - 2024-10-03T17:05Z. This, however, only explained a minority of the declines. The remaining declines indicated a field that we have never populated, however, since our investigation indicated it to be an issue across multiple issuing banks, we quickly implemented a change to populate the field. Both a fix for AUD and for populating the extra field were deployed, and they turned out to fix both issues. The field population issue caused sporadic declines in the time span 2024-10-02T05:45Z - 2024-10-03T19:08Z. In summary, the two issues above caused an average 0.15 percentage point drop in approval rate in the time span 2024-10-02T05:45Z - 2024-10-03T19:08Z. We will work hard to identify how the AUD error could happen and will ensure to introduce checks to avoid a similar error to happen in the future. We will also try to work with issuers to identify the cause of the rejects based on the previously unpopulated field.

1. 12 Σεπτεμβρίου 2024 στις 4:42 π.μ. UTCinvestigating

   Since 2024-09-12T03.39Z we have observed connectivity issues towards an upstream provider. We have reached out and are investigating with the provider.

2. 12 Σεπτεμβρίου 2024 στις 5:05 π.μ. UTCinvestigating

   Our upstream provider has confirmed and is aware of a connectivity issue. Currently almost all authorizations, voids and Mastercard credits are impacted.

3. 12 Σεπτεμβρίου 2024 στις 6:34 π.μ. UTCidentified

   We have identified that the issue is with our upstream provider. We have attempted mitigating actions but unfortunately with very limited impact. We are still seeing very low approval rates that fluctuates approximately from 0 % to 15 %. Our upstream provider is trying to resolve the connectivity issue.

4. 12 Σεπτεμβρίου 2024 στις 8:41 π.μ. UTCidentified

   Unfortunately, we still see very high failure rates on authorizations. Our upstream provider is still trying to mitigate this critical incident. We are seeing examples where amounts are being reserved on cardholders' accounts despite the authorization failing. Therefore we recommend that subsequent-in-series recurring and unscheduled (e.g. subscriptions) are not attempted until after this incident is resolved. Furthermore, we are exploring options to potentially release these reservations.

5. 12 Σεπτεμβρίου 2024 στις 9:06 π.μ. UTCidentified

   We saw an improvement in approval for a short period of time from around 08:47 UTC to 08:59 UTC. Unfortunately, this has worsened again, and we are back on approval rates below 15 %.

6. 12 Σεπτεμβρίου 2024 στις 10:47 π.μ. UTCidentified

   We are awaiting further communication from our provider. We are actively monitoring the situation. There is no ETA for when this issue is resolved. We will update as soon as we know more.

7. 12 Σεπτεμβρίου 2024 στις 11:51 π.μ. UTCidentified

   We are again seeing an improvement in approval rate starting 11:46 UTC and are continuing to monitor the situation as we previously have seen such improvement temporarily.

8. 12 Σεπτεμβρίου 2024 στις 12:04 μ.μ. UTCmonitoring

   We have seen a significant increase in approval rates and the connectivity is now back to normal. Due to the severity of this issue and the previous sudden change in approval rate we are still actively monitoring this situation.

9. 12 Σεπτεμβρίου 2024 στις 8:39 μ.μ. UTCresolved

   Our upstream partner has resolved their issue and our monitoring shows that the connection has been stable and without problems since our last update. We will investigate mitigating actions and the root cause of this incident and will publish a postmortem once we have a complete overview from the upstream partner. To summarize, we saw on average around 90 % of authorizations impacted during the time period 2024-09-12T03:30 - 2024-09-12T11:45 UTC. All impacted authorizations were responded with status code 50000 by our gateway API for transaction processing. We sincerely regret the inconvenience this serious incident has caused!

10. 2 Οκτωβρίου 2024 στις 12:35 μ.μ. UTCpostmortem

    ## Introduction As a follow-up on the incident on 2024-09-12, this is our findings from analyzing the sequence of events. Again, we sincerely apologize for the disruption, downtime and inconvenience. ## The issue During the timespan 2024-09-12T03:30Z - 2024-09-12T11:45Z, we experienced connection failures and timeouts to an upstream provider. This affected live transactions: authorizations and voids for both Visa and Mastercard as well as credits for Mastercard. After confirming that the issue was entirely external, and that we were thus unable to mitigate it ourselves, we reached out to our provider, opened an issue with them and escalated immediately. Our automated failover moved traffic to the provider’s secondary data center when the first transactions failed towards their primary data center. While this is normally sufficient to mitigate small hiccups, this showed that the secondary data center was also affected by the incident. No transactions towards the second data center were approved and we therefore decided to only target the primary data center as we saw upwards of 10-15 % of the transactions going through there. We periodically sent small bursts of transactions to the secondary data center to monitor availability. There was a small window of 10 minutes where transactions were processed through the secondary data center before it became dysfunctional again. We contacted our provider to inform them that the secondary data center had been in a working state. After approximately 8 hours, our provider was able to mitigate the issue in both data centers, which resolved the incident, and approval rates went back to normal. For a short period of time during the incident our services were exhausted which exacerbated the condition. This resulted in the transaction gateway responding HTTP 504 Gateway Timeout which affected all transaction types. We are sincerely sorry for the inconvenience and we are working to prevent this from happening in the future. ## Remediation While we do not have any direct involvement in the incident at our provider we have learned a thing or two to take with us: 1. We will investigate the possibility to void authorizations with status code 50000 such that clients can void these transactions to ensure the state at upstream is the same representation as at the client. At the same time we will highlight that the transaction representation in the Merchant API will help in this regard to understand the state of a transaction. For critical transactions \(e.g. credits or “large enough” authorizations\) we recommend to use the [Merchant API](https://developer.clearhaus.com) to check the state of a transaction when you did not receive a response \(no matter if the failure happened on our end, somewhere in the middle, or on your end\). 2. To avoid HTTP 504 responses, we will go over our resource allocation and adjust to have a better tolerance. In addition we will improve alerting on our application load balancer to highlight when our internal systems are responding slowly and thus indicating a resource exhaustion in our system. 3. Investigate if we can improve upon the automated failover mechanism to balance traffic so we do not need to manually send small bursts to test availability. This could potentially have made us earlier aware when the secondary came up both for midways in the incident and in the very end of the incident. Already implemented improvements: 1. Extend internal dashboards to give improved visibility in the continuous success rates on the individual upstream data centers.

1. 30 Αυγούστου 2024 στις 1:34 μ.μ. UTCidentified

   Some captures and refunds for card numbers starting with 457153 and tokens that are generated from such card numbers failed clearing this night even though Clearhaus accepted the transactions. There are two consequences for such impacted captures and refunds: 1. They do not yet appear on cardholders’ bank accounts; this is especially unfortunate for refunds. 2. They are not yet being settled on merchants’ accounts; this is especially unfortunate for captures. No action from you is required or recommended; this incident is for your information. Please notice that authorizations on both impacted cards and tokens appear to be functioning normally. Though, 3-D Secure authentications are also impacted. Transactions on any other card are not impacted! Visa has acknowledged the issue and is working with the bank that issues these cards and tokens to ensure that clearings can again go through. We await further updates from Visa and also await the issuer to resolve the problem and do expect these clearings to eventually go through. We will keep you updated whenever there is news to share. We intend to update you no later than 2024-09-03T12:00Z.

2. 30 Αυγούστου 2024 στις 7:46 μ.μ. UTCidentified

   Visa has identified that the BINs involved in clearing failures are: 414865, 432921, 435786, 443254, 449269, 451143, 451349, 455853, 455854, 457101, 460312, 457154, 461061, 462003, 464254, 479870, 481686, 494109, 457153, and 457154.

3. 2 Σεπτεμβρίου 2024 στις 8:18 π.μ. UTCresolved

   The cause of this incident was that an issuer/Visa disabled the impacted BINs although they were actively being used. Luckily, issuer/Visa succeeded in reenabling the impacted BINs over the weekend. This has propagated through systems, and made both new transactions and previously impacted transactions able to clear. After careful analysis we can confirm that all previously impacted transactions are now cleared successfully and they are also included in settlements.

1. 2 Αυγούστου 2024 στις 7:11 π.μ. UTCidentified

   At 2024-08-02T05:59Z we started noticing consistent failures in communication with Visa for both credit and debit transactions; neither Mastercard nor other Visa transaction types (e.g. authorizations and captures) are impacted. Visa has announced a service disruption, and we will keep you updated as we get information to share from Visa.

2. 2 Αυγούστου 2024 στις 7:27 π.μ. UTCidentified

   While we are awaiting an update from Visa we have to the best of our ability confirmed that transactions are not being processed upstream; thus, retrying a transaction is not expected to result in multiple processing if retried when this issue is resolved. However, we will advise you to be careful especially when retrying credit transactions.

3. 2 Αυγούστου 2024 στις 8:45 π.μ. UTCmonitoring

   Visa has announced that the service disruption is fully mitigated and we can positively confirm that the impacted Visa transactions are now being processed again. We will continue to monitor the error rates.

4. 2 Αυγούστου 2024 στις 9:21 π.μ. UTCmonitoring

   Our monitoring shows all Visa transactions are functional, and we therefore close this incident. The time window of failures lasted from 2024-08-02T05:59Z till 2024-08-02T08:13Z.

5. 2 Αυγούστου 2024 στις 9:21 π.μ. UTCresolved

   This incident has been resolved.

1. 25 Απριλίου 2024 στις 11:03 π.μ. UTCinvestigating

   We are currently seeing an increase in declined Visa Authorizations and are currently investigating.

2. 25 Απριλίου 2024 στις 11:52 π.μ. UTCmonitoring

   The issue started 2024-04-25T10:35:00Z and ended 2024-04-25T11:48:00Z when we applied a hotfix.

3. 25 Απριλίου 2024 στις 4:51 μ.μ. UTCmonitoring

   A significant amount of the authorizations that we responded with 50000 was approved upstream. We are currently attempting to void these approved authorizations and expect this to be completed within the next few hours. We will update this incident when the voids are completed.

4. 25 Απριλίου 2024 στις 6:23 μ.μ. UTCmonitoring

   All impacted authorizations have now been voided. These voids are visible via my.clearhaus.com. We expect to update and close this incident when we have tested and applied a proper solution in the coming days.

5. 26 Απριλίου 2024 στις 11:13 π.μ. UTCresolved

   The hotfix has been replaced with a proper solution that has been monitored for the last couple of hours. We are hereby closing this incident.

1. 12 Ιανουαρίου 2024 στις 9:57 π.μ. UTCidentified

   Since 2024-01-08 references have been missing on some captures, refunds and voids in the Merchant API and on my.clearhaus.com. We apologize for the inconvenience and are doing our best to quickly bring them back. Transaction processing is not affected.

2. 15 Ιανουαρίου 2024 στις 2:05 μ.μ. UTCresolved

   The missing references have been brought back. The affected captures, refunds and voids are in the time span 2024-01-08T12:33:47Z - 2024-01-13T10:16:38Z.