58 Moengage incidents · Σεπτέμβριος 2023 — official updates, affected components, duration and resolution details.
Αντιμετωπίζουμε μια διακοπή για σύνδεση ταμπλό και εγγραφές μέσω Google Auth σε όλους τους πίνακες. Εντοπίσαμε το θέμα και η ομάδα εργάζεται ενεργά για να το διορθώσει.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Βιώσαμε υποβαθμισμένες επιδόσεις κατά την επεξεργασία στατιστικών για την εμπλοκή της εκστρατείας, συμπεριλαμβανομένων των εντυπώσεων, ανοίγει, κλικ, και αρέσει. Το ζήτημα έχει επιλυθεί και παρακολουθούμε ενεργά το σύστημα. Ωστόσο, καθυστερήσεις άνω των 30 λεπτών μπορούν να συνεχιστούν για κάποιο χρονικό διάστημα καθώς η επεξεργασία επανέρχεται στο κανονικό. Η αποστολή της εκστρατείας και οι στατιστικές παράδοσης παραμένουν ανεπηρέαστες. Ζητάμε συγγνώμη για την ταλαιπωρία και εκτιμούμε την υπομονή σας.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Το Push API αυτή τη στιγμή βιώνει downtime σε όλα τα κέντρα δεδομένων μας, με αποτέλεσμα να έχουν αποτύχει ή καθυστερήσει αιτήματα. Η ομάδα μας ερευνά ενεργά το θέμα και εργάζεται για να αποκαταστήσει την υπηρεσία με ασφάλεια. Θα συνεχίσουμε την ενημέρωση καθώς αποσφαλματώνουμε και περισσότερες πληροφορίες γίνονται διαθέσιμες. Ζητάμε συγγνώμη για την αναστάτωση και εκτιμούμε την υπομονή σας.
Campaigns v1 API βιώνει επίσης την ίδια downtime σε όλα τα κέντρα δεδομένων μας, με αποτέλεσμα την αποτυχία ή καθυστερημένα αιτήματα.
Σας συνιστούμε να δημιουργήσετε εκστρατείες από το ταμπλό MoEngage στο μεταξύ. Οι εκστρατείες που ήδη δημιουργούνται και εκτελούνται δεν επηρεάζονται. Θα μοιραστούμε μια ενημέρωση μόλις έχουμε περισσότερες πληροφορίες. Ζητάμε συγγνώμη για την αναστάτωση.
Αυτή τη στιγμή βιώνουμε υποβαθμισμένες υπηρεσίες με τις καμπάνιες API V1 για τη δημιουργία εκστρατειών. Αιτήματα για τη δημιουργία εκστρατειών μέσω αυτού του API μπορεί να αποτύχει ή να απορριφθεί. Σας συνιστούμε να δημιουργήσετε εκστρατείες από το ταμπλό MoEngage στο μεταξύ. Οι εκστρατείες που ήδη δημιουργούνται και εκτελούνται δεν επηρεάζονται. Θα μοιραστούμε μια ενημέρωση μόλις έχουμε περισσότερες πληροφορίες. Ζητάμε συγγνώμη για την αναστάτωση.
Το Push API για τον μεμονωμένο χρήστη στέλνει έχει αποκατασταθεί για όλους τους χρήστες. Η ομάδα μας συνεχίζει να εργάζεται για την αποκατάσταση των υπόλοιπων επηρεαζόμενων υπηρεσιών. Θα παρέχουμε περαιτέρω ενημερώσεις, καθώς περισσότερες πληροφορίες θα είναι διαθέσιμες. Σας ευχαριστώ για την υπομονή σας.
Το Push API για όλους τους χρήστες και το Custom-Segment στέλνει έχει αποκατασταθεί. Η ομάδα μας συνεχίζει να εργάζεται για την αποκατάσταση των Campaigns v1 API. Οι υπάρχουσες εκστρατείες που ήδη δημιουργούνται και τρέχουν παραμένουν ανεπηρέαστες. Θα παρέχουμε περαιτέρω ενημερώσεις, καθώς περισσότερες πληροφορίες θα είναι διαθέσιμες. Σας ευχαριστώ για την υπομονή σας.
Το Campaigns v1 API έχει αποκατασταθεί σε κανονική λειτουργία, και το περιστατικό έχει πλέον επιλυθεί. Σας ευχαριστώ για την υπομονή σας.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Αυτή τη στιγμή βιώνουμε ένα ζήτημα που επηρεάζει τη διαθεσιμότητα της ιστοσελίδας MoEngage, συμπεριλαμβανομένης της βάσης τεκμηρίωσης και γνώσης μας στο https://moengage.com/docs. Η ομάδα μας ερευνά ενεργά και εργάζεται για την αποκατάσταση της πρόσβασης το συντομότερο δυνατόν. Το ταμπλό MoEngage, APIs, SDKs, και η παράδοση εκστρατεία δεν επηρεάζονται.
Συνεχίζουμε να διερευνούμε το ζήτημα.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Αυτή τη στιγμή διερευνούμε ένα θέμα που επηρεάζει τη σελίδα της εκστρατείας στον κατάλογο του ταμπλό. Μερικοί χρήστες μπορεί να δουν διαλείποντα σφάλματα κατά τη φόρτωση ή την προβολή εκστρατειών τους λίστα. Η ομάδα μηχανικών μας εργάζεται ενεργά πάνω σε αυτό, και θα μοιραστούμε την επόμενη ενημέρωση μέσα σε 30 λεπτά ή νωρίτερα καθώς θα γίνονται διαθέσιμες περισσότερες πληροφορίες.
Παρακολουθούμε ενεργά μετά από μια δόση.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Περίληψη Μεταξύ 2026-08-17 στις 19:55 IST και 2026-08-18 στις 12:00 IST, ένα υποσύνολο των αιτημάτων που έγιναν στο Inform API μπορεί να μην έχουν παραδοθεί με επιτυχία. Επηρεασμένα αιτήματα έλαβαν μια απάντηση HTTP 200 OK, αναφέροντας επιτυχία, αλλά τα αντίστοιχα μηνύματα δεν εστάλησαν ποτέ. Το ζήτημα έχει επιλυθεί πλήρως από το 2026-08-18 στις 12:00 IST. Επιπτώσεις - Οι πελάτες που χρησιμοποιούν το Inform API δρομολογήθηκε μέσω DC-03 κατά τη διάρκεια του επηρεασμένου παραθύρου μπορεί να έχουν επηρεαστεί - Επηρεασμένα αιτήματα φάνηκε επιτυχής από την πλευρά του πελάτη, αλλά δεν εξετάστηκαν - Ως αποτέλεσμα, δεν παραδόθηκαν μηνύματα σχετικά με τα αιτήματα αυτά - Δεν μπορούμε να ξαναπροσπαθήσουμε ή να επαναλάβουμε αυτόματα τα επηρεαζόμενα αιτήματα Τι Κάναμε Προσδιορίσαμε το θέμα κατά τη διάρκεια μιας καθημερινής εσωτερικής ενημέρωσης δρομολόγησης και αμέσως γύρισε πίσω την αλλαγή. Πλήρης υπηρεσία αποκαταστάθηκε στις 2026-08-18 στις 12:00 IST. Τι Πρέπει να Κάνετε Εάν πιστεύετε ότι η ενσωμάτωσή σας επηρεάστηκε κατά τη διάρκεια αυτού του παραθύρου, σας συνιστούμε: - Επανεξέταση των αρχείων καταγραφής σας για αιτήματα που έγιναν μεταξύ 2026-08-17 19:55 IST και 2026-08-18 12:00 IST - Προσδιορισμός τυχόν μηνυμάτων που δεν παραδόθηκαν όπως αναμενόταν - Επαναποστολή αυτών των αιτημάτων χειροκίνητα αν η παράδοση εξακολουθεί να απαιτείται Λυπούμαστε ειλικρινά για την ταλαιπωρία που μπορεί να προκάλεσε αυτό. Εάν έχετε οποιεσδήποτε ερωτήσεις ή χρειάζεστε βοήθεια για τον εντοπισμό επηρεαζόμενων αιτημάτων, παρακαλούμε επικοινωνήστε με την ομάδα υποστήριξης μας.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Επί του παρόντος βιώνουμε υποβαθμισμένες επιδόσεις σε πολλαπλές υπηρεσίες. Η ομάδα μηχανικών μας ερευνά ενεργά το θέμα και εργάζεται για την αποκατάσταση της πλήρους εξυπηρέτησης το συντομότερο δυνατόν. Τι Γνωρίζουμε Μέχρι στιγμής Πολλαπλές υπηρεσίες βιώνουν υποβαθμισμένες επιδόσεις Τα εξερχόμενα κανάλια έχουν ιδιαίτερη επίδραση και ορισμένοι χρήστες ενδέχεται να παρουσιάσουν καθυστερήσεις ή αποτυχίες με την αποστολή των εξερχόμενων μηνυμάτων Η ομάδα μας έχει εντοπίσει ένα πιθανό πρόβλημα με την υποδομή μας και ερευνά ενεργά Τι Κάνουμε Η ομάδα μας ερευνά ενεργά τη βασική αιτία και εργάζεται για την αποκατάσταση της πλήρους υπηρεσίας. Θα μοιραστούμε περισσότερες λεπτομέρειες καθώς θα είναι διαθέσιμες. Θα παρέχουμε την επόμενη ενημέρωση μας μέσα σε 30 λεπτά. Λυπούμαστε ειλικρινά για την αναστάτωση που μπορεί να προκαλέσει στις επιχειρήσεις σας. Σας ευχαριστώ για την υπομονή και την κατανόησή σας, ενώ εργαζόμαστε για την επίλυση αυτού.
Αναγνωρίσαμε ότι οι σέρβερ μας αντιμετωπίζουν καθυστερήσεις στην κλιμάκωση των υποδομών μας στο cloud. Αυτό προκαλεί την αποστολή εκστρατείας να είναι σημαντικά πιο αργή από το κανονικό ως αποτέλεσμα. Η ομάδα μηχανικών μας εργάζεται ενεργά πάνω σε ένα ψήφισμα και θα σας παρέχουμε μια νέα ενημέρωση σύντομα.
Οι καμπάνιες και οι ροές που ενεργοποιούνται από γεγονότα βιώνουν επίσης υποβαθμισμένες επιδόσεις. Η ομάδα μας συνεχίζει να εργάζεται για ένα ψήφισμα και θα παρέχουμε μια περαιτέρω ενημέρωση σύντομα.
Η ομάδα μηχανικών μας έχει εφαρμόσει μια προσωρινή εργασία που έχει βοηθήσει στη βελτίωση των επιδόσεων. Η αποστολή εκστρατείας έχει επαναληφθεί, ωστόσο μπορεί να βιώσετε ακόμα πιο αργές από τις συνήθεις ταχύτητες παράδοσης, ενώ εμείς συνεχίζουμε να εργαζόμαστε για μια πλήρη ανάλυση. Θα σας δώσουμε μια νέα ενημέρωση σύντομα.
Ο πάροχος της cloud υποδομής μας αντιμετωπίζει επί του παρόντος ζητήματα που επηρεάζουν τις υπηρεσίες μας. Είμαστε σε ενεργή επικοινωνία μαζί τους και συνεργαζόμαστε για την επίτευξη πλήρους ανάκαμψης. Βλέπουμε σταδιακή βελτίωση και οι υπηρεσίες αρχίζουν να ανακάμπτουν, ωστόσο αυτό μπορεί να πάρει κάποιο χρόνο. Εκτιμούμε τη συνεχή υπομονή σας, ενώ εργαζόμαστε για την πλήρη επίλυση. Θα σας δώσουμε μια νέα ενημέρωση σύντομα.
Είμαστε στην ευχάριστη θέση να επιβεβαιώσουμε ότι η ομάδα μηχανικών μας έχει εντοπίσει τη βασική αιτία και έχει εφαρμόσει με επιτυχία μια διόρθωση. Οι υποδομές μας ανέκαμψαν γρήγορα και βλέπουμε ισχυρή βελτίωση σε όλες τις πληγείσες υπηρεσίες. Οι υπηρεσίες έχουν επιστρέψει στο κανονικό και είμαστε στη διαδικασία εκκαθάρισης των υπολοίπων backlog. Θα δημοσιεύσουμε μια τελική ενημέρωση μόλις το backlog έχει εκκαθαριστεί πλήρως. Σας ευχαριστώ για την υπομονή και την κατανόησή σας σε αυτό το περιστατικό.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Αυτή τη στιγμή ερευνούμε το θέμα που σχετίζεται με τις ακόλουθες υπηρεσίες στην DC01: - Ενημέρωση - Εκστρατείες και ροή που ενεργοποιήθηκαν
Συνεχίζουμε να ερευνούμε αυτό το ζήτημα.
Συνεχίζουμε να εργαζόμαστε για τον μετριασμό.
Αυτή τη στιγμή παρακολουθούμε τις υπηρεσίες
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Between 05:00 UTC and 08:35 UTC, the Branded Email Link Click Domain service in the DC-02 region experienced an extended period of performance degradation, followed by a brief period of unavailability. Impact: 05:00 UTC – 08:00 UTC: The service operated in a degraded state. Some users may have experienced delayed responses or intermittent timeouts when clicking branded email links for a limited number of affected brands. 08:00 UTC – 08:35 UTC: The service was unavailable while our engineering team performed recovery actions. Normal service was fully restored at 08:35 UTC. Root Cause: The degradation was caused by an unexpected and significant spike in request volume. This sudden increase in traffic placed excessive load on the backend database, resulting in slower query processing and degraded service performance. Resolution: Our monitoring systems detected the degradation and alerted the engineering team. To restore stability and support the increased traffic volume, the team scaled the underlying database infrastructure and completed recovery procedures. After the infrastructure changes were completed, service availability and performance returned to normal at 08:35 UTC. Current Status The issue has been resolved, and the Branded Email Link Click Domain service is operating normally in the DC-02 region. We apologize for the disruption and any inconvenience this may have caused.
On June 1, 2026, we experienced a major incident that affected the processing of email delivery status events in two of our data centers; Dashboard 02 and 04. During this incident, some delivery-related events — including delivered, bounce, and spam status updates — were not processed correctly. As a result, customers may have seen incomplete or under-reported delivery statistics in dashboards and reports for campaigns sent during the affected period. We want to emphasize that actual email sending and delivery to recipients were not impacted. The issue was limited to the reporting and processing of delivery status events. The incident was triggered by a recent internal system update that changed how delivery events are grouped and processed. In some environments, this caused certain event batches to fail processing. Our monitoring did not alert us as quickly as expected, which delayed detection and response. We sincerely apologize for the impact this had on your visibility into campaign performance and for the delay in identifying the issue. Our teams have taken corrective action to resolve the issue and are reviewing the affected data. We are also strengthening our monitoring, validation, and release safeguards to help prevent similar incidents in the future. We understand how important accurate and timely delivery reporting is to your business, and we regret the disruption this caused. Thank you for your patience and understanding while we worked through this incident.
We are experiencing delay in our user and event ingestion pipeline. The issue started around 10am IST on 14-May. This impacts all the ingestion to be delayed resulting in stale data availability in downstream systems. The team has identified the issue and released a patch for the fix. The current delay is ~3hours.
The fix has been implemented and the lag is coming down. Current lag is ~3hours. The team is monitoring the systems
We are continuously monitoring the situation. The lag is slowly going down as we have provisioned more infrastructure. Current lag is ~2.5 hours.
The lag is cleared and latency is within our SLA threshold. The team will take corrective actions as part of the incident post mortem.
We observed delay in data processing for DC04, subsequently Issue was identified. We are actively monitoring data processing lag for DC 04.
This incident has been resolved.
There was a degradation in our querying service (Segmentation). The issue started at 3:00 UTC and is resolved now. We are now rerunning the failed campaigns. All delayed campaigns should be sent out in the next 45-60 minutes.
This incident has been resolved.
We experienced a lag in our data ingestion pipeline between 8:00 AM UTC and 9:00 AM UTC due to an underlying system issue. A hotfix was deployed at approximately 8:45 AM UTC to address the problem. The system is now operating normally and we are actively monitoring it. During the incident window, some processing lag accumulated, which is currently being cleared. We expect the backlog to be fully processed within the next two hours. We apologize for the inconvenience caused and appreciate your patience while we worked to resolve the issue.
This incident has been resolved.
There was a degradation identified on DC03 Data Ingestion pipeline since 9th Apr, 10:30 AM IST. This was due to an infra/instance type change which was deployed. This change seemed to be unstable and hence has been reverted now. It resulted in degraded data processing throughput resulting in lag. Duration of the incident: 10:30am IST - 01:45pm IST (~3.15 hours) Impact: The delay in data processing has impact on availability of user updates and events in segmentation. it also had an impact on Event triggered campaigns and flows due to the delay. Resolution: The lag has been recovered as of 01:45pm IST. There is no data loss. Team is currently monitoring the systems and doing a deeper post-mortem to avoid such occurrence in future.
We are currently experiencing degraded performance in our Trigger-Based Flows system. This is causing delays of up to 45 minutes in user entry and movement within Trigger-Based Flows. Please note that Event-Triggered Campaigns remain unaffected. Our team has fixed the issue and is actively monitoring the system. We apologize for the inconvenience and appreciate your patience as we work to resolve this.
This incident has been resolved. The lag was observed from 06:45 UTC (12:15pm IST) to 11:30 UTC (05:00pm IST).
There is a delay of close to 45 min in DC-03 starting 13:00 UTC of users and events in our ingestion pipeline. We expect the issue to be resolved in another 45 min.
The issue is resolved as of now and ingestion pipeline latency seems stable. However, the technical team is root causing the issue to deploy a permanent fix. This data ingestion delay had an impact on Smart trigger campaigns and Flows, as it consumes the data from the ingestion pipeline and apply trigger/flows conditions. Delay of around 45 min lasted between 24-March 13:00 UTC to 15:40 UTC. There were delay observed later as well on 24-March 20:30 UTC to 21:30 UTC.
Team is currently working on investigating following impacted services in DC03 - Smart Trigger & Flow Campaigns We apologize for inconvenience this may have caused and appreciate your patience. For any queries or immediate concerns, please do not hesitate to contact our support team.
We are continuing to investigate this issue.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
This incident has been resolved.
We are currently experiencing a delay in the data ingestion pipeline for following services: 1. Event Triggered Campaigns and Flows 2. Inbound Campaigns (In-App, OSM, WebP) 3. Recent Activity on User Profile We have identified the issue and mitigation has been deployed and lag is being monitored closely by teams.
This incident has been resolved.
All Campaigns Page is not loading since 10:35 UTC on DC-02. A fix has been implemented and issue should be resolved in the next 10 minutes.
We are continuing to monitor for any further issues.
The incident has been resolved. The issue lasted for 30 min from 10:35 to 11:05 UTC.
