61 Signalfx Us1 incidents · Μάιος 2025 — official updates, affected components, duration and resolution details.
Ερευνούμε μια μεγάλη απώλεια του βοηθού του Splunk Observability AI.
Το ζήτημα έχει αναγνωριστεί ως διακοπή του Azure OpenAI και προχωρούμε σε μια έρευνα.
Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.
Η φάση παρακολούθησης ολοκληρώθηκε. Το θέμα έχει επιλυθεί.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Από 08/25/2026, 11:38AM PDT, μια υποβάθμιση στην απόδοση του αγωγού επεξεργασίας ιχνοστοιχείων Splunk APM προκαλεί την αντιμετώπιση προβλημάτων MetricSets να καθυστερήσει κατά περισσότερο από πέντε λεπτά. Ως αποτέλεσμα, η εμπειρία APM Αντιμετώπιση προβλημάτων, χάρτες υπηρεσιών και Tag Spotlight δεν έχουν πρόσβαση στα πιο πρόσφατα δεδομένα. Η επεξεργασία των μετρικών για τις επιχειρηματικές ροές εργασίας, οι οποίες εξαρτώνται επίσης από αυτόν τον αγωγό, είναι εξίσου καθυστερημένες. Η λήψη ιχνοστοιχείων δεν επηρεάζεται αυτή τη στιγμή.Το επίπεδο των υπηρεσιών και το επίπεδο των τελικών σημείων παρακολούθησης και οι ανιχνευτές που κατασκευάστηκαν από αυτά δεν επηρεάζονται επίσης.
Συνεχίζουμε να ερευνούμε αυτό το ζήτημα.
Το θέμα έχει εντοπιστεί και υλοποιείται μια λύση.
Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.
Οι ομάδες μας συνεχίζουν να παρακολουθούν την κατάσταση για να εξασφαλίσουν πλήρη αποκατάσταση.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Προβλήματα με τις καταχωρίσεις επεξεργασίας που οδηγούν σε καθυστερημένες κοινοποιήσεις. Αυτή τη στιγμή ερευνούμε το θέμα.
Αυτή τη στιγμή ερευνούμε την καθυστέρηση της ειδοποίησης. Οι πελάτες ενδέχεται να παρουσιάσουν καθυστερήσεις στη λήψη ειδοποιήσεων προειδοποίησης. Εργαζόμαστε ενεργά για την επίλυση αυτού του ζητήματος και θα παρέχουμε ενημερώσεις καθώς σημειώνουμε πρόοδο. Εκτιμούμε την υπομονή σας.
Έχουμε εντοπίσει και επιλύουμε ενεργά το ζήτημα προκαλώντας καθυστερημένες ειδοποιήσεις συναγερμού. Ο καθορισμός έχει εφαρμοστεί και ήδη παρουσιάζει σημαντική βελτίωση στους χρόνους παράδοσης της κοινοποίησης. Ενώ ορισμένες κοινοποιήσεις που είχαν τεθεί σε αναμονή πριν από την αποκατάστασή μας μπορεί ακόμη να βιώσουν μικρές καθυστερήσεις, καθώς το σύστημα φτάνει, νέες κοινοποιήσεις γίνονται κανονικά. Εκτιμούμε την υπομονή σας και θα συνεχίσουμε να παρακολουθούμε στενά την κατάσταση.
Εργαζόμαστε ενεργά για την επίλυση του ζητήματος. Οι πελάτες μπορούν να συνεχίσουν να αντιμετωπίζουν καθυστερήσεις στην παράδοση της κοινοποίησης. Αυτό περιλαμβάνει νέες κοινοποιήσεις, οι οποίες υποβάλλονται σε επεξεργασία πίσω από προηγούμενα γεγονότα στην ουρά αναμονής. Η ομάδα ερευνά ενεργά τη βασική αιτία και εργάζεται για να καθαρίσει το backlog των in-queue ειδοποιήσεων. Ως προσωρινό μέτρο μετριασμού, έχουμε απενεργοποιημένες προεπισκοπήσεις εικόνας σε ειδοποιήσεις για τη βελτίωση της ταχύτητας επεξεργασίας. Οι ειδοποιήσεις θα είναι μόνο κειμένου προς το παρόν. Εκτιμούμε την υπομονή σας και θα παρέχουμε περαιτέρω ενημερώσεις καθώς σημειώνεται πρόοδος.
Έχουμε εφαρμόσει ένα καθορισμό για την αντιμετώπιση των καθυστερήσεων κοινοποίησης. Η παρακολούθησή μας δείχνει σημαντική βελτίωση στους χρόνους παράδοσης των ειδοποιήσεων, και παρακολουθούμε στενά τις επιδόσεις για να διασφαλίσουμε ότι το θέμα έχει επιλυθεί πλήρως. Σας ευχαριστώ για την υπομονή σας καθώς εργαζόμαστε για την αποκατάσταση της πλήρους υπηρεσίας.
Οι καθυστερήσεις παράδοσης της κοινοποίησης έχουν επιλυθεί πλήρως. Όλες οι ειδοποιήσεις σε σειρά αναμονής έχουν επεξεργαστεί και το σύστημα λειτουργεί πλέον κανονικά.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Μια υποβάθμιση των επιδόσεων του αγωγού επεξεργασίας μετρικών Splunk APM προκαλεί καθυστέρηση των συστημάτων παρακολούθησης κατά περισσότερο από πέντε λεπτά. Η λήψη ιχνοστοιχείων δεν επηρεάζεται, αλλά τα ταμπλό υπηρεσίας, καταληκτικού σημείου και ροής εργασίας, και άλλα διαγράμματα και ανιχνευτές που κατασκευάζονται από την παρακολούθηση ΜετρικοίSet επηρεάζονται.
Συνεχίζουμε να διερευνούμε το ζήτημα.
Συνεχίζουμε να ερευνούμε αυτό το ζήτημα.
Το θέμα έχει εντοπιστεί και υλοποιείται μια λύση.
Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Η κατάποση σημείου δεδομένων για νέες ή επαναδραστηριοποιημένες μετρικές χρονοσειρές επηρεάστηκε μεταξύ 2:28 PM PST έως 2:47 PM PST. Υπήρξε μερική απώλεια δεδομένων για νέες μετρικές χρονικές σειρές κατά τη διάρκεια εκείνης της χρονικής περιόδου. Αυτή η κατάσταση έχει πλέον ανακτηθεί.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Η λήψη του δείκτη δεδομένων για νέες μετρικές χρονοσειρές επηρεάστηκε μεταξύ 10:37 ΠΜ PST και 10:39 ΠΜ PST. Υπήρξε μερική απώλεια δεδομένων για νέες μετρικές χρονικές σειρές κατά τη διάρκεια εκείνης της χρονικής περιόδου. Αυτή η κατάσταση έχει πλέον ανακτηθεί.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Ξεκινώντας από το 4a PT, ερευνούμε μια σημαντική διακοπή της εφαρμογής Splunk Observability Cloud. Η λήψη δεδομένων δεν επηρεάζεται αυτή τη στιγμή. Θα σας ενημερώσουμε το συντομότερο δυνατόν.
Συνεχίζουμε να διερευνούμε το ζήτημα.
Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.
Το περιστατικό λύθηκε. Παρακαλώ σημειώστε ότι το Splunk Observability Cloud API επηρεάστηκε επίσης κατά τη διάρκεια αυτού του περιστατικού.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Μεταξύ 1a PDT και 2:50a PDT, κάθε ενσωμάτωση GCP που είχε το "Sync όλα (δυναμικά) τα έργα που αναφέρονται - ρύθμιση ενεργοποιημένο είχε μερικά από τα στοιχεία παρακολούθησης Cloud από GCP πέσει. Το θέμα αυτό έχει επιλυθεί. Οι πελάτες μπορεί να δουν κενά στους χάρτες και τους ανιχνευτές που χρησιμοποιούν τις προσβεβλημένες μετρήσεις παρακολούθησης Cloud GCP. Οι μετρήσεις AWS CloudWatch και Azure Monitor δεν επηρεάζονται.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Οι πελάτες μπορεί να βιώσουν καθυστερήσεις στην βλέποντας νεοδημιουργηθεί μετρική χρονολογική σειρά. Η κατάποση του σημείου δεδομένων δεν επηρεάζεται από τις υπάρχουσες χρονοσειρές. Ερευνούμε και θα σας ενημερώσουμε σύντομα.
Το ζήτημα που προκαλεί καθυστερήσεις στη νεοδημιουργηθείσα μετρική χρονοσειρά έχει επιλυθεί. Η μετρική δημιουργία χρονοσειρών λειτουργεί κανονικά. Η κατάποση του σημείου αναφοράς για τις υπάρχουσες χρονοσειρές δεν επηρεάστηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Επιβεβαιώσαμε ότι το ζήτημα που αφορά τον Προβολέα Ετικετών έχει επιλυθεί. Οι πελάτες μπορεί να έχουν βιώσει περιορισμένη λειτουργικότητα εντός της ετικέτας Spotlight που αρχίζει περίπου στις 4:30 PM PT στις 30 Ιουνίου. Η πλήρης λειτουργικότητα αποκαταστάθηκε στις 7:20 πμ PT την 1η Ιουλίου.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Λόγω μιας παλινδρόμησης σε μια πρόσφατη κυκλοφορία, οι χρήστες που πλησίαζαν από Logs Σχετικό Περιεχόμενο στη σελίδα APM TraceView προς Log Observer ανακατευθύνθηκαν πίσω στο APM TraceView αντ' αυτού. Αυτό επηρέασε την εμπειρία συσχέτισης Logs για τους πελάτες σε όλα τα βασίλεια, εκτός των US3 και Gov. Η αλλαγή έχει επανέλθει για να αποκατασταθεί η αναμενόμενη εμπειρία πλοήγησης. Η διαθεσιμότητα των προϊόντων για APM και Log Observer δεν επηρεάστηκε· το θέμα περιορίστηκε στη ροή εργασίας της Logs Correlation από το TraceView. Επείγον Ώρα έναρξης: 05:09 PDT, 25 Ιουνίου 2026 Ώρα λήξης: 22:15 PDT, 25 Ιουνίου 2026
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Rum API Endpoints were not available for one of our IPs, resulting in degraded service or a partial outage at first, and possibly a complete outage towards the end. This issue occurred from 4:22pm PST to 4:57pm PST
Datapoint ingest is affected , some datapoints could be dropped. Team is investigating and will provide an update shortly.
Our engineering team is currently implementing an impact mitigation configuration change. The internal investigation is still ongoing. We will share an additional update as soon as possible.
Our engineering team has completed impact mitigating configuration changes and confirmed services are recovered as of 4:55 PDT. We will continue monitoring and share an update as soon as possible.
Our engineering team has confirmed that all the services recovered as of 4:55 PM PDT and remained stable during monitoring. This incident is now resolved.
We are investigating delays in processing Splunk Observability Synthetic Monitoring test results for a small subset of customers. Tests are still running, but metrics may be delayed until the issue is resolved.
We have identified and remediated an issue affecting synthetic test result ingestion for a subset of customers. We apologize for any inconvenience this may have caused and thank you for your patience. Time range of impact: June 1 20:00 UTC - June 2 15:30 UTC
Charts for customers may not be loading. App and UI availability is also impacted. We are investigating and will provide an update shortly.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the status.
This Incident has been resolved.
A degradation of the Splunk O11y Cloud ingest path is causing ~20% of AWS CloudWatch metrics to be dropped. We are investigating the issue and will provide an update as soon as possible.
This incident has been resolved. We have since confirmed that only AWS CloudWatch metrics were impacted during this incident. Azure and GCP metrics were not impacted.
We are currently investigating this issue.
We are continuing to investigate this issue.
The issue has been identified and a fix is being implemented.
This incident has been resolved.
Charts for all customers may not be loading. Datapoint ingest is not affected. We are investigating and will provide an update shortly.
Our teams continue working to identify the cause and implement a fix.
Our investigation remains ongoing, and there is no change in status at this time. We are continuing to prioritize this issue and will provide the next update in thirty minutes.
Our teams are continuing their efforts to identify the root cause of this issue. There is no change in status to report at this time, but we are dedicating all necessary resources to reach a resolution. We will provide another update shortly.
Update (8:50 AM PST): We have observed that charts are now loading successfully. While service is recovering, our teams remain on-site to investigate the root cause and ensure full system stability. We will continue to monitor performance closely.
We are continuing to monitor the environment. There is no change in status at this time; our teams remain focused on resolving the remaining isolated issues.
Our teams are continuing to monitor the environment and are actively working to fully resolve the issue.
Update 10:30 PST: We are also investigating reports of login issues. Users may experience difficulty authenticating or accessing their accounts at this time.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
We are continuing to monitor the environment to ensure full remediation.
This incident has been resolved.
We are investigating an issue affecting Real User Monitoring (RUM) metrics across all realms. Customers may experience custom metric MTS quota limits being exceeded, resulting in metric data being dropped. RUM metric dimensions that were previously available may be missing.
The issue affecting Real User Monitoring (RUM) metrics has been identified. The fix is currently being implemented. We are actively working to restore full service and will provide further updates as progress continues.
We are continuing to work on the fix. We expect to have further updates within the next hour. We appreciate your patience as we work diligently to resolve this issue and restore full service.
We are currently continuing to test the fix for the Real User Monitoring (RUM) metrics issue. We are thoroughly validating the mitigation to ensure it resolves the issue effectively and maintains system stability. We appreciate your ongoing patience and will provide further updates as testing progresses.
We are currently continuing to test the fix for the Real User Monitoring (RUM) metrics issue. We will share an update once we have further information.
The outage impacting RUM MMS Data Drop has been resolved after internal engineering teams deployed a fix. All systems are operational and stable. Thank you for your patience and understanding.
We are currently investigating an issue where RUM (Real User Monitoring) MMS data is being dropped, which may result in missing or incomplete data in charts and dashboards related to real user monitoring. We are actively investigating and will provide updates as the situation develops.
We have identified the cause of the issue resulting in missing or incomplete data in Real User Monitoring charts and dashboards. We are implementing a fix and will provide an update within 15 minutes.
A solution to address the issue causing missing or incomplete data in Real User Monitoring (RUM) charts and dashboards is currently being implemented. Our teams are actively working on deploying the fix and will continue to provide updates as progress is made
We have identified an issue causing missing or incomplete data in Real User Monitoring (RUM) custom charts and dashboards across multiple realms. A fix is currently being rolled out and validated
A fix for the issue affecting Real User Monitoring (RUM) charts and dashboards has been deployed and is being actively monitored across all realms; customers may now see data restored in charts and dashboards
The issue affecting Real User Monitoring (RUM) custom charts and dashboards across multiple realms has been resolved. The fix has been deployed, and data is now flowing normally.