104 Flyio incidents · Απρίλιος 2026 — official updates, affected components, duration and resolution details.
Γνωρίζουμε ένα πρόβλημα που επηρεάζει ένα υποσύνολο των χρηστών Sprites. Ερευνούμε την πηγή του ζητήματος.
Τα ποσοστά σφάλματος έχουν μειωθεί. Συνεχίζουμε να παρακολουθούμε την υγεία API.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Παρατηρήσαμε ένα ανάντη θέμα του δικτύου στο LAX. Οι συνδέσεις με ορισμένους προορισμούς μπορεί να δουν αυξημένη λανθάνουσα και απώλεια πακέτων. Δουλεύουμε με το ανάντη μας για να λύσουμε το θέμα.
Έχουμε βάλει κάποια προσωρινά μέτρα μετριασμού μαζί με τους παρόχους μας. Ωστόσο, δεδομένου ότι η βασική αιτία αυτού του ζητήματος βρίσκεται μέσα σε ένα μεγαλύτερο ανάντη πάροχο διαμετακόμισης, μπορεί να συνεχίσετε να βλέπετε κάποια αυξημένα κενά και ζητήματα σύνδεσης σε/γύρω πληγείσες περιοχές. Ακόμα συνεργαζόμαστε στενά μαζί τους για να λύσουμε την βασική αιτία.
Ενημερώνουμε τον κατάλογο της πληγείσας περιοχής για να συμπεριλάβουμε και την SJC καθώς αυτό φαίνεται να είναι ένα ευρύτερο ανάντη ζήτημα στη Δυτική Ακτή των ΗΠΑ.
Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Ερευνούμε ένα θέμα με το υπόβαθρο δρομέα εργασίας μας API. Ενέργειες που απαιτούν εργασία στο παρελθόν, όπως η δημιουργία εφαρμογών, η ανάθεση διευθύνσεων IP ή η δημιουργία/ανανέωση πιστοποιητικών, ενδέχεται να αποτύχουν αυτή τη στιγμή.
Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Μια ενημέρωση ρυθμίσεων προκάλεσε προσωρινές αστοχίες για την εισερχόμενη κυκλοφορία HTTP/2 για μηχανές Fly που βρίσκονται σε ένα υποσύνολο των οικοδεσπότων για λίγα λεπτά. Από τότε το περιστατικό έχει επιλυθεί. Η διαχείριση Postgres εξαρτάται από το HTTP/2 και μερικά αεροπλάνα ελέγχου μπορεί να έχουν επηρεαστεί επίσης. Ωστόσο, οι κατάντη συνδέσεις Postgres ήταν απίθανο να έχουν επηρεαστεί από αυτό, δεδομένου ότι δεν χρησιμοποιούν τον χειριστή HTTP2.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Λόγω ενός ανάντη παρόχου, βλέπουμε ~50% απώλεια πακέτων σε ένα υποσύνολο των hosts στο ORD. Ορισμένα συμπλέγματα MPG στο ORD αργούν να αναπαραχθούν ως αποτέλεσμα.
Η απώλεια πακέτων στο ORD βελτιώνεται και οι υπηρεσίες που επηρεάζονται αναρρώνουν
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Είδαμε τις εργασίες διαγραφής Sprite να αποτυγχάνουν μεταξύ 21:18 και 22:05 UTC. Το θέμα αυτό έχει επιλυθεί.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Ερευνούμε θέματα δικτύωσης που επηρεάζουν ορισμένους οικοδεσπότες στην περιοχή GRU (São Paulo, Βραζιλία). Μερικές εφαρμογές στο GRU μπορεί να βιώσουν αυξημένη λανθάνουσα ή απώλεια πακέτων.
Η απόδοση του δικτύου στο GRU έχει ομαλοποιηθεί και δεν βλέπουμε πλέον θέματα. Συνεχίζουμε να παρακολουθούμε για να διασφαλίσουμε την πλήρη ανάκαμψη.
Βλέπουμε μια επανάληψη σε θέματα δικτύωσης στο GRU. Μερικές εφαρμογές στην περιοχή μπορεί να βιώσουν αυξημένη λανθάνουσα ή απώλεια πακέτων. Δουλεύουμε με τον ανάντη πάροχο μας δικτύωσης για να επιλύσουμε.
Ο ανάντη προμηθευτής μας έχει εφαρμόσει μια ρύθμιση. Η απόδοση του δικτύου στο GRU έχει ομαλοποιηθεί.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Αυτή τη στιγμή ερευνούμε αυτό το ζήτημα.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Ερευνούμε θέματα με τις πύλες μας. Μερικές εντολές CLI όπως 'flyctl ssh console' ή 'flyctl proxy' μπορεί να μην λειτουργούν αυτή τη στιγμή. Οι εφαρμογές συνεχίζουν να τρέχουν.
Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.
Οι δοκιμές και η παρακολούθησή μας δείχνουν ότι οι πύλες θα πρέπει να επιστρέψουν στο φυσιολογικό.Αν εξακολουθείτε να έχετε πρόβλημα με τη χρήση της κονσόλας «flyctl ssh», δοκιμάστε να επανεκκινήσετε τον παράγοντα «flyctl» με την επανεκκίνηση του παράγοντα «flyctl».
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Αυτή τη στιγμή βιώνουμε κάποια μετρική υστέρηση στους διακομιστές σε ορισμένες περιοχές. Παρέχουμε περισσότερες μετρικές περιπτώσεις επεξεργασίας για να φιλοξενήσει το backlog και να καλύψουν τη διαφορά.
Όλοι οι ξενιστές έχουν φτάσει στις μετρήσεις και παρακολουθούμε την κατάσταση
Αυτό έχει πλέον επιλυθεί
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Ερευνούμε θέματα δικτύου στην περιοχή του Λος Άντζελες. Εφαρμογές μπορεί να βιώσουν υψηλότερη λανθάνουσα ή να είναι απρόσιτες αυτή τη στιγμή.
Τα ανάντη ζητήματα δικτύωσης έχουν επιλυθεί.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Ένα σφάλμα διαμόρφωσης BGP προκάλεσε το Anycast DNS μας να δρομολογήσει σε ορισμένους κόμβους χωρίς την κατάλληλη υποδομή DNS. Το ζήτημα ήταν προσωρινό και επιλύθηκε μόλις αφαιρέσαμε τον κόμβο από το BGP.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Έχουμε εντοπίσει ένα θέμα που προκαλεί σφάλματα ταυτοποίησης για ορισμένες επιχειρήσεις από `flyctl'. Αυτές οι πράξεις αποτυγχάνουν με ένα σφάλμα όπως: «Αυτό το τελικό σημείο δεν δέχεται πλέον κληροδοτήματα OAuth (ξεκινώντας με `fo1 `). Παρακαλώ χρησιμοποιήστε ένα macaroon token (ξεκινώντας με `fm2 `) αντί. Αναγνωρίσαμε το θέμα και έχουμε μια λύση
Έχει αναπτυχθεί μια διόρθωση και αυτό το σφάλμα δεν θα πρέπει πλέον να συμβαίνει. Παρακολουθούμε για πλήρη ανάρρωση.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Είχαμε ένα θέμα με το σμήνος ord-0 Fly Kubernetes, και πολλές συστάδες MPG αποτυγχάνουν να επανεκκινήσουν. Η MPG ομάδα μας εργάζεται ενεργά σε αυτό.
Συνεχίζουμε να ερευνούμε αυτό το ζήτημα.
Εφαρμόστηκε μια ρύθμιση και παρακολουθούμε τα αποτελέσματα.
Το περιστατικό λύθηκε.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
6PN ζητήματα δικτύωσης μεταξύ ορισμένων μηχανών σε YYZ κατά τη διάρκεια μιας rollout που κύλησε πίσω μόλις παρατηρήσαμε λάθη. Κατά το διάστημα αυτό κάποιες μηχανές δεν ήταν σε θέση να μιλήσουν σε εσωτερικούς πόρους όπως άλλα DB, άλλες εφαρμογές ή συστάδες MPG.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
Νέες μηχανές μπορεί να αποτύχουν να δημιουργήσουν στο ARN επειδή μας λείπει η ικανότητα.
Το ζήτημα της ικανότητας στην περιοχή ARN έχει επιλυθεί.
Αυτόματη μετάφραση από την επίσημη ενημέρωση του συμβάντος.
We are working to recover our secrets service after a failed deployment. Apps continue to run, but it is not possible to create new apps or update secrets at this time.
We have failed over the secrets database to a replica, and the Machines API appears healthy now. We are monitoring for any further issues.
This incident has been resolved.
We are currently investigating degraded ipv6 networking on a subset of hosts
We are continuing to investigate this issue.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
We are continuing to monitor for any further issues.
This incident has been resolved.
We are currently investigating app-not-found errors returned by Machines API calls made shortly after creating new applications.
We have identified the issue as failed insertions in a subset of Corrosion batches. These failures trigger retries, which can cause timeouts for other batches.
We’ve applied a mitigation to reduce the impact from Corrosion batch insertion retries and are continuing to monitor while affected nodes catch up.
We’ve deployed an additional mitigation to further reduce Corrosion retry pressure and are seeing improvement; we’re continuing to monitor while remaining affected nodes catch up.
A fix has been implemented and we are monitoring the results
This incident has been resolved.
High CPU pressure on a shared etcd instance is causing lags on MPG creation in the IAD region
Etcd is stable. Services are back to normal.