104 Flyio incidents · aprile 2026 — official updates, affected components, duration and resolution details.
Siamo consapevoli di un problema che riguarda un sottoinsieme di utenti Sprites. Stiamo indagando sulla fonte del problema.
I tassi di errore sono diminuiti. Stiamo continuando a monitorare la salute delle API.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Abbiamo osservato un problema di rete a monte in LAX. Le connessioni ad alcune destinazioni possono vedere elevata latenza e perdita di pacchetti. Stiamo lavorando con il nostro upstream per risolvere questo problema.
Abbiamo messo in alcune mitigazioni temporanee insieme ai nostri fornitori. Tuttavia, poiché la causa principale di questo problema si trova all'interno di un più grande fornitore di transito a monte, si può continuare a vedere alcuni problemi di latenza e connessione elevati in / intorno regioni colpite. Stiamo ancora lavorando a stretto contatto con loro per risolvere la causa principale.
Stiamo aggiornando l'elenco delle regioni interessate per includere anche SJC in quanto questo sembra essere un problema a monte più ampio in US West Coast.
Una soluzione è stata implementata e stiamo monitorando i risultati.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo indagando su un problema con il runner di lavoro di sfondo per la nostra API. Le azioni che richiedono un lavoro di sfondo, come la creazione di app, l'assegnazione di indirizzi IP, o la creazione / il rinnovo di certificati, possono fallire in questo momento.
Una soluzione è stata implementata e stiamo monitorando i risultati.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Un aggiornamento di configurazione ha causato guasti temporanei per il traffico HTTP/2 in entrata per Fly Machines situato su un sottoinsieme di host per pochi minuti. Da allora questo incidente è stato risolto. Gestito Postgres dipende da HTTP/2 e alcune operazioni del piano di controllo possono essere stati colpiti pure. Tuttavia, le connessioni Postgres a valle erano improbabili di essere state influenzate da questo dato che non utilizzano il gestore HTTP2.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
A causa di un fornitore a monte, stiamo vedendo ~50% perdita di pacchetti su un sottoinsieme di host in ORD. Alcuni cluster MPG in ORD sono lenti da replicare di conseguenza.
La perdita di pacchetti in ORD sta migliorando e i servizi impatto stanno recuperando; stiamo continuando a monitorare per problemi intermittenti
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Abbiamo visto i lavori di cancellazione di Sprite fallendo tra 21:18 e 22:05 UTC. Questo problema è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo indagando su problemi di rete che influenzano alcuni host in GRU (São Paulo, Brasile) regione. Alcune applicazioni in GRU possono sperimentare una maggiore latenza o perdita di pacchetti.
Le prestazioni di rete in GRU sono normalizzate e non vediamo più problemi. Stiamo continuando a monitorare per garantire un pieno recupero.
Stiamo vedendo una ricorrenza nei problemi di rete in GRU. Alcune applicazioni nella regione possono sperimentare una maggiore latenza o perdita di pacchetti. Stiamo lavorando con il nostro provider di rete a monte per risolvere.
Il nostro fornitore a monte ha implementato una correzione. Le prestazioni di rete in GRU sono normalizzate.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo attualmente indagando su questo problema.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo indagando sui problemi con i nostri gateway WireGuard. Alcuni comandi CLI come `flyctl ssh console` o `flyctl proxy` non possono funzionare in questo momento. Le app continuano a funzionare.
Una soluzione è stata implementata e stiamo monitorando i risultati.
Il nostro test e il monitoraggio indica che i gateway dovrebbero tornare alla normalità; se avete ancora problemi con `flyctl ssh console`, provate a riavviare l'agente `flyctl` da `flyctl agente riavvia`.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Attualmente stiamo sperimentando qualche ritardo metrico sui server in alcune regioni. Stiamo fornendo istanze di elaborazione più metriche per ospitare il backlog e recuperare.
Tutti gli host hanno raggiunto metriche e stiamo monitorando la situazione
Questo è ora risolto
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo indagando sui problemi della rete nella regione di Los Angeles. Le app possono sperimentare latenza più alta o essere irraggiungibili in questo momento.
I problemi di rete a monte sono risolti.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Un errore di configurazione BGP ha causato il nostro Anycast DNS a passare ad alcuni nodi senza la corretta infrastruttura DNS. Il problema è stato temporaneo e è stato risolto non appena abbiamo rimosso quel nodo da BGP.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Abbiamo identificato un problema che causa errori di autenticazione per alcune operazioni da `flyctl`. Queste operazioni stanno fallendo con un errore come: `Questo endpoint non accetta più i token legacy OAuth (a partire da `fo1 `). Si prega di utilizzare un token macaroon (a partire da `fm2 `) invece. Abbiamo identificato il problema e stiamo risolvendo un problema
Una correzione è stata implementata e questo errore non dovrebbe più verificarsi. Stiamo monitorando per garantire il pieno recupero.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Abbiamo avuto un problema con il cluster Ord-0 Fly Kubernetes, e molti cluster MPG non stanno riavviando. Il nostro team MPG ci sta lavorando attivamente.
Stiamo continuando a indagare su questo problema.
Una soluzione è stata implementata e stiamo monitorando i risultati.
Questo incidente è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
6PN problemi di rete tra alcune macchine in YYZ durante un rollout che è stato rotolato indietro una volta abbiamo notato errori. Durante questo periodo alcune macchine non erano in grado di parlare con risorse interne come altri DB, altre applicazioni o cluster MPG.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Le nuove macchine potrebbero non creare in ARN perché ci manca la capacità.
Il problema della capacità nella regione ARN è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo lavorando per recuperare il nostro servizio segreto dopo una distribuzione fallita. Le applicazioni continuano a funzionare, ma non è possibile creare nuove applicazioni o aggiornare segreti in questo momento.
We have failed over the secrets database to a replica, and the Machines API appears healthy now. We are monitoring for any further issues.
This incident has been resolved.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
We are currently investigating degraded ipv6 networking on a subset of hosts
We are continuing to investigate this issue.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
We are continuing to monitor for any further issues.
This incident has been resolved.
We are currently investigating app-not-found errors returned by Machines API calls made shortly after creating new applications.
We have identified the issue as failed insertions in a subset of Corrosion batches. These failures trigger retries, which can cause timeouts for other batches.
We’ve applied a mitigation to reduce the impact from Corrosion batch insertion retries and are continuing to monitor while affected nodes catch up.
We’ve deployed an additional mitigation to further reduce Corrosion retry pressure and are seeing improvement; we’re continuing to monitor while remaining affected nodes catch up.
A fix has been implemented and we are monitoring the results
This incident has been resolved.
High CPU pressure on a shared etcd instance is causing lags on MPG creation in the IAD region
Etcd is stable. Services are back to normal.