104 Flyio incidents · Ebrel 2026 — official updates, affected components, duration and resolution details.
Estamos cientes de um problema que afeta um subconjunto de usuários do Sprites. Estamos a investigar a origem da questão.
As taxas de erro diminuíram. Continuamos a monitorar a saúde da API.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Observamos uma questão de rede a montante no LAX. Conexões para alguns destinos podem ver latência elevada e perda de pacotes. Estamos a trabalhar para resolver esta questão.
Pusemos algumas mitigação temporária juntamente com os nossos fornecedores. No entanto, uma vez que a causa raiz deste problema está dentro de um maior provedor de trânsito a montante, você pode continuar a ver alguns problemas elevados de latência e conexão em / em torno de regiões afetadas. Ainda estamos a trabalhar com eles para resolver a causa principal.
Estamos atualizando a lista de regiões afetadas para incluir também a SJC, uma vez que esta parece ser uma questão mais ampla na Costa Oeste dos EUA.
Foi implementada uma correção e estamos monitorando os resultados.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Estamos investigando um problema com o background job runner para nossa API. Ações que exigem uma tarefa de fundo, como criar aplicativos, atribuir endereços IP ou criar/renovar certificados, podem falhar neste momento.
Foi implementada uma correção e estamos monitorando os resultados.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Uma atualização de configuração causou falhas temporárias para o tráfego HTTP/2 de entrada para Fly Machines localizado em um subconjunto de hosts por alguns minutos. Este incidente já foi resolvido. Postgres gerenciados depende de HTTP/2 e algumas operações de plano de controle também podem ter sido afetadas. No entanto, as conexões Postgres a jusante não seriam afetadas por isso, uma vez que não usam o manipulador HTTP2.
Traduzido automaticamente da atualização oficial do incidente.
Devido a um provedor upstream, estamos vendo ~50% de perda de pacotes em um subconjunto de hosts em ORD. Alguns clusters MPG na ORD são lentos para se replicar como resultado.
A perda de pacotes na ORD está melhorando e os serviços impactados estão se recuperando; continuamos monitorando problemas intermitentes
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Vimos trabalhos de exclusão Sprite falhando entre 21:18 e 22:05 UTC. Esta questão foi resolvida.
Traduzido automaticamente da atualização oficial do incidente.
Estamos investigando questões de rede impactando alguns anfitriões na região do GRU (São Paulo, Brasil). Alguns aplicativos no GRU podem experimentar maior latência ou perda de pacotes.
O desempenho em rede no GRU normalizou-se e não estamos mais vendo problemas. Continuamos a monitorizar para garantir uma recuperação completa.
Estamos a ver uma recorrência em questões de rede na GRU. Alguns aplicativos na região podem experimentar maior latência ou perda de pacotes. Estamos trabalhando com nosso provedor de rede upstream para resolver.
Nosso provedor upstream implementou uma correção. O desempenho da rede no GRU normalizou.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Estamos actualmente a investigar esta questão.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Estamos a investigar problemas com as nossas portas WireGuard. Alguns comandos CLI como `flyctl ssh console` ou `flyctl proxy` podem não funcionar neste momento. As aplicações continuam a correr.
Foi implementada uma correção e estamos monitorando os resultados.
Nossos testes e monitoramento indicam que gateways devem estar de volta ao normal; se você ainda estiver tendo problemas usando `flyctl ssh console`, tente reiniciar o agente `flyctl` por `flyctl agent reset'.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos experimentando alguns desfasamentos de métricas em servidores em algumas regiões. Estamos fornecendo mais instâncias de processamento métrico para acomodar o backlog e recuperar o atraso.
Todos os anfitriões apanharam as métricas e estamos a monitorizar a situação
Isto está agora resolvido
Traduzido automaticamente da atualização oficial do incidente.
Estamos a investigar problemas de rede na região de Los Angeles. Apps podem experimentar maior latência ou ser inalcançáveis neste momento.
Problemas de rede upstream resolveram.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Um erro de configuração BGP fez com que o nosso DNS Anycast roteasse para alguns nós sem a infraestrutura DNS adequada. O problema era temporário e foi resolvido assim que removemos esse nó do BGP.
Traduzido automaticamente da atualização oficial do incidente.
Identificamos um problema causando erros de autenticação para algumas operações de `flyctl`. Estas operações estão falhando com um erro como: `Este endpoint não aceita mais os tokens legados do OAuth (começando com `fo1 `). Por favor, use um token de macaroon (começando com `fm2 `). Identificámos o problema e estamos a fazer uma correcção
Uma correção foi implementada e este erro não deve mais ocorrer. Estamos a monitorizar para garantir a recuperação total.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Tivemos um problema com o cluster ord-0 Fly Kubernetes, e muitos clusters MPG estão falhando em reiniciar. A nossa equipa MPG está a trabalhar nisso.
Continuamos a investigar esta questão.
Foi implementada uma correção e estamos monitorando os resultados.
Este incidente foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Problemas de rede 6PN entre algumas máquinas em YYZ durante uma implantação que foi rolada para trás uma vez que percebemos erros. Durante este tempo, algumas máquinas foram incapazes de falar com recursos internos como outros DBs, outros aplicativos ou clusters MPG.
Traduzido automaticamente da atualização oficial do incidente.
Novas máquinas podem falhar em criar em ARN porque não temos capacidade.
A questão da capacidade na região ARN foi resolvida.
Traduzido automaticamente da atualização oficial do incidente.
Estamos a trabalhar para recuperar o nosso serviço secreto após uma implantação falhada. Apps continuam a executar, mas não é possível criar novos aplicativos ou atualizar segredos neste momento.
We have failed over the secrets database to a replica, and the Machines API appears healthy now. We are monitoring for any further issues.
This incident has been resolved.
Traduzido automaticamente da atualização oficial do incidente.
We are currently investigating degraded ipv6 networking on a subset of hosts
We are continuing to investigate this issue.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
We are continuing to monitor for any further issues.
This incident has been resolved.
We are currently investigating app-not-found errors returned by Machines API calls made shortly after creating new applications.
We have identified the issue as failed insertions in a subset of Corrosion batches. These failures trigger retries, which can cause timeouts for other batches.
We’ve applied a mitigation to reduce the impact from Corrosion batch insertion retries and are continuing to monitor while affected nodes catch up.
We’ve deployed an additional mitigation to further reduce Corrosion retry pressure and are seeing improvement; we’re continuing to monitor while remaining affected nodes catch up.
A fix has been implemented and we are monitoring the results
This incident has been resolved.
High CPU pressure on a shared etcd instance is causing lags on MPG creation in the IAD region
Etcd is stable. Services are back to normal.