104 Flyio incidents · kwiecień 2026 — official updates, affected components, duration and resolution details.
Wiemy o problemie wpływającym na podgrupę użytkowników Sprites. Badamy źródło problemu.
Wskaźniki błędów spadły. Kontynuujemy monitorowanie zdrowia API.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
W LAX obserwujemy problem z siecią. Połączenia z niektórymi miejscami docelowymi mogą spowodować wzrost opóźnienia i utratę pakietów. Pracujemy nad rozwiązaniem tego problemu.
Umieściliśmy pewne tymczasowe ograniczenia wraz z naszymi dostawcami. Jednak ponieważ główna przyczyna tej kwestii leży w większym dostawcą wyższego szczebla tranzytu, można nadal zauważyć pewne podniesione opóźnienia i problemy z połączeniami w / wokół dotkniętych regionów. Nadal ściśle z nimi współpracujemy, by rozwiązać przyczynę.
Aktualizujemy listę dotkniętych regionów, aby uwzględnić również SJC, ponieważ wydaje się to szerszą kwestią na Zachodnim Wybrzeżu Stanów Zjednoczonych.
Wprowadzono rozwiązanie i monitorujemy wyniki.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Prowadzimy śledztwo w sprawie pracy dla naszego API. Działania, które wymagają pracy w tle, takie jak tworzenie aplikacji, przypisywanie adresów IP lub tworzenie / odnawianie certyfikatów, mogą w tym momencie nie być skuteczne.
Wprowadzono rozwiązanie i monitorujemy wyniki.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Aktualizacja konfiguracji spowodowała tymczasowe awarie przychodzącego ruchu HTTP / 2 dla Fly Machines znajdujących się na podzbiorze hostów na kilka minut. Ten incydent został rozwiązany. Zarządzane Postgres zależy od HTTP / 2 i niektóre operacje samolotu sterującego mogą mieć wpływ również. Jednakże, połączenia niższego szczebla Postgres były mało prawdopodobne, aby miały na to wpływ, ponieważ nie korzystają one z obsługi HTTP2.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Ze względu na dostawcę, widzimy ~ 50% utraty pakietów na podzbiorze hostów w ORD. Niektóre klastry MPG w ORD są powolne do replikacji w wyniku.
Utrata pakietów w ORD poprawia się, a usługi, które mają wpływ, powracają do normy; nadal monitorujemy problemy przerywane
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Widzieliśmy, jak prace związane z usuwaniem Sprite zawodzą między 21: 18 a 22: 05 UTC. Kwestia ta została rozwiązana.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Badamy problemy sieciowe wpływające na niektórych gospodarzy w regionie GRU (São Paulo, Brazylia). Niektóre aplikacje w GRU mogą doświadczać zwiększonego opóźnienia lub utraty pakietów.
Wydajność sieciowa w GRU została znormalizowana i nie widzimy już problemów. Kontynuujemy monitorowanie w celu zapewnienia pełnej poprawy sytuacji.
Mamy do czynienia z rekursem problemów sieciowych w GRU. Niektóre aplikacje w regionie mogą doświadczać zwiększonego opóźnienia lub utraty pakietów. Pracujemy nad rozwiązaniem problemu z naszym dostawcą sieci.
Nasz dostawca zaimplementował rozwiązanie. Wydajność sieci w GRU została znormalizowana.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie badamy tę kwestię.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Badamy problemy z naszymi bramami WireGuard. Niektóre polecenia CLI takie jak 'flyctl ssh console' lub 'flyctl proxy' mogą nie działać w tym czasie. Aplikacje nadal działają.
Wprowadzono rozwiązanie i monitorujemy wyniki.
Nasze testy i monitorowanie wskazują, że bramki powinny wrócić do normy; jeśli nadal masz problem z używaniem 'flyctl ssh console', spróbuj ponownie uruchomić czynnik 'flyctl' przez 'flyctl agent restart'.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
W niektórych regionach mamy obecnie do czynienia z pewnym opóźnieniem w zakresie pomiarów serwerów. Zapewniamy więcej przypadków przetwarzania metrycznego, aby pomieścić zaległości i nadrobić zaległości.
Wszyscy gospodarze dogonili metrics i monitorujemy sytuację
To już rozwiązane
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Badamy problemy sieci w regionie Los Angeles. Aplikacje mogą mieć wyższe opóźnienie lub być nieosiągalne w tym czasie.
Upstream networking problems zostały rozwiązane.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Błąd konfiguracji BGP spowodował, że nasz DNS Anycast przekierował się do niektórych węzłów bez odpowiedniej infrastruktury DNS. Sprawa była tymczasowa i została rozwiązana jak tylko usunęliśmy węzeł z BGP.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Zidentyfikowaliśmy problem powodujący błędy uwierzytelniania dla niektórych operacji z 'flyctl'. Operacje te nie powiodły się z błędem takim jak: "Ten punkt końcowy nie akceptuje już dotychczasowych żetonów OAuth (zaczynając od 'fo1 _"). Proszę użyć symbolu makaronu (zaczynając od' fm2 _ '). Zidentyfikowaliśmy problem i ustaliliśmy rozwiązanie
Wyznaczono rozwiązanie i błąd ten nie powinien już dłużej występować. Monitorujemy, by zapewnić pełną rekonwalescencję.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Mieliśmy problem z klastrem Ord- 0 Fly Kubernetes, a wiele klastrów MPG nie może ponownie uruchomić. Nasz zespół MPG aktywnie nad tym pracuje.
Nadal badamy tę kwestię.
Wprowadzono rozwiązanie i monitorujemy wyniki.
Ten incydent został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
6PN problemy sieciowe między niektórymi maszynami w YYZ podczas toczenia, który został wycofany, gdy zauważyliśmy błędy. W tym czasie niektóre maszyny nie były w stanie rozmawiać z wewnętrznymi zasobami, takimi jak inne DB, inne aplikacje czy klastry MPG.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Nowe maszyny mogą nie tworzyć w ARN, ponieważ brakuje nam zdolności.
Kwestia przepustowości w regionie ARN została rozwiązana.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Pracujemy nad odzyskaniem naszych sekretnych usług po nieudanym rozmieszczeniu. Aplikacje nadal działają, ale nie jest możliwe tworzenie nowych aplikacji lub aktualizowanie tajemnic w tym czasie.
We have failed over the secrets database to a replica, and the Machines API appears healthy now. We are monitoring for any further issues.
This incident has been resolved.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
We are currently investigating degraded ipv6 networking on a subset of hosts
We are continuing to investigate this issue.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
We are continuing to monitor for any further issues.
This incident has been resolved.
We are currently investigating app-not-found errors returned by Machines API calls made shortly after creating new applications.
We have identified the issue as failed insertions in a subset of Corrosion batches. These failures trigger retries, which can cause timeouts for other batches.
We’ve applied a mitigation to reduce the impact from Corrosion batch insertion retries and are continuing to monitor while affected nodes catch up.
We’ve deployed an additional mitigation to further reduce Corrosion retry pressure and are seeing improvement; we’re continuing to monitor while remaining affected nodes catch up.
A fix has been implemented and we are monitoring the results
This incident has been resolved.
High CPU pressure on a shared etcd instance is causing lags on MPG creation in the IAD region
Etcd is stable. Services are back to normal.