39 Better Uptime incidents · luty 2023 — official updates, affected components, duration and resolution details.
Deska rozdzielcza telemetrii może być niedostępna dla niektórych klientów z powodu problemu z bazą danych.
Problem został rozwiązany, przepraszamy za incovenience, proszę dać nam znać, jeśli możemy pomóc w czymś na hello @ betterstack.com.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
We'll be migrating some Telemetry sources to new, more robust infrastructure. Each source will be affected for no more than 90 minutes. During the migration there may be brief gaps in dashboard charts and delayed Live tail data. Queries through the SQL Connections API may briefly return an error rather than incomplete results. Please reach out to us at [email protected] if you have any questions.
Obecnie doświadczamy pewnych problemów ze zmianami konfiguracji źródła telemetrii i tworzeniem nowych źródeł. Zapytania i spożycie są nienaruszone. Prowadzimy śledztwo.
Kwestia ta została już rozwiązana, wszystkie aktualizacje źródeł i konfiguracji powinny się teraz rozprzestrzeniać zgodnie z oczekiwaniami.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
W naszej infrastrukturze spedycyjnej AWS Direct Connect mamy obecnie przestoje, co może spowodować opóźnienia lub awarie w przyjmowaniu danych.
Problem sieci powodujący ten problem został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie doświadczamy problemu infrastruktury, który wpływa na niektóre pytania klientów w naszym regionie Europy.
Problem infrastruktury został rozwiązany.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie badamy pewne błędy przejściowe, które wpływają na działanie naszej platformy uptime. Przepraszamy za niedogodności.
Rozwiązaliśmy degradację osiągów.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Łagodzimy to. Potrzebujesz pomocy? Daj nam znać na adres hello @ betterstack.com
Atak został skutecznie złagodzony przez ochronę DDoS. Bardzo przepraszam za niedogodności. Potrzebujesz pomocy? Daj nam znać na adres hello @ betterstack.com.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Bunny CDN, jeden z naszych dostawców CDN, doświadcza błędu oprogramowania na ich UK- zlokalizowany PoP. Jesteśmy w kontakcie z nimi i problem powinien zostać rozwiązany w ciągu kilku minut. Przepraszamy za niedogodności. Jeśli musisz pilnie skorzystać z deski rozdzielczej, użyj VPN, aby połączyć się z dowolnym miejscem w USA. Dziękuję.
Bunny CDN rozwiązała problem. Przepraszamy za niedogodności.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie widzimy opóźnione przetwarzanie danych dla niektórych źródeł znajdujących się w naszym klastrze US East. Podstawowa przyczyna została rozwiązana, jednak może zająć trochę czasu, aby wszystkie dane historyczne w pełni pojawić się w Live ogon. Uwaga: nie ma utraty danych * * - wszystkie dane przychodzące są spożywane i staną się widoczne, gdy system nadąża. Jeśli masz jakieś pytania, prosimy o kontakt pod adresem * * [hello @ betterstack.com] (mailto: hello @ betterstack.com) * *.
Wcześniejsze opóźnienie dotyczące niektórych źródeł w naszym amerykańskim klastrze wschodnim zostało w pełni rozwiązane. Wszystkie dane zostały już przetworzone i są widoczne w Live tail, bez utraty danych * *. W razie jakichkolwiek pytań prosimy o kontakt pod adresem * * [hello @ betterstack.com] (mailto: hello @ betterstack.com) * *.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie widzimy podwyższone opóźnienie i chwilowe niepowodzenia w naszym klastrze eu- nbg- 2. Dane przychodzące są spożywane, ale przetwarzanie może być opóźnione dla niektórych źródeł, a niektóre zapytania mogą również nie udać się lub zwrócić niekompletne wyniki. Nasz zespół inżynieryjny aktywnie nad tym pracuje, a zaległości są już zmniejszane i oczekujemy pełnego powrotu do zdrowia wkrótce. Będziemy aktualizować tę stronę, jak tylko będziemy mieć więcej aktualizacji.
Kwestie zapytań w eu- nbg-2 są obecnie najczęściej rozwiązywane. W tym samym czasie w pełni natknął się na zaległe spożycie, a dane są przetwarzane zgodnie z oczekiwaniami. Kontynuujemy ścisłą obserwację gromady i przeglądamy rurociąg, aby upewnić się, że wszystko jest stabilne i działa normalnie. Dziękuję bardzo za cierpliwość i daj nam znać na 'hello @ betterstack.com' jeśli cokolwiek!
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie doświadczamy problemu, w którym Better Stack UI jest tymczasowo niedostępny. Nasze usługi backend, infrastruktura monitorowania, API i ostrzegania są w pełni operacyjne - jednak Cloudflare przechodzi globalny brak, który wpływa na routing i zapobiega naszej desce rozdzielczej z załadunku. W tym miejscu można śledzić incydent na wcześniejszych etapach: https: / / www.cloudflarestatus.com / invents / 8gmgl950y3h7 Aktywnie monitorujemy sytuację i przywrócimy pełny dostęp, jak tylko Cloudflare rozwiązuje problemy z routowaniem. Wszystkie podstawowe funkcje - kontrole, bicie serca, alarmy, spożycie logarytmu i pomiary - nadal działają normalnie w tle. Dziękuję za cierpliwość
UI Better Stack jest teraz w większości dostępne ponownie, a wielu użytkowników powinno być w stanie załadować deskę rozdzielczą normalnie. Globalne przestoje Cloudflare nadal trwają, a mimo że ich sieć stała się stabilniejsza, problemy z okresowym routowaniem mogą być kontynuowane. Oznacza to, że w miarę jak sytuacja w pełni się poprawia, można nadal obserwować sporadyczne powolne ładowanie lub podwyższone poziomy błędów. Kontynuujemy monitorowanie incydentu i udostępnimy dalsze aktualizacje, gdy Cloudflare ustabilizuje ich systemy.
Cloudflare rozwiązała głównie podstawowe problemy routingu związane z ich globalnym przestojem, a ich systemy działają teraz normalnie. Dzięki ustabilizowanej sieci, Better Stack UI i wszystkie powiązane usługi są ponownie w pełni dostępne. Wszystko po naszej stronie działa zgodnie z oczekiwaniami, a my nie widzimy już wyższych poziomów błędów ani zdegradowanych wyników. Będziemy nadal monitorować sytuację, ale nie oczekuje się dalszych skutków. Jeśli masz jakieś pytania lub zauważyć coś niezwykłego, prosimy o kontakt na adres hello @ betterstack.com - chętnie pomożemy. Dziękuję za cierpliwość podczas całego incydentu
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie mamy do czynienia z problemami z przerwami czasowymi wpływającymi na niestandardowe strony. Pierwsze błędy zaczynają pojawiać się około 1: 55 PM UTC, a niektóre wnioski nie zwracają odpowiedzi w wielu regionach. Badamy to i wkrótce podzielimy się kolejną aktualizacją.
Kwestie czasowe zostały rozwiązane. Stosujemy ograniczenia około 2: 15 PM UTC, a dotknięte strony statusu zaczynają reagować normalnie ponownie. Wielkie dzięki za cierpliwość.
Po wcześniejszym wydaniu timeout, widzimy, że mały podzbiór niestandardowych stron stanu nie odzyskał się w pełni po początkowej poprawce o 2: 15 PM UTC. Niektóre z tych stron napotkają obecnie błędy związane z SSL, takie jak błędy w zatwierdzaniu certyfikatów lub timeout, ze względu na brak prawidłowego działania komponentu wewnętrznego po wcześniejszym zakłóceniu. Kontynuujemy śledztwo i podzielimy się informacjami, jak tylko je zdobędziemy.
Rozwiązaliśmy problem, który spowodował, że niektóre niestandardowe strony stanu nie załadować lub zwrócić błędy timeout. Problem związany był z przepływem pracy przy obsłudze certyfikatów, co tymczasowo uniemożliwiło niektórym stronom uzyskanie lub odświeżanie certyfikatów SSL. Wszystkie dotknięte strony są teraz ładowanie normalnie ponownie. Dziękuję bardzo za cierpliwość i zrozumienie. Proszę dać nam znać na adres hello @ betterstack.com, jeśli mają Państwo więcej pytań.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Widzimy podwyższony poziom błędu w naszym e-mail usługi dostawy ze względu na trwającą AWS out. W rezultacie niektóre powiadomienia e-maile mogą być opóźnione. Monitorowanie i przetwarzanie danych na czas określony są w pełni operacyjne.
Dostawy pocztowe wracają do normy.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie doświadczamy awarii sieci w centrum danych naszego dostawcy, która wpływa na część zapytań i powoduje opóźnienia w przyjmowaniu danych. Nasz zespół aktywnie współpracuje z dostawcą w celu jak najszybszego rozwiązania problemu. Będziemy pana informować, jak tylko będziemy mieli więcej szczegółów. Dziękuję za cierpliwość, podczas gdy my pracujemy nad powrotem do normalności.
Większość naszej sieci została odrestaurowana; proszę być z nami, ponieważ wszelkie opóźnione dane są wstawiane, a pełna funkcjonalność zapytań jest przywrócona.
Kwestia ta została rozwiązana; wszystkie dane oczekujące na rozpatrzenie zostały pochłonięte, a pytania są w pełni operacyjne.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Badamy problem, w którym logi wysyłane przez RSYSlog z Oceanu Cyfrowego nie osiągają punktu końcowego spożycia. Zaczęło się to po planowanej migracji starych źródeł Rsyslog do naszej nowej infrastruktury w chmurze i wydaje się mieć wpływ tylko na platformę Digital Ocean. Obecnie współpracujemy z zespołem Digital Ocean i dostarczymy aktualizacje jak najszybciej.
Zidentyfikowaliśmy przyczynę i wygląda na to, że rekordy DNS Digital Ocean nie zostały jeszcze zaktualizowane, aby wskazać nowe punkty końcowe. Spowodowało to niezgodność i tymczasową niedostępność logarytmu. Współpracujemy z zespołem Digital Ocean, by to rozwiązać. Wkrótce podamy więcej szczegółów.
Zidentyfikowaliśmy problem z rozdzielczością DNS między Oceanem Cyfrowym a Better Stack. To zostało już rozwiązane, a dzienniki są obecnie przetwarzane normalnie.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Niektórzy klienci ponownie doświadczają opóźnień w spożyciu dziennika i wolniejszej wydajności zapytania. Serdecznie przepraszamy za powtarzające się zakłócenia. Nasz zespół aktywnie pracuje nad zidentyfikowaniem przyczyny i dostarczy dalszych aktualizacji, gdy tylko będziemy mieli więcej informacji. Dziękuję za cierpliwość i zrozumienie.
Kwestia ta została już rozwiązana. Opóźnienia w połknięciu dziennika i wyniki zapytań wróciły do normy dla wszystkich klientów, których to dotyczy. Przepraszamy za powtarzające się zakłócenia i doceniamy waszą cierpliwość, pracując nad przywróceniem służby. Nasz zespół nadal uważnie monitoruje sytuację, aby zapewnić stałą stabilność. Jeśli nadal będziesz doświadczał jakichkolwiek problemów, skontaktuj się z nami natychmiast.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Niektórzy klienci po raz kolejny doświadczają opóźnień w połknięciu logarytmu i wolniejszej wydajności zapytania. Przepraszamy za nawrót i rozumiemy, jak destrukcyjne to może być. Nasz zespół aktywnie bada przyczynę i podzielimy się szczegółami, jak tylko je zdobędziemy. Dziękuję za cierpliwość i zrozumienie!
Kwestia ta została już rozwiązana. Połknięcie dziennika i wydajność zapytania są teraz stabilne. Jeszcze raz przepraszamy za zakłócenie i doceniamy waszą cierpliwość, kiedy zajmowaliśmy się tym powtórzeniem. Jeśli zauważysz jakieś problemy, skontaktuj się z nami natychmiast.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie badamy raporty sporadycznych opóźnień w spożyciu logarytmu i zmniejszonej wydajności zapytania wpływając na podzbiór źródeł. Nasz zespół inżynieryjny pracuje pilnie nad zidentyfikowaniem przyczyny i powrotem systemów do normalnej prędkości jak najszybciej. Będziemy dzielić się kolejną aktualizacją jak tylko będziemy mieli więcej informacji - dziękuję za wyprowadzenie się z nami!
Kwestia ta została rozwiązana. Połknięcie dziennika i wyniki zapytań wróciły do normy. Dziękuję za cierpliwość, kiedy pracowaliśmy nad tym incydentem. Jeśli nadal doświadczasz jakichkolwiek problemów, nie wahaj się skontaktować z "hello @ betterstack.com.".
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Zdajemy sobie sprawę z doniesień o nieregularnych opóźnieniach w połknięciu logarytmu i powolnych niż normalne wyniki zapytań wpływających na niektórych klientów. Nasz zespół inżynieryjny aktywnie bada przyczynę i pracuje nad jak najszybszym przywróceniem pełnej wydajności. Wyślemy kolejną aktualizację, gdy będziemy mieli więcej szczegółów - dziękujemy za cierpliwość!
Zidentyfikowaliśmy i rozwiązaliśmy przyczynę problemu. Opóźnienia w połknięciu logarytmu są oczyszczone i wydajność zapytania wróciła do normy. Jeśli nadal będziesz doświadczał problemów, skontaktuj się z nami pod adresem 'hello @ betterstack.com'. Dziękuję za cierpliwość!
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.
Obecnie badamy problem powodujący okresowe opóźnienia w połknięciu logarytmu i wolniejsze wyniki dla niektórych klientów. Nasz zespół inżynieryjny pracuje nad jak najszybszym przywróceniem pełnej obsługi. Upewnimy się, że będziesz na bieżąco, gdy będzie więcej szczegółów. Wielkie dzięki za cierpliwość!
Wyniki zapytań wróciły do normy i wszystkie opóźnione dzienniki są obecnie spożywane; nie zostały utracone żadne dane. Monitorujemy system, żeby wszystko było stabilne. Dziękuję za cierpliwość i cierpliwość. Jeśli zauważysz jakieś problemy, daj nam znać na adres 'hello @ betterstack.com'.
Automatyczne tłumaczenie oficjalnej aktualizacji incydentu.