39 Better Uptime incidents · febbraio 2023 — official updates, affected components, duration and resolution details.
La dashboard di Telemetry potrebbe non essere disponibile per alcuni clienti a causa di un problema di database, stiamo indagando.
Il problema è stato risolto, ci scusiamo per l'incovenienza, per favore fateci sapere se possiamo aiutare con qualcosa a [email protected].
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
We'll be migrating some Telemetry sources to new, more robust infrastructure. Each source will be affected for no more than 90 minutes. During the migration there may be brief gaps in dashboard charts and delayed Live tail data. Queries through the SQL Connections API may briefly return an error rather than incomplete results. Please reach out to us at [email protected] if you have any questions.
Stiamo vivendo alcuni problemi con le modifiche di configurazione della sorgente Telemetry e la creazione di nuove fonti. Le query e l'ingestione non sono influenzate. Stiamo indagando.
Questo problema è stato risolto, tutti gli aggiornamenti di origine e configurazione dovrebbero ora propagarsi come previsto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Attualmente stiamo sperimentando un outage nella nostra infrastruttura di inoltro AWS Direct Connect; questo può introdurre ritardi o guasti per ingerire i dati.
Il problema della rete che causa questo problema è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Attualmente stiamo vivendo un problema di infrastrutture che sta influenzando alcune domande dei clienti nella nostra regione Europa.
Il problema delle infrastrutture è stato risolto.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo attualmente indagando su alcuni errori transitori che stanno influenzando le prestazioni della nostra piattaforma Uptime. Ci dispiace molto per l'inconveniente.
Abbiamo risolto il degrado delle prestazioni di Uptime.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo mitigando. Ti serve aiuto? Fateci sapere a [email protected]
L'attacco è stato mitigato con successo dalla nostra protezione DDoS. Le scuse sincere per l'inconveniente. Ti serve aiuto? Facci sapere a [email protected].
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Bunny CDN, uno dei nostri fornitori di CDN, sta sperimentando un bug software sul loro PoP localizzato nel Regno Unito. Siamo in contatto con loro e il problema dovrebbe essere risolto in pochi minuti. Ci scusiamo per l'inconveniente. Se avete urgente bisogno di utilizzare il cruscotto, si prega di utilizzare una VPN per connettersi a qualsiasi posizione degli Stati Uniti. Grazie.
Bunny CDN ha risolto il problema. Ci scusiamo per l'inconveniente.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Attualmente stiamo vedendo l'elaborazione dei dati ritardata per alcune fonti situate nel nostro cluster est degli Stati Uniti. La causa principale è stata risolta; tuttavia, potrebbe richiedere un po 'di tempo per tutti i dati storici di apparire completamente in coda viva. Si prega di notare che non c'è ** nessuna perdita di dati** — tutti i dati in arrivo sono ingeriti e saranno visibili come il sistema raggiunge. Se avete domande, non esitate a contattarci all'indirizzo **[[email protected]](mailto:[email protected])**.
Il ritardo precedente che colpisce alcune fonti nel nostro cluster est degli Stati Uniti è stato completamente risolto. Tutti i dati sono stati ora elaborati ed è visibile in coda viva, con ** nessuna perdita di dati**. Se avete domande, vi preghiamo di contattarci al **[[email protected]](mailto:[email protected])**.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Attualmente stiamo vedendo elevata latenza di query e guasti temporanei nel nostro cluster eu-nbg-2. I dati in arrivo vengono ingeriti, ma il trattamento potrebbe essere ritardato per alcune delle fonti, e alcune domande potrebbero anche fallire o restituire risultati incompleti. Il nostro team di ingegneria sta lavorando attivamente su questo e il backlog è già in fase di riduzione e ci aspettiamo il pieno recupero a breve. Manterremo questa pagina aggiornata non appena avremo altri aggiornamenti.
I problemi di query in eu-nbg-2 sono ora per lo più risolti. Il ritardo di ingestione è anche completamente ripreso intorno allo stesso tempo, e i dati vengono elaborati come previsto. Stiamo continuando a monitorare il cluster da vicino e stiamo esaminando la pipeline di ingestione per garantire che tutto sia stabile e performante normalmente. Grazie mille per la vostra pazienza e fateci sapere a `[email protected]` semmai!
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Attualmente stiamo vivendo un problema in cui l'interfaccia utente di Better Stack è temporaneamente inaccessibile. I nostri servizi di backend, l'infrastruttura di monitoraggio, le API e l'avviso sono completamente operativi — tuttavia, Cloudflare sta subendo un outage globale che sta influenzando il routing e impedisce al nostro cruscotto di caricare. È possibile monitorare l'incidente a monte qui: https://www.cloudflarestatus.com/incidents/8gmgl950y3h7 Stiamo monitorando attivamente la situazione e ripristinare l'accesso completo non appena Cloudflare risolve i loro problemi di routing. Tutte le funzionalità principali — controlli, battiti cardiaci, avvisi, ingestione di registro e metriche — continuano a funzionare normalmente in background. Grazie per la vostra pazienza
Il Better Stack UI è ora più accessibile di nuovo, e molti utenti dovrebbero essere in grado di caricare il cruscotto normalmente. L'outage globale di Cloudflare è ancora in corso, e mentre la loro rete è diventata più stabile, problemi di routing intermittenti possono continuare. Ciò significa che si possono ancora vedere i tassi di caricamento lento occasionale o di errore elevato come la situazione recupera completamente. Stiamo continuando a monitorare l'incidente a monte e condividere ulteriori aggiornamenti come Cloudflare stabilizza i loro sistemi.
Cloudflare ha per lo più risolto i problemi di routing sottostanti relativi al loro outage globale, e i loro sistemi sono ora operativi normalmente. Con la loro rete stabilizzata, il Better Stack UI e tutti i servizi correlati sono completamente accessibili di nuovo. Tutto da parte nostra è ora in esecuzione come previsto, e non stiamo più vedendo elevati tassi di errore o prestazioni degradate. Continueremo a monitorare la situazione, ma non è previsto alcun ulteriore impatto. Se avete domande o notate qualcosa di insolito, non esitate a contattarci all’indirizzo [email protected] – siamo lieti di aiutarvi. Grazie per la vostra pazienza durante l'incidente
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Attualmente stiamo vedendo problemi di timeout intermittenti che interessano alcune pagine di stato personalizzate. I primi errori iniziano a comparire intorno a 1:55 PM UTC, con alcune richieste che non ritornano risposta in più regioni. Stiamo cercando in questo ora e condivideremo un altro aggiornamento a breve.
I problemi di timeout sono ora risolti. Applichiamo mitigazioni intorno alle 14:15 PM UTC, e le pagine di stato interessate iniziano a rispondere di nuovo normalmente. Grazie mille per la vostra pazienza mentre lavoriamo attraverso questo.
A seguito del problema di timeout precedente, stiamo vedendo che un piccolo sottoinsieme di pagine di stato personalizzate non si è completamente recuperato dopo la correzione iniziale a 14:15 PM UTC. Alcune di queste pagine stanno ora riscontrando errori correlati a SSL, come guasti di convalida del certificato o timeout, a causa di un componente interno che non si comporta correttamente dopo l'interruzione precedente. Stiamo continuando a indagare e condividere ulteriori aggiornamenti non appena li abbiamo.
Abbiamo risolto un problema che ha causato alcune pagine di stato personalizzate per non caricare o restituire errori di timeout. Il problema era relativo al flusso di lavoro di gestione certificati, che temporaneamente ha impedito a determinate pagine di ottenere o aggiornare i loro certificati SSL. Tutte le pagine interessate stanno ora caricando di nuovo normalmente. Grazie mille per la vostra pazienza e comprensione. Fateci sapere a [email protected] se avete ulteriori domande.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo vedendo i tassi di errore elevati nel nostro servizio di consegna e-mail a causa di un outage AWS in corso. Di conseguenza, alcune e-mail di notifica possono essere ritardate. Il monitoraggio dei tempi e il trattamento dei dati sono completamente operativi.
Le consegne via email sono tornate alla normalità.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo attualmente sperimentando un outage di rete nel data center del nostro fornitore che sta influenzando una parte di query e causando ritardi nell'ingestione dei dati. Il nostro team sta lavorando attivamente con il fornitore per risolvere il problema il più rapidamente possibile. Vi terremo aggiornati non appena avremo ulteriori dettagli. Grazie per la vostra pazienza mentre lavoriamo per riportare tutto alla normalità.
La maggior parte della nostra rete è ora stata ripristinata; si prega di portare con noi come qualsiasi dato ritardato è inserito, e la piena funzionalità di query è ripristinata.
Il problema è stato risolto; tutti i dati in sospeso sono stati ingeriti e le domande sono completamente operative.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo attualmente indagando su un problema in cui i registri inviati tramite RSyslog da Digital Ocean non raggiungono il nostro endpoint di ingestione. Questo è iniziato dopo la migrazione pianificata delle vecchie fonti Rsyslog alla nostra nuova infrastruttura cloud e sembra solo influenzare la piattaforma Digital Ocean. Attualmente stiamo collaborando con il team di Digital Ocean in una soluzione e forniremo aggiornamenti il prima possibile.
Abbiamo identificato la causa principale e sembra che i record DNS di Digital Ocean non siano stati ancora aggiornati per puntare ai nuovi endpoint. Ciò ha causato l'incompatibilità e l'invalidità temporanea dell'ingestione di log. Stiamo lavorando attivamente con il team di Digital Ocean per risolvere questo problema. Condividiamo più dettagli a breve.
Abbiamo identificato un problema con la risoluzione DNS tra Digital Ocean e Better Stack. Questo è ora stato risolto, e i registri sono ora in fase di elaborazione normalmente.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Alcuni clienti stanno vivendo ritardi nell'ingestione di log e più lente prestazioni di query ancora una volta. Ci scusiamo sinceramente per la ripetuta interruzione. Il nostro team sta lavorando attivamente per identificare la causa principale e fornirà ulteriori aggiornamenti non appena abbiamo ulteriori informazioni. Grazie per la vostra pazienza e comprensione.
Questo problema è stato risolto. I ritardi di registrazione e le prestazioni di query sono tornati alla normalità per tutti i clienti interessati. Ci scusiamo per le ripetute interruzioni e apprezziamo la vostra pazienza mentre abbiamo lavorato per ripristinare il servizio. Il nostro team continua a monitorare attentamente la situazione per garantire una stabilità costante. Se continuate a sperimentare qualsiasi problema, contattateci subito.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Alcuni clienti stanno ancora una volta sperimentando ritardi nell'ingestione dei registri e più lente prestazioni di query. Ci scusiamo per la ricorrenza e capiamo quanto possa essere dirompente. Il nostro team sta attivamente indagando sulla causa sottostante, e condivideremo più dettagli non appena li avremo. Grazie per la vostra continua pazienza e comprensione!
Questo problema è stato risolto. Le prestazioni di log ingestion e query sono ora stabili. Ci scusiamo ancora per la disgregazione e apprezziamo la vostra pazienza mentre abbiamo affrontato questa ricorrenza. Se noti problemi in corso, ti preghiamo di contattarci subito.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo attualmente indagando i rapporti dei ritardi di ingestione dei registri sporadici e le prestazioni di query ridotte che influenzano un sottoinsieme di fonti. Il nostro team di ingegneria sta lavorando diligentemente per identificare la causa e i sistemi di ritorno alla velocità normale il più rapidamente possibile. Condivideremo un altro aggiornamento non appena avremo maggiori informazioni, grazie per averci portato con noi!
Questo problema è stato risolto. Le prestazioni di log ingestion e query sono tornate alla normalità. Grazie per la vostra pazienza mentre abbiamo lavorato per affrontare questo incidente. Se si continua a sperimentare qualsiasi problema, non esitate a contattare "[email protected]".
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Siamo consapevoli dei rapporti di ritardi intermittenti nell’ingestione dei registri e delle prestazioni di query più lente di quelle normali che interessano alcuni clienti. Il nostro team di ingegneri sta attivamente indagando sulla causa principale e lavorando per ripristinare le prestazioni complete il prima possibile. Posteremo un altro aggiornamento una volta che abbiamo più dettagli—grazie per la vostra pazienza!
Abbiamo identificato e risolto la causa principale del problema. I ritardi di ingestione dei registri sono cancellati e le prestazioni di query sono tornate alla normalità. Se continui a sperimentare qualsiasi problema, ti preghiamo di contattarci all'indirizzo `[email protected]`. Grazie per la vostra pazienza!
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.
Stiamo attualmente indagando su un problema che causa ritardi intermittenti nell'ingestione del registro e le prestazioni di query più lente per alcuni clienti. Il nostro team di ingegneria sta lavorando per ripristinare il servizio completo il più rapidamente possibile. Ci assicureremo di tenerti aggiornato una volta che ci sono più dettagli. Grazie mille per la vostra pazienza!
Le prestazioni di query sono tornate alla normalità e tutti i registri ritardati sono ora ingeriti; nessun dato è stato perso. Stiamo continuando a monitorare il sistema per garantire che tutto rimanga stabile. Grazie per la vostra pazienza e per portare con noi. Se osservate eventuali problemi persistenti, fateci sapere a `[email protected]`.
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.