39 Better Uptime incidents · Cʼhwevrer 2023 — official updates, affected components, duration and resolution details.
O painel de telemetria pode não estar disponível para alguns clientes devido a um problema na base de dados, estamos a investigar.
O problema foi resolvido, pedimos desculpas pela incoveniência, por favor, avise-nos se pudermos ajudar com alguma coisa em [email protected].
Traduzido automaticamente da atualização oficial do incidente.
We'll be migrating some Telemetry sources to new, more robust infrastructure. Each source will be affected for no more than 90 minutes. During the migration there may be brief gaps in dashboard charts and delayed Live tail data. Queries through the SQL Connections API may briefly return an error rather than incomplete results. Please reach out to us at [email protected] if you have any questions.
Atualmente, estamos experimentando alguns problemas com mudanças de configuração de fonte de Telemetria e criação de novas fontes. Consultas e ingestão não são afetadas. Estamos a investigar.
Este problema já foi resolvido, todas as atualizações de fonte e configuração devem agora propagar-se como esperado.
Traduzido automaticamente da atualização oficial do incidente.
Atualmente, estamos passando por uma falha na nossa infraestrutura de encaminhamento do AWS Direct Connect; isso pode introduzir atrasos ou falhas na ingestão de dados.
O problema da rede que causa este problema foi resolvido.
Traduzido automaticamente da atualização oficial do incidente.
Estamos actualmente a viver um problema de infra-estruturas que está a afectar algumas consultas de clientes na nossa região da Europa.
A questão das infra-estruturas foi resolvida.
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos investigando alguns erros transitórios que estão afetando o desempenho de nossa plataforma Uptime. Lamentamos muito o inconveniente.
Resolvemos as degradações do desempenho de Uptime.
Traduzido automaticamente da atualização oficial do incidente.
Estamos a mitigar. Precisas de ajuda? Avise-nos em [email protected]
O ataque foi atenuado com sucesso pela nossa protecção DDoS. Peço desculpa pela inconveniência. Precisas de ajuda? Avise-nos em [email protected].
Traduzido automaticamente da atualização oficial do incidente.
O Bunny CDN, um dos nossos fornecedores de CDN, está a experimentar um erro de software no seu PoP localizado no Reino Unido. Estamos em contacto com eles e o assunto deve ser resolvido dentro de alguns minutos. Pedimos desculpa pelo inconveniente. Se você precisa urgentemente usar o painel, por favor, use uma VPN para se conectar a qualquer local dos EUA. Obrigado.
A CDN Bunny resolveu o problema. Pedimos desculpa pelo inconveniente.
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos vendo o processamento de dados atrasado para algumas fontes localizadas em nosso cluster do leste dos EUA. A causa raiz subjacente foi resolvida; no entanto, pode levar algum tempo para que todos os dados históricos apareçam totalmente na cauda Live. Por favor, note que não há ** nenhuma perda de dados** — todos os dados recebidos são ingeridos e ficarão visíveis à medida que o sistema recuperar. Se você tiver alguma dúvida, sinta-se livre para entrar em contato em ** [[email protected]](mailto:[email protected])**.
O atraso anterior que afeta algumas fontes em nosso cluster leste dos EUA foi totalmente resolvido. Todos os dados agora foram processados e é visível na cauda Live, com ** nenhuma perda de dados**. Se tiver alguma dúvida, entre em contato conosco em **[[email protected]](mailto:[email protected])**.
Traduzido automaticamente da atualização oficial do incidente.
Atualmente, estamos vendo latência de consulta elevada e falhas temporárias em nosso cluster eu-nbg-2. Os dados recebidos estão sendo ingeridos, mas o processamento pode ser atrasado para algumas das fontes, e algumas consultas também podem falhar ou retornar resultados incompletos. Nossa equipe de engenharia está trabalhando ativamente nisso e o atraso já está sendo reduzido e esperamos recuperação completa em breve. Manteremos esta página atualizada assim que tivermos mais atualizações.
As questões de consulta em eu-nbg-2 estão agora em sua maioria resolvidas. A defasagem de ingestão também foi totalmente captada ao mesmo tempo, e os dados estão sendo processados como esperado. Continuamos a monitorar o cluster de perto e estamos revisando o pipeline de ingestão para garantir que tudo esteja estável e funcionando normalmente. Muito obrigado por sua paciência e deixe-nos saber em `[email protected]` se alguma coisa!
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos experimentando um problema onde a interface Better Stack é temporariamente inacessível. Nossos serviços de infraestrutura, infraestrutura de monitoramento, APIs e alertas estão totalmente operacionais — no entanto, a Cloudflare está passando por uma falha global que está impactando o roteamento e impedindo nosso painel de carregar. Você pode rastrear o incidente a montante aqui: https://www.cloudflarestatus.com/incidentes/8gmgl950y3h7 Estamos monitorando a situação ativamente e restauraremos o acesso total assim que a Cloudflare resolver seus problemas de roteamento. Todas as funcionalidades principais — verificações, batimentos cardíacos, alertas, ingestão de logs e métricas — continuam a funcionar normalmente em segundo plano. Obrigado pela sua paciência
A interface Better Stack está agora mais acessível novamente, e muitos usuários devem ser capazes de carregar o painel normalmente. A falha global da Cloudflare ainda está em andamento, e enquanto sua rede se tornou mais estável, problemas intermitentes de roteamento podem continuar. Isso significa que você ainda pode ver carga lenta ocasional ou taxas de erro elevadas como a situação se recupera totalmente. Continuamos a monitorar o incidente a montante e compartilharemos atualizações adicionais à medida que a Cloudflare estabilizar seus sistemas.
Cloudflare tem resolvido principalmente os problemas de roteamento subjacentes relacionados à sua falha global, e seus sistemas agora estão funcionando normalmente. Com sua rede estabilizada, a interface Better Stack e todos os serviços relacionados são totalmente acessíveis novamente. Tudo do nosso lado está agora funcionando como esperado, e não estamos mais vendo taxas de erro elevadas ou desempenho degradado. Continuaremos a acompanhar a situação, mas não se espera mais impacto. Se você tiver alguma dúvida ou notar algo incomum, por favor, sinta-se à vontade para nos contatar em [email protected] — estamos felizes em ajudar. Obrigado pela sua paciência durante todo o incidente
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos vendo problemas intermitentes de tempo limite afetando algumas páginas de status personalizados. Os primeiros erros começam a aparecer em torno de 1:55 PM UTC, com certos pedidos retornando nenhuma resposta em várias regiões. Estamos olhando para isso agora e vamos compartilhar outra atualização em breve.
As questões de tempo de espera estão agora resolvidas. Aplicamos mitigação por volta das 2:15 PM UTC, e páginas de status afetadas começam a responder normalmente novamente. Muito obrigado pela vossa paciência enquanto lidamos com isto.
Após o problema de timeout anterior, estamos vendo que um pequeno subconjunto de páginas de status personalizado não se recuperou totalmente após a correção inicial às 2:15 PM UTC. Algumas dessas páginas estão agora encontrando erros relacionados ao SSL, como falhas de validação de certificados ou timeouts, devido a um componente interno não se comportar corretamente após a interrupção anterior. Continuamos a investigar e compartilharemos mais atualizações assim que as tivermos.
Resolvemos um problema que fez com que algumas páginas de status personalizadas não carregassem ou retornassem erros de timeout. O problema estava relacionado ao fluxo de trabalho de manipulação de certificados, o que impedia temporariamente certas páginas de obter ou refrescar seus certificados SSL. Todas as páginas afetadas estão carregando normalmente novamente. Muito obrigado pela vossa paciência e compreensão. Por favor, avise-nos em [email protected] se tiver mais perguntas.
Traduzido automaticamente da atualização oficial do incidente.
Estamos vendo taxas de erro elevadas em nosso serviço de entrega de e-mail devido a uma falha contínua do AWS. Como resultado, alguns e-mails de notificação podem ser atrasados. O monitoramento e o processamento de dados estão totalmente operacionais.
As entregas de e-mail voltaram ao normal.
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos experimentando uma falha de rede no data center do nosso provedor que está impactando uma porção de consultas e causando atrasos na ingestão de dados. Nossa equipe está trabalhando ativamente com o provedor para resolver o problema o mais rápido possível. Vamos mantê-lo atualizado assim que tivermos mais detalhes. Obrigado por sua paciência enquanto trabalhamos para trazer tudo de volta ao normal.
A maior parte da nossa rede já foi restaurada; por favor, suporte-nos à medida que qualquer dado atrasado é inserido, e a funcionalidade de consulta completa é restaurada.
O problema foi resolvido; todos os dados pendentes foram ingeridos e as consultas estão totalmente operacionais.
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos investigando um problema onde os logs enviados via RSyslog da Digital Ocean não estão atingindo nosso objetivo de ingestão. Isso começou após a migração planejada das antigas fontes Rsyslog para nossa nova infraestrutura de nuvem e só parece estar afetando a plataforma Digital Ocean. Atualmente estamos cooperando com a equipe Digital Ocean em uma solução e forneceremos atualizações o mais rápido possível.
Identificamos a causa raiz e parece que os registros DNS da Digital Ocean ainda não foram atualizados para apontar para os novos objetivos. Isto causou incompatibilidade e indisponibilidade temporária da ingestão de log. Estamos trabalhando ativamente com a equipe Digital Ocean para resolver isso. Vamos compartilhar mais detalhes em breve.
Identificamos um problema com resolução DNS entre o Digital Ocean e Better Stack. Isso já foi resolvido, e os registros estão sendo processados normalmente.
Traduzido automaticamente da atualização oficial do incidente.
Alguns clientes estão passando por atrasos na ingestão de log e desempenho de consulta mais lento mais uma vez. Pedimos sinceras desculpas pelo rompimento repetido. Nossa equipe está trabalhando ativamente para identificar a causa raiz e fornecerá atualizações adicionais assim que tivermos mais informações. Obrigado pela vossa paciência e compreensão.
Esta questão já foi resolvida. Atrasos na ingestão de log e desempenho de consulta retornaram ao normal para todos os clientes afetados. Pedimos desculpas pelas repetidas interrupções e apreciamos sua paciência enquanto trabalhávamos para restaurar o serviço. A nossa equipa continua a acompanhar de perto a situação para garantir a estabilidade contínua. Se você continuar a experimentar quaisquer problemas, por favor, entre em contato conosco imediatamente.
Traduzido automaticamente da atualização oficial do incidente.
Alguns clientes estão novamente experimentando atrasos na ingestão de log e desempenho de consulta mais lento. Pedimos desculpas pela recorrência e entendemos como isso pode ser perturbador. Nossa equipe está ativamente investigando a causa subjacente, e compartilharemos mais detalhes assim que as tivermos. Obrigado por sua paciência e compreensão contínuas!
Esta questão já foi resolvida. Log ingestão e desempenho da consulta agora está estável. Pedimos novamente desculpas pela interrupção e apreciamos a sua paciência enquanto abordamos esta recorrência. Se notarem quaisquer problemas em curso, por favor contactem-nos imediatamente.
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos investigando relatos de atrasos na ingestão de logs esporádicos e redução do desempenho de consultas impactando um subconjunto de fontes. Nossa equipe de engenharia está trabalhando diligentemente para identificar a causa e retornar os sistemas à velocidade normal o mais rápido possível. Vamos compartilhar outra atualização assim que tivermos mais informações – obrigado por nos acompanhar!
Esta questão foi resolvida. A ingestão de log e o desempenho da consulta retornaram ao normal. Obrigado pela sua paciência enquanto trabalhávamos para resolver este incidente. Se você continuar a experimentar quaisquer problemas, por favor, não hesite em entrar em contato com "[email protected]".
Traduzido automaticamente da atualização oficial do incidente.
Estamos cientes de relatórios de atrasos intermitentes na ingestão de log e desempenho de consulta mais lento do que o normal afetando alguns clientes. Nossa equipe de engenharia está ativamente investigando a causa raiz e trabalhando para restaurar o desempenho total o mais rápido possível. Publicaremos outra atualização quando tivermos mais detalhes – obrigado pela sua paciência!
Identificamos e resolvemos a causa básica do problema. Os atrasos na ingestão do log são apagados e o desempenho da consulta voltou ao normal. Se você continuar a experimentar quaisquer problemas, por favor, entre em contato conosco em `[email protected]`. Obrigado pela vossa paciência!
Traduzido automaticamente da atualização oficial do incidente.
Atualmente estamos investigando um problema causando atrasos intermitentes na ingestão de log e desempenho de consulta mais lento para alguns clientes. Nossa equipe de engenharia está trabalhando para restaurar o serviço completo o mais rápido possível. Vamos mantê-lo informado assim que houver mais detalhes. Muito obrigado pela sua paciência!
O desempenho da consulta está de volta ao normal e todos os registros atrasados estão sendo ingeridos; nenhum dado foi perdido. Continuamos a monitorar o sistema para garantir que tudo permaneça estável. Obrigado pela vossa paciência e pela vossa paciência. Se você observar qualquer problema persistente, por favor, avise-nos em `[email protected]`.
Traduzido automaticamente da atualização oficial do incidente.