39 Better Uptime incidents · février 2023 — official updates, affected components, duration and resolution details.
Le tableau de bord de télémétrie pourrait être indisponible pour certains clients en raison d'un problème de base de données, nous enquêtons.
Le problème a été résolu, nous nous excusons pour l'incovenience, veuillez nous dire si nous pouvons aider avec quoi que ce soit à [email protected].
Traduit automatiquement depuis la mise à jour officielle de l'incident.
We'll be migrating some Telemetry sources to new, more robust infrastructure. Each source will be affected for no more than 90 minutes. During the migration there may be brief gaps in dashboard charts and delayed Live tail data. Queries through the SQL Connections API may briefly return an error rather than incomplete results. Please reach out to us at [email protected] if you have any questions.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous rencontrons actuellement des problèmes avec les changements de configuration des sources de télémétrie et la création de nouvelles sources. Les requêtes et l'ingestion ne sont pas affectées. Nous enquêtons.
Ce problème a maintenant été résolu, toutes les mises à jour de la source et de la configuration devraient maintenant se propager comme prévu.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous subissons actuellement une panne dans notre infrastructure de transmission AWS Direct Connect; cela peut entraîner des retards ou des défaillances dans l'ingestion de données.
Le problème du réseau qui cause ce problème a été résolu.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous sommes actuellement confrontés à un problème d'infrastructure qui affecte certaines demandes de clients dans notre région d'Europe.
La question des infrastructures a été résolue.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous enquêtons actuellement sur des erreurs transitoires qui affectent les performances de notre plateforme Uptime. Nous sommes désolés pour le dérangement.
Nous avons résolu la dégradation des performances de Uptime.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous sommes atténuants. Besoin d'aide ? Faites-nous savoir à [email protected]
L'attaque a été atténuée avec succès par notre protection DDoS. Excuses sincères pour le désagrément. Besoin d'aide ? Faites-nous savoir à [email protected].
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Bunny CDN, l'un de nos fournisseurs de CDN, connaît un bug logiciel sur leur PoP situé au Royaume-Uni. Nous sommes en contact avec eux et la question devrait être résolue dans quelques minutes. Nous nous excusons pour le désagrément. Si vous avez besoin d'urgence d'utiliser le tableau de bord, veuillez utiliser un VPN pour vous connecter à n'importe quel emplacement américain. Je vous remercie.
Bunny CDN a résolu le problème. Nous nous excusons pour le désagrément.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous assistons actuellement à des retards dans le traitement des données pour certaines sources situées dans notre cluster américain East. La cause fondamentale sous-jacente a été résolue; cependant, il peut prendre un certain temps pour que toutes les données historiques apparaissent pleinement dans la queue Live. Veuillez noter qu'il n'y a ** aucune perte de données** — toutes les données entrantes sont ingérées et deviendront visibles au fur et à mesure que le système rattrape. Si vous avez des questions, n'hésitez pas à contacter **[[email protected]](mailto:[email protected])**.
Le retard antérieur affectant certaines sources de notre groupe américain est a été entièrement résolu. Toutes les données ont été traitées et sont visibles dans Live Tai, avec ** aucune perte de données**. Si vous avez des questions, veuillez nous contacter à **[[email protected]](mailto:[email protected])**.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous voyons actuellement des latences de requêtes élevées et des échecs temporaires dans notre cluster eu-nbg-2. Les données entrantes sont ingérées, mais le traitement peut être retardé pour certaines sources, et certaines requêtes peuvent également échouer ou renvoyer des résultats incomplets. Notre équipe d'ingénieurs travaille activement à cette fin et l'arriéré est déjà réduit et nous nous attendons à une reprise complète sous peu. Nous allons garder cette page mise à jour dès que nous avons d'autres mises à jour.
Les questions posées dans eu-nbg-2 sont maintenant pour la plupart résolues. Le retard d'ingestion s'est également complètement arrêté à peu près au même moment, et les données sont traitées comme prévu. Nous continuons à surveiller de près le cluster et nous réexaminons le pipeline d'ingestion pour nous assurer que tout est stable et qu'il fonctionne normalement. Merci beaucoup pour votre patience et faites-nous savoir à `[email protected]` si quelque chose!
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous sommes actuellement confrontés à un problème où l'interface utilisateur Better Stack est temporairement inaccessible. Nos services d'arrière-plan, nos infrastructures de surveillance, nos API et nos alertes sont pleinement opérationnels, mais Cloudflare subit une panne mondiale qui affecte le routage et empêche le chargement de notre tableau de bord. Vous pouvez suivre l'incident en amont ici: https://www.cloudflarestatus.com/incidents/8gmgl950y3h7 Nous surveillons activement la situation et rétablissons le plein accès dès que Cloudflare résoudra ses problèmes de routage. Toutes les fonctions de base — contrôles, battements de cœur, alertes, ingestion de logs et mesures — continuent de fonctionner normalement en arrière-plan. Merci pour votre patience
L'interface utilisateur Better Stack est maintenant accessible à nouveau, et de nombreux utilisateurs devraient être en mesure de charger le tableau de bord normalement. Les pannes mondiales de Cloudflare sont toujours en cours, et bien que leur réseau soit devenu plus stable, les problèmes de routage intermittents peuvent continuer. Cela signifie que vous pouvez encore voir occasionnellement le lent chargement ou des taux d'erreur élevés que la situation récupère complètement. Nous continuons à surveiller l'incident en amont et partagerons d'autres mises à jour lorsque Cloudflare stabilisera leurs systèmes.
Cloudflare a surtout résolu les problèmes de routage sous-jacents liés à leur panne globale, et leurs systèmes fonctionnent maintenant normalement. Avec leur réseau stabilisé, l'interface utilisateur Better Stack et tous les services connexes sont à nouveau entièrement accessibles. Tout de notre côté fonctionne maintenant comme prévu, et nous ne voyons plus des taux d'erreur élevés ou des performances dégradées. Nous continuerons de surveiller la situation, mais aucun autre impact n'est attendu. Si vous avez des questions ou remarquez quelque chose d'inhabituel, n'hésitez pas à nous contacter à [email protected] — nous sommes heureux de vous aider. Merci de votre patience tout au long de l'incident
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous voyons actuellement des problèmes de timeout intermittents affectant certaines pages de statut personnalisées. Les premières erreurs commencent à apparaître vers 13h55 UTC, certaines demandes ne retournant aucune réponse dans plusieurs régions. Nous examinons cette question maintenant et allons partager une autre mise à jour sous peu.
Les problèmes de délais sont maintenant résolus. Nous appliquons des mesures d'atténuation aux alentours de 14h15 UTC, et les pages de statut touchées commencent à répondre normalement. Merci beaucoup pour votre patience pendant que nous travaillons là-dessus.
À la suite de la question du délai d'attente, nous voyons qu'un petit sous-ensemble de pages d'état personnalisées n'a pas entièrement récupéré après la correction initiale à 14h15 UTC. Certaines de ces pages sont maintenant confrontées à des erreurs liées à SSL, telles que des défaillances de validation de certificat ou des délais, en raison d'un composant interne qui ne se comporte pas correctement après la perturbation antérieure. Nous continuons d'étudier et partagerons d'autres mises à jour dès que nous les aurons.
Nous avons résolu un problème qui a causé l'échec de certaines pages d'état personnalisées pour charger ou retourner des erreurs de timeout. Le problème était lié au processus de traitement des certificats, qui a temporairement empêché certaines pages d'obtenir ou de rafraîchir leurs certificats SSL. Toutes les pages affectées sont maintenant chargées à nouveau normalement. Merci beaucoup pour votre patience et votre compréhension. Veuillez nous informer à [email protected] si vous avez d'autres questions.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous observons des taux d'erreur élevés dans notre service de livraison de courriels en raison d'une panne continue de SSFE. Par conséquent, certains courriels de notification peuvent être retardés. La surveillance et le traitement des données sont pleinement opérationnels.
Les livraisons par courrier électronique sont de retour à la normale.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous sommes actuellement confrontés à une panne de réseau dans notre centre de données fournisseur qui affecte une partie des requêtes et cause des retards dans l'ingestion de données. Notre équipe travaille activement avec le fournisseur pour résoudre le problème le plus rapidement possible. Nous vous tiendrons au courant dès que nous aurons plus de détails. Merci de votre patience pendant que nous travaillons à ramener tout à la normale.
La plupart de notre réseau a maintenant été restauré; s'il vous plaît porter avec nous que toute donnée retardée est insérée, et la fonctionnalité de requête complète est restaurée.
Le problème a été résolu; toutes les données en attente ont été ingérées et les requêtes sont pleinement opérationnelles.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous enquêtons actuellement sur un problème où les journaux envoyés via RSyslog de Digital Ocean n'atteignent pas notre seuil d'ingestion. Cela a commencé après la migration planifiée des anciennes sources Rsyslog vers notre nouvelle infrastructure cloud et semble seulement affecter la plateforme Digital Ocean. Nous coopérons actuellement avec l'équipe Digital Ocean sur un correctif et nous fournirons des mises à jour dès que possible.
Nous avons identifié la cause racine et il semble que les enregistrements DNS d'Ocean Digital n'ont pas encore été mis à jour pour indiquer les nouveaux paramètres. Cela a causé une incompatibilité et une indisponibilité temporaire de l'ingestion de log. Nous travaillons activement avec l'équipe de Digital Ocean pour résoudre ce problème. Nous partagerons bientôt plus de détails.
Nous avons identifié un problème de résolution DNS entre Digital Ocean et Better Stack. Ce problème a été résolu et les registres sont maintenant traités normalement.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Certains clients connaissent des retards dans l'ingestion de log et des performances de requêtes plus lentes. Nous nous excusons sincèrement pour cette perturbation répétée. Notre équipe s'emploie activement à identifier la cause profonde et fournira d'autres mises à jour dès que nous aurons plus d'informations. Merci de votre patience et de votre compréhension.
Cette question a été réglée. Les retards d'ingestion et les performances des requêtes sont revenus à la normale pour tous les clients touchés. Nous nous excusons pour les perturbations répétées et apprécions votre patience alors que nous avons travaillé pour rétablir le service. Notre équipe continue de suivre la situation de près afin d'assurer une stabilité continue. Si vous continuez d'éprouver des problèmes, veuillez nous contacter immédiatement.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Certains clients connaissent une fois de plus des retards dans l'ingestion de log et des performances de requêtes plus lentes. Nous nous excusons pour la récurrence et comprenons à quel point cela peut être perturbateur. Notre équipe enquête activement sur la cause sous-jacente, et nous partagerons plus de détails dès que nous les aurons. Merci pour votre patience et votre compréhension!
Cette question a été réglée. L'ingestion de log et la performance des requêtes sont maintenant stables. Nous nous excusons à nouveau pour cette perturbation et apprécions votre patience pendant que nous nous attaquons à cette récurrence. Si vous remarquez des problèmes en cours, veuillez nous contacter immédiatement.
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous enquêtons actuellement sur des rapports de retards sporadiques de l'ingestion de logs et de réduction du rendement des requêtes ayant une incidence sur un sous-ensemble de sources. Notre équipe d'ingénieurs travaille avec diligence pour identifier la cause et les systèmes de retour à une vitesse normale le plus rapidement possible. Nous partagerons une autre mise à jour dès que nous aurons plus d'informations — merci de nous avoir accompagnés!
Cette question a été résolue. L'ingestion de log et la performance de la requête sont revenues à la normale. Merci de votre patience pendant que nous avons travaillé pour régler cet incident. Si vous continuez à éprouver des problèmes, n'hésitez pas à contacter "[email protected]".
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous sommes au courant des rapports de retards intermittents dans l'ingestion de log et de performances de requêtes plus lentes que normales affectant certains clients. Notre équipe d'ingénieurs étudie activement la cause fondamentale et travaille à restaurer la pleine performance dès que possible. Nous publierons une autre mise à jour une fois que nous aurons plus de détails – merci pour votre patience!
Nous avons identifié et résolu la cause profonde du problème. Les retards dans l'ingestion des journaux sont éliminés et la performance des requêtes est revenue à la normale. Si vous continuez à rencontrer des problèmes, veuillez nous contacter à l'adresse `[email protected]`. Merci de votre patience!
Traduit automatiquement depuis la mise à jour officielle de l'incident.
Nous enquêtons actuellement sur un problème entraînant des retards intermittents dans l'ingestion de log et des performances de requêtes plus lentes pour certains clients. Notre équipe d'ingénieurs s'efforce de rétablir le service complet le plus rapidement possible. Nous veillerons à vous tenir au courant une fois qu'il y aura plus de détails. Merci beaucoup pour votre patience!
La performance des requêtes est de retour à la normale et tous les journaux retardés sont maintenant ingérés; aucune donnée n'a été perdue. Nous continuons à surveiller le système pour nous assurer que tout reste stable. Merci de votre patience et de votre engagement. Si vous observez des problèmes persistants, veuillez nous en informer à l'adresse `[email protected]`.
Traduit automatiquement depuis la mise à jour officielle de l'incident.