24 Vector incidents · Januar 2025 — official updates, affected components, duration and resolution details.
Eine Verlangsamung der Verarbeitung führt zu standortweiten Verzögerungen. Unsere Ingenieure untersuchen aktiv; wir werden ein Update zur Stunde geben.
Die Datenbank hat sich erholt und wir sehen schnellere Verarbeitungszeiten. Dies sollte vollständig gelöst werden.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Laufende GCP-Probleme verursachen standortweit Latenz. Unsere Ingenieure arbeiten aktiv daran, die Verschlechterung der Systemleistung zu beheben.
Wir sehen Systemwiederherstellung in allen Diensten.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure arbeiten daran, eine Lösung für ein Problem zu finden, das standortweit zu intermittierenden Verzögerungen führen kann.
Nach der Überwachung einer konsistenten Stabilitätsphase wurden alle Dienste wiederhergestellt und funktionieren wie erwartet.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure untersuchen ein Indexierungs-Backup, das Ladeverzögerungen verursachen kann.
Unsere Ingenieure haben das Problem gelöst. Alle Dienste sind funktionsfähig.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure untersuchen Ladeverzögerungen.
Unsere Ingenieure haben ein Problem behoben, das das Fließen von Entitäten verhindert.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Dienstleistungen sind zu diesem Zeitpunkt degradiert. Unsere Ingenieure sind sich der Probleme bewusst und arbeiten daran, sie zu identifizieren und zu lösen.
Unsere Ingenieure haben eine konstante Stabilität in der Serveraktivität beobachtet.
Wir sehen Warteschlangen-Backups, die Ladeverzögerungen in der Web-App und in SMS verursachen können.
Warteschlangen-Backups gelöst.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure untersuchen ein Problem, das verhindert, dass Workflows fortgesetzt werden.
Unsere Ingenieure haben die kurze Ausfallzeit behoben. Workflows sollten wie erwartet ablaufen.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure arbeiten daran, Server-Backups zu beheben, die mäßige Verzögerungen zwischen den Diensten verursachen.
Unsere Ingenieure haben die Warteschlangen-Backups gelöst; alle Dienste sind funktionsfähig.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Systemwiederherstellungsupdate - Funktion wiederhergestellt mit kleineren Verzögerungen. Unsere Ingenieure sind sich eines Problems bewusst, das die Serververbindung beeinflusst und aktiv untersucht. Wir werden ein Update zur Stunde geben.
Wir sehen Systemwiederherstellung in allen Diensten und überwachen die Stabilität.
Unsere Server haben sich vollständig erholt und alle Dienste wurden wiederhergestellt.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure untersuchen ein Problem auf unseren Servern, das zu extremen Verzögerungen führen kann.
Die Dienste laufen mit einigen Verzögerungen.
Unsere Ingenieure haben Warteschlangen-Backups behoben und alle Dienste sind funktionsfähig.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure untersuchen einen Anstieg der Aktivität, der zu Indexierungsverzögerungen führen kann.
Unsere Ingenieure haben das Indexierungs-Backup gelöst.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure untersuchen SMS-Verspätungen.
Verbessertes Serverhandling von SMS. Alles klar.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Derzeit erleben wir Latenzzeiten zwischen den Diensten. Unsere Ingenieure untersuchen dringend.
Wir sehen keine Verzögerungen mehr oder Gründe für Latenz und alle Dienste sind in Betrieb.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Wir sehen derzeit große Verzögerungen auf unseren Servern, die sich auf Termine und Workflows auswirken. Wir werden in einer Stunde mit einem Update zurück sein.
Wir sehen eine vollständige Genesung; der Vorfall ist gelöst.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Unsere Ingenieure sind sich der intermittierenden API-Probleme bewusst, die zu standortweiten Ausfallzeiten führen. Wir arbeiten aktiv daran, dies zu lösen und werden Sie über die Stunde informieren.
Wir haben die Ursache identifiziert. Das Problem ist nun gelöst.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
- Verschwindende Check-ins: Datensätze, die im System vorhanden waren, wurden in der Check-in-Ansicht nicht zurückgegeben. Duplizierte Einträge: Der gleiche Check-in-Datensatz erschien mehrmals in der Listenansicht. - Ungenaue Zählungen: Die in der Schnittstelle angezeigten Blasenzahlindikatoren stimmten nicht mit der tatsächlichen Anzahl der angezeigten Zeilen überein.
Identifizierung und Problem der Wurzelursache: Die Ursache wurde als Änderung der Elasticsearch-Konfiguration für die Dokumentenverdünnung identifiziert, die unbeabsichtigte Nebenwirkungen in der Such- und Datenabrufschicht hervorrief.
Fix push: Der erfolgreiche Fix wurde durch Deaktivieren (Rückrollen) der Dokumentverdünnung implementiert.
Service wieder normal: Die Dienste wurden wiederhergestellt und betroffene Kunden bestätigten, dass die Check-in-Daten kurz nach der Änderung der ET-Konfiguration um 9:40 Uhr korrekt angezeigt wurden.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Die Dienste sind wieder online.
Unser Upstream-Anbieter Cloudflare hat den normalen Betrieb wieder aufgenommen und unser gesamter Kundenverkehr sollte sich wieder normalisiert haben
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Cloudflare-Ausfall, der unsere Websites beeinflusst
Die Dienste erholen sich zu diesem Zeitpunkt. Es können gelegentliche Probleme mit app.withvector.com oder m.withvector.com auftreten, da sich Cloudflare (ein globaler Internetanbieter) weiter erholt.
Zu diesem Zeitpunkt hat Cloudflare die Mehrheit ihrer Dienste behoben, und während intermittierende Langsamkeit beobachtet werden kann, erscheinen alle Dienste zu diesem Zeitpunkt und sind in Betrieb.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Wir untersuchen derzeit Systemverlangsamungen. Dienstleistungen können zu diesem Zeitpunkt abgebaut werden. Unser Engineering-Team arbeitet aktiv daran, eine Lösung zu untersuchen und umzusetzen. Wir werden ein Update bereitstellen, sobald weitere Informationen verfügbar sind.
Wir sehen erste Anzeichen einer Systemwiederherstellung. Die Dienste sind in Betrieb, obwohl die Benutzer bei der Verarbeitung des Backlogs möglicherweise noch verbleibende Verlangsamungen auftreten. Wir werden hier weiterhin Updates teilen.
Wir haben uns vollständig erholt. Vielen Dank für Ihre Geduld, als unser Team daran gearbeitet hat, dieses Problem zu lösen.
Automatisch aus der offiziellen Störungsmeldung übersetzt.
Wir untersuchen derzeit Berichte über beeinträchtigte Leistung. Unser Engineering-Team arbeitet aktiv daran, eine Lösung zu untersuchen und umzusetzen. Wir werden ein Update bereitstellen, sobald weitere Informationen verfügbar sind. Vielen Dank für Ihre Geduld.
Die Systeme erholen sich und die Leistung verbessert sich. Eine gewisse verbleibende Langsamkeit kann bleiben, wenn wir aufholen. Unser Team beobachtet weiterhin genau. Vielen Dank für Ihre Geduld.
Wir haben die Ursache des Problems identifiziert und einen Fix bereitgestellt. Die Systemleistung hat sich seitdem stabilisiert und sollte nun wieder normal sein. Wir schätzen Ihre Geduld und Partnerschaft, während wir daran gearbeitet haben, dies zu lösen.
Automatisch aus der offiziellen Störungsmeldung übersetzt.