Overvågning - Intermitterende servicetilgængelighed
- monitoring
Kl. 15: 23 UTC begyndte vi at undersøge rapporter om, at nogle tjenester er periodisk utilgængelige. Tjenesten er siden blevet fuldt restaureret, og alle systemer fungerer normalt. Vi overvåger nøje og fortsætter med at undersøge den grundlæggende årsag.
- resolved
Hændelsen er løst. Vi foretager en mere grundig undersøgelse for at finde årsagen.
- postmortem
* * Sammendrag efter hændelsen * * Den 26. september 2026, fra 15: 28 til 15: 39 UTC, anmodninger til vores API mislykkedes sporadisk. En stor del af anmodningerne blev afvist direkte i flere minutter. Nogle få regioner genvandt kort den delvise kapacitet kl. 15.30 UTC. Hvad der skete: en server i et internt system, som vores belastning ballancere afhænger af løb tør for diskplads, men ikke fejlede korrekt over til en peer node. Da dette system holdt op med at svare, begyndte forskellige belastningsballancere på tværs af regionerne automatisk at starte forfra. Vores ingeniører flyttet det berørte system til en sund server på 15: 37 UTC, og service blev fuldt restaureret ved 15: 39 UTC. Hvad vi gør: vi har øget diskkapacitet og ændret logfastholdelse på det berørte system, så det ikke kan løbe tør for plads på denne måde igen. Vi ændrer også, hvordan vores lastballancere opfører sig, når det system ikke er tilgængeligt, så de bliver ved med at betjene trafikken i stedet for at lukke ned, og vi tilføjer alarmering, der ville have fanget problemet, før det påvirkede dig.
Automatisk oversat fra den officielle hændelsesopdatering.