L'elaborazione e la pianificazione del lavoro sono degradate che interessano più prodotti atlanti
- investigating
L'elaborazione del lavoro e la pianificazione del lavoro è degradata, che sta influenzando il lavoro pianificato e asincrono su diversi prodotti, tra cui Jira, Confluence e Bitbucket Cloud. Gli utenti interessati possono vedere ritardo o mancante esecuzione del lavoro, compreso l'elaborazione e-mail-to-ticket ritardato e gli orari che non vengono eseguiti come previsto.
- identified
I nostri team hanno identificato la causa principale di questo incidente e ora sta attivamente lavorando per mitigare il problema. Forniremo ulteriori aggiornamenti entro un'ora o prima se abbiamo alcun progresso significativo da condividere.
- identified
I nostri team hanno preso misure correttive per mitigare il problema e stanno osservando alcuni miglioramenti. Continuiamo a monitorare la situazione e prenderemo le azioni necessarie fino a quando l'incidente è completamente recuperato.
- identified
I nostri team continuano a lavorare sul recupero fino a quando l'incidente non sarà completamente risolto. Forniamo ulteriori aggiornamenti se abbiamo progressi significativi da condividere. Oltre all'impatto sul lavoro programmato e asincrono su diversi prodotti, abbiamo anche identificato la componente SLA in Jira Service Management non appare come previsto.
- identified
I nostri team continuano a lavorare sul recupero fino a quando l'incidente non sarà completamente risolto. Forniamo ulteriori aggiornamenti se abbiamo progressi significativi da condividere. C'è anche un impatto per i nuovi biglietti di supporto creati in termini di componente SLA mancante, le notifiche che possono influenzare i tempi di risposta e la gestione backlog di alcuni biglietti.
- resolved
Il 01 ottobre 2026, tra 01:00 UTC e 07:25 UTC, gli utenti possono aver visto l'esecuzione mancante del lavoro, tra cui l'elaborazione e-mail ritardata-to-ticket e gli orari che non vengono eseguiti come previsto. Abbiamo ora implementato una correzione e i servizi sono stati ripristinati al normale funzionamento per i clienti interessati. L'impatto per sostenere i biglietti con il componente SLA mancante e le notifiche ritardate hanno anche confermato il recupero. Nota: Per i clienti di Bitbucket, se c'era qualche pipeline programmata che non è stata eseguita durante la finestra incidente, si può aspettare la prossima esecuzione programmata o avviarli manualmente.
- postmortem
## Il 1o ottobre 2026, tra le 01:00 e le 07:25 UTC, l'elaborazione di lavoro degradata e la pianificazione hanno colpito i prodotti atlanti, tra cui Bitbucket Cloud, Confluence, Forge app, Jira, e Jira Service Management in tutte le regioni cloud commerciali. Ciò ha causato compiti di sfondo ritardati o mancati, come l'elaborazione e-mail-to-ticket e pipeline programmate; l'uso interattivo del prodotto non è stato interessato. L'evento è stato attivato quando un volume inaspettato di compiti programmati è stato dovuto simultaneamente, schiacciando la nostra piattaforma di pianificazione di lavoro condivisa. Il monitoraggio automatizzato ha rilevato l'incidente entro tre minuti. Il recupero è iniziato intorno alle 03:45 UTC come capacità scalata di ingegneria e la piattaforma ha lavorato attraverso il backlog, con risoluzione completa raggiunta in 6 ore e 25 minuti. ### IMPACT La maggior parte delle attività programmate ha smesso di funzionare alle 01:00 UTC e ha ripreso da circa 03:45 UTC. La maggior parte dei lavori ritardati erano stati catturati da circa 06:00 UTC, e i restanti ritardi erano sgomberati da 07:25 UTC. Prodotti interessati: - Le attività programmate di riscossione o ritardo delle piste dovute durante l'incidente; le piste saltate non sono state automaticamente rielaborate e le attività riprese alla prossima volta prevista. - La maggior parte delle attività programmate ha funzionato in ritardo; un piccolo numero potrebbe non aver funzionato. - Regole di automazione, comprese le regole programmate, corse normalmente, tranne come indicato di seguito. Bitbucket Cloud Le tubazioni programmate dovute tra le 01:00 e le 03:50 UTC non sono state eseguite. Se una pipeline programmata non è stata eseguita durante l'incidente, è possibile attendere la prossima esecuzione programmata o avviarlo manualmente. Altre tubazioni non sono state influenzate. Confluenza Alcuni promemoria di eventi di calendario a causa tra le 01:00 e circa 03:45 UTC non sono stati inviati. Forge app I trigger programmati si fermarono alle 01:00 UTC e ripresero a partire dalle 04:00 UTC; le invocazioni mancate non furono rielaborate. Obiettivi Inizio dei promemoria e-mail del mese per aggiornare gli obiettivi potrebbe essere ritardato. Gestione dei servizi Jira e Jira Le email in arrivo sono state nelle loro caselle di posta e sono state elaborate automaticamente dopo il recupero. Le notifiche programmate, come gli abbonamenti ai filtri, sono state ritardate. In alcuni progetti di servizio, regole di automazione e notifiche innescate da SLAs o tempo in stato eseguito tardi. I dati del timer SLA sono rimasti intatti. Supporto Atlassian Fino alle 07:25 UTC, i problemi con i nostri strumenti di supporto possono aver rallentato alcune delle nostre risposte. Sulla base della nostra indagine fino ad oggi, non abbiamo identificato alcuna perdita di oggetti di lavoro, pagine, repository, o e-mail in arrivo. ## ROOT CAUSE La nostra piattaforma di pianificazione del lavoro condivisa opera ad alta scala in condizioni normali. Uno dei consumatori della piattaforma ha programmato un volume anormalmente elevato di compiti da eseguire contemporaneamente il 1 ottobre alle 01:00 UTC. Questo sovraccarico di accuratezza ha superato i nostri limiti architettonici e di scaling, creando un backlog di elaborazione attraverso i servizi dipendenti. Ingegneria ha aumentato manualmente la capacità di gestire il carico anormale, consentendo al servizio di elaborare il backlog e tornare alle operazioni normali. ### AZIONI REMEDIALI PLAN & NEXT STES Sappiamo che il lavoro ritardato e mancato influisce sulla vostra produttività. Stiamo privilegiando queste azioni per contribuire a ridurre la probabilità e l'impatto di incidenti simili: - ** Isolamento del carico di lavoro di impedenza Implement fair scheduling guardrails in modo che il volume sbalzi da un'unica fonte non affamare o ritardare i compiti in altri prodotti. - **Controlli di sovratensione rinforzati: ** Aggiunga le capacità operative per regolare rapidamente o mettere in pausa i carichi di lavoro programmati da fonti specifiche durante i picchi di traffico inaspettati. - **Miglioramento del sistema e recupero: ** Migliorare la capacità della piattaforma e ottimizzare i processi di scaling per gestire punte di domanda estreme e recuperare più rapidamente. Ci scusiamo con i clienti i cui servizi sono stati influenzati durante questo incidente. Grazie. Atlanti
Tradotto automaticamente dall'aggiornamento ufficiale dell'incidente.