Historia awarii Konduto

[PT] Prezados clientes, Gostaríamos de informar sobre um incidente de lentidão na visualização de pedidos que ocorreu hoje em nosso portal. Por volta das 11h44, identificamos que um volume atípico de pedidos incompletos sobrecarregou o sistema, causando um atraso na fila de processamento. Nossa equipe agiu imediatamente para resolver o problema, isolando e removendo os pedidos problemáticos e ajustando o sistema para evitar futuras ocorrências. O serviço está sendo normalizado e todos os pedidos pendentes devem ser processados. Continuamos monitorando o sistema para garantir a estabilidade. Agradecemos a sua compreensão. ------------------------------------------------------------------------------------------------------------------------ [EN] Dear Customers, We would like to inform you about an incident of slow performance in order visualization that occurred on our portal today. Around 11:44 AM BRT, we identified that an unusually high volume of incomplete orders overloaded the system, causing a delay in the processing queue. Our team acted immediately to resolve the issue by isolating and removing the problematic orders and adjusting the system to prevent future occurrences. Service is returning to normal, and all pending requests should be processed. We continue to monitor the system to ensure stability. Thank you for your understanding. ------------------------------------------------------------------------------------------------------------------------ [ES] Estimados clientes, Nos gustaría informarles sobre un incidente de lentitud en la visualización de pedidos que ocurrió hoy en nuestro portal. Alrededor de las 11:44 AM BRT, identificamos que un volumen inusualmente alto de pedidos incompletos sobrecargó el sistema, causando un retraso en la cola de procesamiento. Nuestro equipo actuó de inmediato para resolver el problema, aislando y eliminando los pedidos problemáticos y ajustando el sistema para evitar futuras ocurrencias. El servicio está volviendo a la normalidad y todas las solicitudes pendientes deberían estar procesadas. Seguimos monitoreando el sistema para garantizar su estabilidad. Gracias por su comprensión.

This incident has been resolved.

[PT] Identificamos erros 500 em consultas que requisitam dados de bureaux a partir de 8:18h (UTC-3). Já estamos em contato com a equipe responsável, que está tratando o incidente. [EN] We have identified ERROR 500 in queries requesting bureau data starting at 8:18 AM (UTC-3). We are already in contact with the responsible team, which is addressing the incident.

[PT] Já estamos sem erros 500 e monitorando as conexões. [EN] We are no longer experiencing 500 errors and are monitoring the connections.

[PT] O incidente foi resolvido e não estamos registrando novos erros 500. [EN] The incident has been resolved, and we are not logging any new ERROR 500.

[PT] Estamos investigando timeouts e erros HTTP 500 na API // [EN] We're investigating timeouts and HTTP 500 errors in the API

[PT] Identificamos o problema e já implementamos uma correção // [EN] We've identified the issue and implemented a fix

[PT] A correção parece ter funcionado. Estamos monitorando a aplicação pelos próximos minutos. // [EN] The fix seems to have worked. We'll be monitoring the application for the next few minutes

This incident has been resolved.

[PT] Estamos investigando problemas de instabilidade e erros de conexão com o Portal // [EN] We're investigating connectivity and instability issues with the Dashboard.

[PT] Identificamos a causa da lentidão e instabilidade do portal. Estamos atuando para resolver a questão. // [EN] We've identified the cause of the instability and connectivity issues. We're acting to solve the underlying problem.

[PT] Subimos a correção para resolver os erros de lentidão nas páginas de pedidos relacionados. Estamos monitorando o sistema para verificar que o problema foi resolvido. // [EN] We are deploing a patch to fix timeout errors when acessing related orders pages. We'll be monitoring the system to make sure the problem was solved.

We are continuing to monitor for any further issues.

This incident has been resolved.

[PT] Identificamos um problema em alguns relatórios agendados sendo entregues vazios ou incompletos. Os relatórios sob demanda no Portal estão funcionando normalmente. // [EN] We've identified an issue with scheduled reports, causing some to be empty or incomplete. On-demand reports from the Dashboard are working properly.

This incident has been resolved.

[PT] Identificamos um atraso na entrega de webhooks de notificação e estamos trabalhando para acelerar a entrega e diminuir a fila. // [EN] We've identified a delay in delivering webhooks. We're working on speeding the dispatches and reduce the backlog.

[PT] Estamos avançando com a redução da fila e atraso dos webhooks // [EN] We're moving forward with reducing the backlog and eliminating the webhook delay

[PT] O atraso foi eliminado e a fila de webhooks está normalizada. Vamos monitorar a fila pelos próximos minutos. // [EN] The delay has been eliminated and the webhook queue is back to normal. We'll be monitoring the queue for the next few minutes.

This incident has been resolved.

[PT] Estamos investigando alertas de maior tempo de resposta e timeouts na API e no Portal. // [EN] We're investigating alerts of longer response times and timeouts in the API and Dashboard.

[PT] O tempo de resposta da API está voltando ao patamar normal. Seguimos monitorando a aplicação // [EN] The API's response time is getting back to normal. We continue to monitor the application

We are continuing to monitor for any further issues.

This incident has been resolved.

[PT] Estamos investigando alertas de maior tempo de resposta e timeouts na API e no Portal. // [EN] We're investigating alerts of longer response times and timeouts in the API and Dashboard.

[PT] O problema parece ser com o nosso provedor de soluções em nuvem. Continuamos investigando para confirmar a informação. // [EN] The issue seems to be our cloud provider. We continue investigating to confirm this information.

[PT] Confirmamos que se trata de um problema de rede e conectividade com nosso provedor de nuvem. Estamos acompanhando o incidente com o fornecedor para resolver rapidamente o problema. // [EN] We've confirmed it is a network and connectivity issue with our cloud provider. We're following the incident close with the vendor to quickly resolve the issue.

[PT] A API e o Portal voltaram a responder normalmente, e não estamos vendo mais problemas. Continuamos monitorando a aplicação e acompanhando o incidente com nosso provedor de nuvem. // [EN] API and Dashboard are responding normally and we're not seeing further issues. We continue to monitor the application and the incident with our cloud provider.

This incident has been resolved.

[PT] Estamos investigando um alerta de timeouts e erros na API // [EN] We're investigating an alert on timeouts and API errors

[PT] Identificamos um problema no banco de dados principal. O sistema de failover automático foi disparado, apontando a aplicação para o banco de stand-by. Estamos monitorando a aplicação para garantir que o failover rodou corretamente. [EN] We identified an issue with the primary database. The automatic failover was triggered, directing traffic to the stand-by database. We're monitoring the app to make sure failover went smoothly.

[PT] A aplicação parece estar funcionando normalmente. O mecanismo de failover do banco de dados agiu rapidamente para direcionar o tráfego para o stand-by, demorando aproximadamente 2 minutos no processo. // [EN] The app seems to be back to normal. The database failover automation acted swiftly to direct traffic to our stand-by, taking approximately 2 minutes.

IDENTIFIED [PT] Identificamos um problema que está causando atraso na visualização dos dados. // [EN] We’ve identified an issue causing data visualization delays in the application.

[PT] Continuamos trabalhando para resolver o atraso na replicação dos dados. // [EN] We're still working to fix the data visualization delay.

[PT] Continuamos progredindo na solução para o atraso na replicação dos dados. Novas transações já aparecem em tempo real no Portal, porém, devido a quantidade de pedidos represados, deve ainda precisamos de algumas horas até que o restante dos pedidos represados estejam disponíveis para consulta. // [EN] We continue progress on the data visualization delay. New transactions are showing up in real time in the Dashboard, however, due to the size of the backlog, we'll need several hours for all orders to be available for query.

[PT] Todos os pedidos pendentes foram sincronizados e estão disponíveis no Portal. // [EN] The backlog has been processed and all orders are now available in the Dashboard.

[PT] Identificamos um problema que está causando atraso na visualização dos dados. // [EN] We’ve identified an issue causing data visualization delays in the application.

[PT] Estamos progredindo na solução para o atraso na replicação dos dados. Novas transações já aparecem em tempo real no Portal, e estamos trabalhando para processar o restante dos pedidos represados. // [EN] We're making progress on the data visualization delay. New transactions are showing up in real time in the Dashboard, and we're working to process the order backlog.

We are continuing to monitor for any further issues.

[PT] Todos os pedidos pendentes foram sincronizados e estão disponíveis no Portal. // [EN] The backlog has been processed and all orders are now available in the Dashboard.

[PT] Identificamos um problema que está causando atraso na visualização dos dados. // [EN] We’ve identified an issue causing data visualization delays in the application.

[PT] Continuamos trabalhando para resolver o atraso na replicação dos dados. // [EN] We’re still working to fix the data visualization delay.

[PT] Estamos progredindo na solução para o atraso na replicação dos dados. Novas transações já aparecem em tempo real no Portal, e estamos trabalhando para processar o restante dos pedidos represados. // [EN] We're making progress on the data visualization delay. New transactions are showing up in real time in the Dashboard, and we're working to process the order backlog.

[PT] Todos os pedidos pendentes foram sincronizados e estão disponíveis no Portal. // [EN] The backlog has been processed and all orders are now available in the Dashboard.

[PT] Identificamos um problema que está causando atraso na visualização dos dados. // [EN] We’ve identified an issue causing data visualization delays in the application.

[PT] Continuamos trabalhando para resolver o atraso na replicação dos dados // [EN] We’re still working to fix the data visualization delay.

[PT] Estamos progredindo na solução para o atraso na replicação dos dados. Novas transações já aparecem em tempo real no Portal, e estamos trabalhando para processar o restante dos pedidos represados. // [EN] We're making progress on the data visualization delay. New transactions are showing up in real time in the Dashboard, and we're working to process the order backlog.

[PT] Todos os pedidos pendentes foram sincronizados e estão disponíveis no Portal. // [EN] The backlog has been processed and all orders are now available in the Dashboard.

[PT] Identificamos um problema que está causando atraso na visualização dos dados. Estamos trabalhando em uma correção. // [EN] We’ve identified an issue causing data visualization delays in the application. We’re working on a fix.

[PT] Ainda estamos trabalhando para resolver o atraso na replicação dos dados // [EN] We’re still working to fix the data visualization delay.

[PT] Estamos progredindo na solução para o atraso na replicação dos dados. Novas transações já aparecem em tempo real no Portal, e estamos trabalhando para processar o restante dos pedidos represados. // [EN] We're making progress on the data visualization delay. New transactions are showing up in real time in the Dashboard, and we're working to process the order backlog.

We are continuing to work on a fix for this issue.

[PT] Todos os pedidos pendentes foram sincronizados e estão disponíveis no Portal. // [EN] The backlog has been processed and all orders are now available in the Dashboard.

[PT] Identificamos um problema que está causando atraso na visualização dos dados. Estamos trabalhando em uma correção. // [EN] We've identified an issue causing data visualization delays in the application. We're working on a fix.

[PT] Ainda estamos trabalhando para resolver o atraso na replicação dos dados // [EN] We're still working to fix the data visualization delay.

[PT] Continuamos trabalhando para resolver o atraso na replicação dos dados // [EN] We're still working to fix the data visualization delay.

[PT] Continuamos trabalhando para resolver o atraso na replicação dos dados. Porém, devido a quantidade de pedidos represados, deve demorar algumas horas até que o Portal esteja sincronizado. // [EN] We're still working to fix the data visualization delay. However, due to the size of the backlog, it should be a few hours until everything is in sync.

[PT] Estamos progredindo na solução para o atraso na replicação dos dados. Porém, devido a quantidade de pedidos represados, deve demorar algumas horas até que o Portal esteja 100% sincronizado. Em alguns casos pedidos mais recentes podem já estar disponíveis, enquanto o backlog é processado. // [EN] We're making progress on the data visualization delay. However, due to the size of the backlog, it should be a few hours until everything is 100% in sync. In some cases new orders might already be displayed while the backlog is still being processed.

[PT] Continuamos progredindo na solução para o atraso na replicação dos dados. Porém, devido a quantidade de pedidos represados, deve demorar algumas horas até que o Portal esteja 100% sincronizado. Em alguns casos pedidos mais recentes podem já estar disponíveis, enquanto o backlog é processado. // [EN] We continue progress on the data visualization delay. However, due to the size of the backlog, it should be a few hours until everything is 100% in sync. In some cases new orders might already be displayed while the backlog is still being processed.

[PT] Continuamos progredindo na solução para o atraso na replicação dos dados. Novas transações já aparecem em tempo real no Portal, e estamos trabalhando para processar o restante dos pedidos represados. // [EN] We continue progress on the data visualization delay. New transactions are showing up in real time in the Dashboard, and we're working to process the order backlog.

[PT] Continuamos progredindo na solução para o atraso na replicação dos dados. Novas transações já aparecem em tempo real no Portal, e estamos trabalhando para processar o restante dos pedidos represados até as primeiras horas da terça-feira. // [EN] We continue progress on the data visualization delay. New transactions are showing up in real time in the Dashboard, and we're working to process the order backlog until the early hours of Tuesday.

[PT] Todos os pedidos pendentes foram sincronizados e estão disponíveis no Portal. // [EN] The backlog has been processed and all orders are now available in the Dashboard.

[PT] Estamos investigando problemas de timeout e tempo de resposta mais alto na API de Pedidos. [EN] We're investigating timeout and response time issues in the Orders API.

[PT] Subimos uma correção e a aplicação parece estar respondendo normalmente. Vamos monitorar pelos próximos minutos. [EN] We've deploy a fix and the app seems to be responding normally. We'll monitor for the next few minutes.

This incident has been resolved.

[PT] Identificamos um problema que está causando um atraso na replicação/visualização de pedidos no Portal. Estamos trabalhando em uma solução. [EN] We've identified an issue causing delays in order replication/visualization in our Dashboard. We're working on a solution.

[PT] Continuamos trabalhando para reduzir o atraso na replicação dos dados. [EN] We continue to work on reducing the data replication delay.

[PT] O problema persiste mas não tem evoluído mais além do atraso atual. Continuamos trabalhando para reduzir este o atraso. [EN] The issue persists but the delay is not growing any bigger. We continue to work on reducing the data replication delay.

[PT] Continuamos com os esfoços para zerar o atraso na replicação dos dados. Nossa estimativa é que este processo se normalize durante a madrugada de 10/SET. [EN] We continue our efforts to eliminate the data replication delay. We expect the queue to be normalized during the first ours of Sept. 10th BRT.

[PT] Estamos avançando na redução do atraso na visualização de pedidos no Portal. Esperamos que o atraso seja eliminado nas próximas horas. [EN] We're making progress on reducing the order visualization delay. We expect the delay to be eliminated in the next few hours.

[PT] O atraso foi resolvido e os pedidos estão online. Agradecemos a compreensão durante a solução deste caso. [EN] The replication delay has been solved and orders are in sync. We appreciate your understanding during the resolution of this case.

[PT] Estamos investigando problemas de timeout e tempo de resposta mais alto na API de Pedidos. [EN] We're investigating timeout and response time issues in the Orders API.

[PT] Subimos uma correção e estamos monitorando o efeito. [EN] We've deployed a fix and we've monitoring it's effects.

[PT] Continuamos monitorando a saúde da aplicação. [EN] We continue to monitor the health of the application.

This incident has been resolved.

[EN] We've identified an issue causing delays in delivery webhooks and we're working on a fix. Until then, webhooks will take longer to be sent. [PT] Identificamos um problema que está causando atraso no envio dos webhooks. Até a correção as mensagens demorarão mais tempo para serem entregues.

[EN] The fix has been implemented and the notification queue has been restored. We'll keep monitoring for the next few minutes. [PT] Uma correção foi implementada e a fila de notificações voltou ao normal. Vamos monitorar pelos próximos minutos.

This incident has been resolved.

We've identified an error causing HTTP 500 erros and timeouts.

We've deployed a fix and we're monitoring the app's performance.

This incident has been resolved.