Trello - rendimiento degradado
- investigating
Los usuarios pueden estar experimentando desaceleraciones a través de varias funciones de Trello incluyendo la creación o eliminación de comentarios, tarjetas de edición, o la creación de nuevos adjuntos. El equipo está trabajando activamente para solucionar el problema y proporcionará más actualizaciones dentro de la hora.
- identified
El equipo ha identificado la causa raíz y es difícil trabajar para resolver esta cuestión. Los usuarios verán problemas para crear/actualizar/deletar comentarios y cargar la vista de actividad para las tarjetas en este momento. El resto de las características de Trello deben estar funcionando como normal. Proporcionaremos más actualizaciones dentro de 2h.
- identified
El trabajo del equipo de ingeniería de Trello sigue restableciendo funcionalidad a comentarios y puntos de vista de la actividad. La siguiente actualización será publicada dentro de 4h o en un cambio significativo. Gracias por su paciencia.
- identified
El trabajo del equipo de ingeniería de Trello sigue restableciendo funcionalidad a comentarios y puntos de vista de la actividad. La recuperación de los sistemas afectados está tomando más tiempo de lo previsto. La siguiente actualización será publicada dentro de 4h o en un cambio significativo. Gracias por su paciencia.
- identified
Trello está experimentando desaceleraciones y fracasos que afectan las operaciones de comentarios, incluyendo la creación y eliminación de comentarios. Los usuarios también pueden experimentar retrasos al cargar las vistas de la actividad en las tarjetas, ver los archivos adjuntos, usar Power-Ups o exportar tablas. Algunos usuarios están encontrando errores al ver tarjetas específicas. El equipo está trabajando duro para restaurar la funcionalidad completa y proporcionará otra actualización dentro de 3h.
- identified
Trello está experimentando desaceleraciones y fracasos que afectan las operaciones de comentarios, incluyendo la creación y eliminación de comentarios. Los usuarios también pueden experimentar retrasos al cargar las vistas de la actividad en las tarjetas, ver los archivos adjuntos, usar Power-Ups, exportar tablas y 'Updates' en la página principal. Nuestro equipo está trabajando activamente en la resolución y probablemente tomará hasta 7 horas para restaurar los servicios de nuevo a la plena funcionalidad. Proporcionaremos más información en este momento, o antes si tenemos información adicional que compartir antes de esta resolución.
- identified
Trello continúa experimentando desaceleraciones y fracasos que están afectando las operaciones de comentarios, incluyendo la creación y eliminación de comentarios. Nuestros equipos continúan trabajando en la resolución de la cuestión, mientras que está tomando más tiempo de lo esperado. Proporcionaremos más actualizaciones dentro de las próximas 8 horas o antes una vez tengamos más información para compartir.
- identified
Nuestros equipos siguen trabajando diligentemente en la mitigación. Durante este tiempo, te recomendamos que no muevas ni copies cartas o listas entre tablas. Para usuarios cuyas tablas están afectadas por este problema, puede crear y eliminar tarjetas y editar descripciones de tarjetas como de costumbre, pero no podrá ver comentarios o el registro de actividad detallado de las tarjetas. Estimamos que la reconstrucción tomará otras 24 horas para completar. Actualizaremos esta página ya que tenemos más información.
- identified
Queremos proporcionar más transparencia en relación con este incidente dada su duración. Estábamos optimizando una de nuestras bases de datos más grandes, específicamente la única que almacena comentarios y la actividad de la tarjeta. Al final de este proceso, un fallo causó que algunas particiones de bases de datos fueran en directo sin sus índices. Esto significa que las consultas a esas particiones son puntuales, por lo que aproximadamente el 40% de las tablas están experimentando fallos. Sus datos son seguros. Cualquier comentario añadido durante este incidente se está guardando y reaparecerá una vez que el proceso esté completo. Actualmente estamos reconstruyendo los índices perdidos. Hemos asignado importantes recursos informáticos a esta tarea para avanzar lo más rápido posible, pero el volumen de datos es enorme. Estimamos que tardará aproximadamente 20 horas más para alcanzar la resolución completa. La mayoría de las características impactadas incluyen, pero no se limitan a: - Comentarios (ver, añadir, notificaciones) - Vistas de actividad sobre tarjetas - Adjuntos, Power-Ups, exportaciones de juntas - Página principal / 'Actualizaciones' vista - Buscar - Algunas cartas mostrando 'Card Not Found' - Moving/copying cards or lists Por favor, evite mover o copiar tarjetas entre tablas por ahora. Si su junta está trabajando normalmente, puede continuar su trabajo, ya que la mayoría de las tablas siguen sin afectar. Sabemos que Trello es donde vive tu trabajo y estamos comprometidos a volver a la normalidad. Proporcionaremos la siguiente actualización en ocho horas o antes mientras avanzamos.
- identified
Continuamos monitoreando el proceso de reconstrucción del índice en todos los fragmentos afectados y proporcionaremos actualizaciones a medida que cada fase se complete. Proporcionaremos la siguiente actualización en ocho horas o antes mientras avanzamos.
- monitoring
La reconstrucción del índice es completa y la funcionalidad debe ser restaurada para los usuarios. Somos conscientes de que las tarjetas movidas por los usuarios durante el incidente pueden estar en un estado incompleto y estamos investigando soluciones. No tenemos indicación de pérdida de datos durante el incidente. Seguiremos monitoreando y proporcionaremos las siguientes actualizaciones en 4 horas o antes.
- monitoring
Los usuarios deben estar experimentando funcionalidad restaurada a sus tableros y tarjetas. Estamos ejecutando scripts para repetir acciones que ocurrieron durante el incidente. Actualizaremos una vez estos estén completos.
- monitoring
Los usuarios deben estar experimentando funcionalidad restaurada a sus tableros y tarjetas. El equipo sigue remediando posibles cuestiones pendientes de datos que ocurrieron en juntas y tarjetas durante el incidente. A continuación se muestra una lista de cuestiones pendientes que pueden seguir ocurriendo, pero actualmente estamos trabajando para resolver mediante el procesamiento a nuestro fin. Estos problemas fueron causados por movimientos de tarjetas entre juntas durante el incidente. - Etiquetas de tarjetas perdidas - Restricciones de acceso que no se aplican en tarjetas movidas - Los cesionarios de la lista de verificación que no son miembros de la junta actual pueden linger incorrectamente - Los cesionarios de tarjetas que no sean miembros de la junta actual pueden haber recibido incorrectamente los recordatorios de la fecha prevista Tenga en cuenta que las tarjetas son seguras de editar, pero pueden ser excluidas de ciertos trabajos de restauración si son editadas. Apreciamos mucho su paciencia mientras trabajamos a través de estos temas. Proporcionaremos otra actualización cuando se resuelvan las cuestiones anteriores. Mientras tanto, comuníquese con nuestro equipo de apoyo si necesita más asistencia.
- monitoring
El equipo continúa remediando posibles problemas de datos pendientes que ocurrieron en Juntas y Tarjetas durante el incidente (los detalles están en la actualización de ayer). Los usuarios deben estar experimentando funcionalidad restaurada a sus tableros y tarjetas. Tenga en cuenta que mientras las tarjetas son seguras de editar, pueden ser excluidas de ciertos trabajos de restauración si son editadas. Apreciamos mucho su paciencia mientras trabajamos a través de estos temas. Por favor, contacte con nuestro equipo de apoyo si necesita más asistencia.
- monitoring
Los usuarios deben estar experimentando funcionalidad restaurada a sus tableros y tarjetas. Nuestro equipo ha resuelto errores de "tarjeta no encontrada", y continúa remediando posibles problemas de datos pendientes que ocurrieron en Juntas y Tarjetas durante el incidente: - Etiquetas de tarjetas perdidas - Restricciones de acceso que no se aplican en tarjetas movidas - Los cesionarios de la lista de verificación que no son miembros de la junta actual pueden linger incorrectamente - Los cesionarios de tarjetas que no sean miembros de la junta actual pueden haber recibido incorrectamente los recordatorios de la fecha prevista Tenga en cuenta que mientras las tarjetas son seguras de editar, pueden ser excluidas de ciertos trabajos de restauración si son editadas. Proporcionaremos otra actualización cuando se resuelvan las cuestiones anteriores. Mientras tanto, comuníquese con nuestro equipo de apoyo si necesita más asistencia.
- investigating
El equipo sigue remediando posibles cuestiones de datos pendientes que ocurrieron en las juntas y tarjetas durante el incidente
- monitoring
Nuestro equipo sigue trabajando para fijar incoherencias de datos menores en tarjetas que fueron trasladadas entre juntas durante el incidente. Se sigue abordando lo siguiente: -Etiquetas de tarjeta de identificación -Las restricciones de acceso no se aplican en tarjetas movidas - Información del cesionario de la lista de verificación en algunas tarjetas. -Incorrecto recordatorios de la fecha de vencimiento enviados a algunos cesionarios Sus tarjetas son seguras de editar. Si usted hace cambios en una tarjeta antes de que nuestra fijación automatizada lo alcance, sus ediciones se conservarán, y la restauración automatizada para esa tarjeta será saltada. No se perderán datos en ningún escenario. Proporcionaremos otra actualización una vez que los artículos anteriores se resuelvan completamente. Si necesita ayuda mientras tanto, por favor contacte con nuestro equipo de apoyo.
- resolved
Gracias por su paciencia ya que nuestro equipo trabajó diligentemente para resolver problemas pendientes. Aunque nuestro equipo encontró escenarios de bordes durante el fin de semana, creemos que todos los problemas de 'tarjeta no encontrada' se resuelven. Las inconsistencias de datos menores que se enumeran a continuación pueden estar presentes si las tarjetas se trasladaron entre las tablas durante el incidente: - Etiquetas de tarjetas perdidas - Restricciones de acceso que no se aplican en tarjetas movidas - Información del cesionario de la lista de verificación en algunas tarjetas - recordatorios incorrectos de la fecha de vencimiento enviados a algunos cesionarios Tengan la seguridad de que nuestro equipo continúa el trabajo necesario para resolver cuestiones anteriores; sin embargo, dado el impacto y el alcance de las cuestiones pendientes, ahora estamos moviendo el canal de comunicación a Apoyo en lugar de esta página de estado. Si cree que sigue viendo los impactos persistentes de este incidente, por favor no dude en contactar con nuestro equipo de soporte para más asistencia.
- postmortem
# Resumen El 17 de mayo de 2026 a las 12:00 UTC un subconjunto de usuarios de Trello experimentó una degradación de algunas funcionalidades básicas incluyendo pero no limitadas a: problemas con comentarios, registros de actividad de visualización, acceso a datos de tarjetas, exportaciones de tableros, Power-Ups, archivos adjuntos, actualizaciones de página principal y funcionalidad de búsqueda. Algunas tarjetas móviles muestran errores de 'Card Not Found'. Estos problemas persistieron durante varios días. La mayoría de los problemas encontrados al interactuar con Trello (comending, viewing activity) se resolvieron para el 19 de mayo de 2026 a las 08:31 UTC, sin embargo hubo un problema persistente de integridad de datos que se manifestó como errores "Card Not Found" al intentar abrir tarjetas. √90% de estas tarjetas fueron reparadas para el 28 de mayo a las 17:20 UTC. El resto tomó un poco más de tiempo y fue completamente reparado para el 5 de junio 2026 a las 21:37 UTC. Queríamos compartir un análisis más detallado de los temas que encontramos, así como lo que estamos haciendo para asegurar que nada similar ocurra en el futuro. # Root Cause El incidente fue causado por un fallo en nuestra base de datos (MongoDB) que surgió durante un proyecto para optimizar el rendimiento y la escala de una de nuestras mayores colecciones. La colección afectada contiene comentarios de tarjetas y otra actividad y se utiliza en gran parte de la funcionalidad de Trello. El proyecto de optimización era redimensionar la colección en una nueva clave. Esto nos permite eliminar un llamado “punto caliente inerte” que es donde todas las entradas de bases de datos recién creadas terminan en una sola partición de bases de datos (aka shard). Después de redimensionar, la carga se extendería uniformemente a través de los diversos servidores que componen el cluster de bases de datos. Esto disminuye latencia y mejora el rendimiento de consulta para los usuarios. Durante las etapas finales de la operación de redimensionamiento (que es un proceso automatizado de larga duración), 12 de los 30 fragmentos pertinentes se quedaron sin espacio de disco mientras que los índices de construcción. En lugar de abortar el proceso de redimensionamiento, el fallo de la base de datos causó que el clúster pusiera los nuevos servidores de la base de datos en rotación sin sus índices, a pesar de registros y métricas diciendo lo contrario. Debido a la enorme cantidad de datos en esta colección, no tener índices significa que no hay forma de preguntar por los datos que desea (es decir, "darme todos los comentarios para esta tarjeta") sin realizar un análisis de colección extremadamente lento e ineficiente. # Plan de acción correctiva Lo primero que hicimos fue iniciar una reconstrucción completa de todos los índices de bases de datos para la colección. Desafortunadamente esto lleva mucho tiempo completar (días múltiples) y es compute-intensivo. Hemos escalado todos los servidores de bases de datos para ayudar al proceso a moverse más rápido, sin embargo debido a la naturaleza única de este proceso, más compute no equiparaba a más velocidad. Además, hemos habilitado un ajuste de bases de datos que causó todas las consultas que darían lugar a un análisis completo de la colección que no se arrastrara en el fondo y consumiría los recursos de la base de datos antes de fracasar. Esto ayudó a las partes de Trello que todavía estaban trabajando mantener la respuesta. Una vez completado el proceso de reindex, se restableció toda la funcionalidad. Sin embargo, descubrimos que las tarjetas que fueron trasladadas a un tablero diferente durante la reconstrucción quedaron en un estado roto. Sus registros de actividad y comentarios estaban esencialmente varados en el tablero antiguo, mientras que la tarjeta estaba ahora en el nuevo tablero. Esto se manifestó como un error “Card Not Found” al intentar abrir tal tarjeta. El equipo se trasladó a una nueva fase de código de escritura para remediar con seguridad todos los problemas de datos restantes en lotes, con el lote final de las correcciones completadas para el 5 de junio de 2026 a las 21:37 UTC. # Next Steps Sabemos que Trello es donde tu trabajo vive y problemas como este pueden causar mucha perturbación. Para asegurarnos de que no nos topemos con este tema de nuevo en el futuro, el equipo está tomando las siguientes acciones: - Trabajar estrechamente con nuestro proveedor de bases de datos para asegurar que el fallo original se fije (actualizar: la solución es el envío en la próxima versión) - Trabajar para crear un conjunto estándar de herramientas y procesos para asegurar que los índices reconstruyan proceder lo más rápido posible en una emergencia como esta - Diseñar e implementar cambios para hacer que las operaciones de mudanza de tarjetas sean más atómicas (ya sea que toda la operación tenga éxito, o toda la operación falla, en lugar de un fracaso parcial)
Traducido automáticamente desde la actualización oficial del incidente.