Historial de interrupciones de Render

1. 24 de octubre de 2026 a las 7:11 UTCidentified

   Correos electrónicos transaccionales para eventos de plataforma, incluyendo pero no limitados a nuevas confirmaciones de email de registro de cuentas, notificaciones de fallos de construcción de servicios/desplegar, reajustes de contraseñas, etc. actualmente no se envían. Actualmente estamos abordando la cuestión.

2. 24 de octubre de 2026 a las 7:30 UTCmonitoring

   Hemos aplicado una solución y vemos mensajes con éxito. Estamos monitoreando cualquier otra cuestión.

3. 24 de octubre de 2026 a las 7:41 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 23 de octubre de 2026 a las 16:05 UTCidentified

   Hemos identificado el rendimiento de las redes degradadas vinculadas a un proveedor de corriente avanzada - seguiremos proporcionando actualizaciones aquí.

2. 23 de octubre de 2026 a las 16:10 UTCidentified

   Seguimos trabajando en una solución para esta cuestión.

3. 23 de octubre de 2026 a las 16:14 UTCmonitoring

   Se ha aplicado una solución y estamos monitoreando los resultados.

4. 23 de octubre de 2026 a las 17:34 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 20 de octubre de 2026 a las 20:48 UTCinvestigating

   Si la clonación falla, el despliegue fallará. Los registros de implementación proporcionarán errores relacionados con ese fallo. El reintentar un despliegue puede tener éxito. Actualmente estamos investigando esta cuestión.

2. 20 de octubre de 2026 a las 21:16 UTCidentified

   Se ha determinado la cuestión y se está aplicando una solución.

3. 20 de octubre de 2026 a las 23:46 UTCidentified

   Seguimos trabajando en una solución para esta cuestión.

4. 21 de octubre de 2026 a las 0:08 UTCmonitoring

   Se ha aplicado una solución y estamos monitoreando los resultados.

5. 21 de octubre de 2026 a las 0:29 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 15 de octubre de 2026 a las 20:58 UTCidentified

   Hemos identificado un problema con un proveedor de nube que está afectando actualizaciones en tiempo real en Render. Desde aproximadamente 19:10 UTC: - Dashboard: Desplegar el estado, los eventos de servicio y los estados de servicio y administración de tareas no pueden actualizar automáticamente. Refresque la página para ver el estado actual. - Las llamadas SDK que esperan que una carrera de tareas termine pueden fallar con un error de 500 después de unos 60 segundos. La tarea se ejecuta en sí mismos sigue funcionando y termina normalmente. Para comprobar el estado de una carrera de tareas, utilice GET /v1/task-runs/{taskRunId}. No se afectan los despliegues, servicios de funcionamiento, bases de datos y registros.

2. 15 de octubre de 2026 a las 21:53 UTCmonitoring

   Nuestro proveedor de corriente ha resuelto el problema, y los servicios afectados de Render se han recuperado. Continuamos monitoreando.

3. 16 de octubre de 2026 a las 1:12 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 14 de octubre de 2026 a las 19:32 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 14 de octubre de 2026 a las 19:45 UTCmonitoring

   Se ha aplicado una solución y estamos monitoreando los resultados.

3. 14 de octubre de 2026 a las 19:47 UTCmonitoring

   Continuamos monitoreando cualquier otro problema.

4. 14 de octubre de 2026 a las 20:41 UTCmonitoring

   Estamos pausando temporalmente despliegues a servicios gratuitos.

5. 14 de octubre de 2026 a las 20:55 UTCidentified

   Se ha determinado la cuestión y se está aplicando una solución.

6. 14 de octubre de 2026 a las 20:57 UTCidentified

   Los constructos no están empezando de nuevo en todas las regiones, y nuestro equipo sigue trabajando para abordar la causa raíz. Los despliegues de servicios gratuitos siguen siendo pausados. Compartiremos otra actualización tan pronto como tengamos más información.

7. 14 de octubre de 2026 a las 21:43 UTCmonitoring

   Se ha aplicado una solución, y estamos monitoreando los resultados. Se siguen desplegando y construyendo servicios que se ejecutan en casos gratuitos.

8. 14 de octubre de 2026 a las 22:18 UTCresolved

   Este incidente ha sido resuelto.

9. 22 de octubre de 2026 a las 17:58 UTCpostmortem

   #### Summary El 14 de octubre de 2026, entre 12:12 y 15:08 PDT \(19:12 - 22:08 UTC\), construye y despliega en todas las regiones no comenzó, estalló o se retrasó significativamente durante dos períodos de impacto que suman alrededor de 2 horas y 20 minutos. La causa fue una migración de esquemas de bases de datos que se ejecutó como parte de una actualización de la versión planificada de nuestro programador de empleo interno que coordina la construcción, el despliegue y otras operaciones de plataforma crítica. La migración condujo a una alta carga y un tiempo de recuperación más largo de lo esperado de la base de datos de este sistema. Cambiaremos la forma en que realizamos mejoras y modificaciones de este sistema de una manera altamente disponible en el futuro para que un cambio similar no pueda causar un outage de nuevo. ## Impacto Hubo dos períodos de impacto. Durante este tiempo, los servicios de usuarios en vivo no se vieron afectados, pero la construcción y el despliegue en todas las regiones no comenzaron, no terminaron o se retrasaron significativamente. **Period 1: 12:12 - 12:40 PDT \(19:12 - 19:40 UTC\), unos 28 minutos** * Nuevos edificios y despliegues no comenzaron. Se deplora el progreso. * Algunas solicitudes para crear un despliegue a través del Dashboard, API y CLI devolvieron errores \(HTTP 500\). **Recuperación parcial: 12:40 - 13:18 PDT \(19:40 - 20:18 UTC\)** * Los edificios y despliegues corrieron, pero los despliegues tardaron unos 20 segundos para empezar en lugar de unos pocos cientos milisegundos. **Period 2: 13:18 - 15:08 PDT \(20:18 - 22:08 UTC\), aproximadamente 1 hora 50 minutos** * Las construcciones y los despliegues fueron retrasados, estancados en progreso \(incluidos en pre-deploy\), o fallados. A partir de 13:51 PDT, casi ninguna nueva construcción fue capaz de comenzar. * Algunos despliegues apagados no comenzaron después de la recuperación, y cancelarlos a través de la API no tuvo ningún efecto. Los usuarios necesitaban reintentar estos despliegues. ## Root Cause Render utiliza un sistema interno de cronogramadores de empleo para coordinar construcciones, despliegues y otras operaciones de plataformas críticas. Estábamos haciendo mejoras en cómo distribuye el trabajo, y comenzó una actualización de la versión planificada de este sistema en producción después de una práctica exitosa que se ejecuta en un ambiente de prueba. La actualización incluía una migración de esquemas de bases de datos que bloqueaba una tabla grande y conducía la utilización de la CPU de bases de datos al 100%. Esta base de datos almacena tanto el estado de trabajo básico del sistema como los datos secundarios utilizados para la búsqueda y presentación de informes. El sistema no podía leer ni escribir el estado de trabajo de manera fiable, por lo que se construye y se detiene o se ralentiza. Los ingenieros fueron alertados a la cuestión rápidamente y revertieron la actualización. Sin embargo, tres factores ampliaron el impacto: * Un paso previo a la actualización para crear un clon de bases de datos para la devolución no pudo completarse debido a un error del proveedor de nube subyacente, por lo que no estaba disponible una devolución rápida. * La migración siguió funcionando en la base de datos después de que el cliente realizase la actualización se detuvo y la actualización se revertía. Fue encontrado y terminado a las 13:49 PDT, aproximadamente 1,5 horas después de que comenzó. * Un intento de agregar capacidad a la base de datos falló debido a un error del proveedor de nube subyacente. ### Timeline Todas las veces son PDT en 2026-10-14 \(UTC-7\). * **12:13** - Se inicia la actualización, incluyendo la migración de esquemas de bases de datos. La carga de base de datos aumenta y construye e implementa parar de empezar. * **12:24** - Impacto para construir e implementar identificado. El incidente se ha intensificado. * **12:33** - Inauguración del incidente de la página de estado. * **12:34** - Los ingenieros revierten la actualización y detienen al cliente realizando la migración del esquema. * **12:37** - El sistema programador de empleo se recupera. Construye y despliega, con tiempos de inicio más lentos. Fin del período 1. * **13:17** - Los ingenieros reinician una instancia poco saludable del sistema para reequilibrar la carga. Las conexiones y errores de base aumentan en todo el sistema. Inicio del Período 2. * **13:37** - Se despliega de forma gratuita para reducir la carga. * **13:49** - Los ingenieros encuentran la migración de esquemas que sigue funcionando en la base de datos y la terminan. * **14:16** - Restableció la base de datos. Un intento de añadir la capacidad de la base de datos falla debido a un error del proveedor de la nube subyacente. * **14:27** - Restaurar los componentes del sistema. * **14:30** - Los edificios y los despliegues comienzan a recuperarse, con tiempos de construcción y despliegue más lentos de lo habitual a medida que se procesa el atraso. * **15:08** - Implementar los tiempos de inicio de retorno a niveles normales y de carga de base de datos. Fin del período 2. * **15:11** - Los despliegues y las espinas libres se vuelven a habilitar gradualmente. * **15:18** - El incidente resuelto. ### Mitigations **Completado durante el incidente** * Reverted the job scheduler component upgrade and settings change \(12:34 PDT\). * Despliegue de manera gratuita y espionajes para reducir la carga, luego los re-enableció gradualmente después de la recuperación. * Terminado la migración de esquemas que todavía se estaba ejecutando en la base de datos \(13:49 PDT\). * Reinició la base de datos y el sistema de programadores de empleo para restaurar el funcionamiento normal. * Pausó la actualización en producción hasta que se cambie el proceso de actualización. **En marcha \(iniciado durante el incidente\)** * Esta base de datos está siendo actualizada para apoyar la disponibilidad de alta zona. *Planeado* * Aplicar una nueva práctica de actualización y despliegue para este componente: implementaremos despliegues de color verde azul para evitar actualizar este sistema bajo carga en el futuro. * Ajuste los mecanismos de almacenamiento subyacentes para que el programador de empleo se adapte mejor a este tipo de carga de trabajo, después de haber implementado despliegues de color verde azul.

Traducido automáticamente desde la actualización oficial del incidente.

1. 3 de octubre de 2026 a las 19:35 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 3 de octubre de 2026 a las 19:53 UTCinvestigating

   Seguimos investigando esta cuestión.

3. 3 de octubre de 2026 a las 20:13 UTCmonitoring

   Los componentes afectados se están recuperando. Estamos monitoreando la situación.

4. 3 de octubre de 2026 a las 20:21 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 27 de septiembre de 2026 a las 1:24 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 27 de septiembre de 2026 a las 1:36 UTCmonitoring

   Nuestro proveedor ha comenzado a recuperarse. Los servicios en Oregon están mejorando, y seguimos monitoreando.

3. 27 de septiembre de 2026 a las 2:17 UTCmonitoring

   Todos los servicios, excepto los servicios web gratuitos, se han recuperado. Continuamos monitoreando.

4. 27 de septiembre de 2026 a las 3:01 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 25 de septiembre de 2026 a las 18:26 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 25 de septiembre de 2026 a las 18:38 UTCresolved

   Construye e implementa falló para un subconjunto de servicios en Oregon. Los servicios usando una imagen Docker preconstruida y sitios estáticos no fueron afectados.

Traducido automáticamente desde la actualización oficial del incidente.

1. 24 de septiembre de 2026 a las 23:36 UTCresolved

   Alrededor de 23:31 UTC el 2026-09-23, los servicios de valor clave creados antes de 2024-03-05 se reiniciaron involuntariamente debido a un cambio de configuración en nuestro extremo. No se planifican ni se prevén nuevos reinicios como resultado de ese cambio.

Traducido automáticamente desde la actualización oficial del incidente.

1. 9 de septiembre de 2026 a las 21:26 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 9 de septiembre de 2026 a las 21:32 UTCinvestigating

   Seguimos investigando esta cuestión.

3. 9 de septiembre de 2026 a las 21:34 UTCidentified

   Se ha determinado la cuestión y se está aplicando una solución.

4. 9 de septiembre de 2026 a las 21:38 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 2 de septiembre de 2026 a las 17:19 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 2 de septiembre de 2026 a las 17:30 UTCmonitoring

   Se ha aplicado una solución y estamos monitoreando los resultados.

3. 2 de septiembre de 2026 a las 17:40 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 31 de agosto de 2026 a las 20:24 UTCresolved

   Algunos servicios web en Oregon no estaban disponibles entre 19:20 y 19:30 UTC.

Traducido automáticamente desde la actualización oficial del incidente.

1. 31 de agosto de 2026 a las 15:47 UTCinvestigating

   Estamos investigando la inestabilidad de los servicios que afectan a algunos servicios web en nuestra región de Singapur. Los clientes pueden experimentar servicios inesperados reiniciados o disponibilidad intermitente. Nuestro equipo está investigando y trabajando activamente para restaurar el funcionamiento normal. Proporcionaremos una actualización a medida que se disponga de más información.

2. 31 de agosto de 2026 a las 16:08 UTCinvestigating

   Hemos observado que los despliegues están principalmente afectados por esto.

3. 31 de agosto de 2026 a las 16:33 UTCinvestigating

   El tráfico a través de los servicios de Singapur se ve afectado. Las espinas de servicio libre (desde el ocio) en Singapur han sido desactivadas temporalmente mientras seguimos investigando.

4. 31 de agosto de 2026 a las 17:22 UTCmonitoring

   Se ha aplicado una solución y estamos monitoreando los resultados.

5. 31 de agosto de 2026 a las 18:09 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 20 de agosto de 2026 a las 15:47 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 20 de agosto de 2026 a las 16:12 UTCidentified

   Se ha identificado un problema con nuestro proveedor de corriente, Google Cloud. Servicios Web gratuitos: Construcciones/distribuciones y spin-up han sido desactivados temporalmente mientras trabajamos para mitigar el problema.

3. 20 de agosto de 2026 a las 17:27 UTCmonitoring

   Observamos la recuperación para construir y desplegar en todas las regiones. Se han reconstruido, implementado y spin-up para servicios web gratuitos. Algunos clientes pueden seguir viendo latencia elevada mientras la recuperación progresa. Seguimos monitoreando.

4. 20 de agosto de 2026 a las 17:45 UTCmonitoring

   Hemos observado una recuperación total. Seguimos supervisando cualquier otra cuestión.

5. 20 de agosto de 2026 a las 19:40 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 27 de julio de 2026 a las 14:43 UTCinvestigating

   Las solicitudes a través del panel pueden ser más lentas de lo habitual. Actualmente estamos investigando el tema.

2. 27 de julio de 2026 a las 17:59 UTCinvestigating

   Seguimos investigando esta cuestión.

3. 27 de julio de 2026 a las 18:27 UTCinvestigating

   La API REST también está experimentando un rendimiento degradado. Como resultado, las solicitudes pueden experimentar los plazos y es posible que necesite volver a enviar su solicitud. Continuamos investigando.

4. 27 de julio de 2026 a las 20:18 UTCmonitoring

   Hemos implementado una solución y estamos monitoreando los resultados. Las razones de fracaso deplorable no estarán disponibles temporalmente. Aún se generarán eventos de fracaso desplegable. Proporcionaremos una actualización una vez que se vuelvan a habilitar las razones del fracaso de despliegue.

5. 27 de julio de 2026 a las 23:58 UTCmonitoring

   No se han observado más problemas desde nuestros arreglos. El Dashboard y la API REST siguen siendo plenamente operativos. Las razones de fracaso deploran aún están minusválidas. Actualizaremos este incidente una vez que se vuelvan a habilitar. No se espera ninguna actualización adicional para hoy (2026-07-27, UTC-7).

6. 28 de julio de 2026 a las 19:35 UTCresolved

   No hemos seguido observando más problemas y hemos vuelto a habilitar las razones de fracaso.

Traducido automáticamente desde la actualización oficial del incidente.

1. 24 de julio de 2026 a las 11:16 UTCinvestigating

   Estamos investigando un problema de infraestructura que afecta a los servicios hospedados en nuestra región de Oregon. Algunos servicios pueden ser inalcanzables o solicitudes fallidas de experiencia. Nuestro equipo de ingeniería está trabajando activamente para identificar la causa y restaurar el funcionamiento normal.

2. 24 de julio de 2026 a las 11:27 UTCmonitoring

   Hemos observado recuperación en todos los servicios y ahora estamos monitoreando la situación.

3. 24 de julio de 2026 a las 11:44 UTCmonitoring

   Creemos que el problema fue causado por un proveedor de corriente. Seguiremos vigilando la situación.

4. 24 de julio de 2026 a las 13:30 UTCresolved

   Este incidente ya se ha resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 20 de julio de 2026 a las 0:41 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 20 de julio de 2026 a las 0:55 UTCidentified

   GitHub sigue reportando un outage, https://www.githubstatus.com. Esto está causando fallas de autenticación al intentar desplegarse desde un repositorio GitHub.

3. 20 de julio de 2026 a las 1:54 UTCmonitoring

   Ahora estamos viendo una recuperación en nuestra tasa de fracaso de la construcción. Seguimos vigilando la cuestión.

4. 20 de julio de 2026 a las 2:11 UTCresolved

   Construye las tasas de fracaso se han recuperado. Resolviendo.

Traducido automáticamente desde la actualización oficial del incidente.

1. 19 de julio de 2026 a las 3:44 UTCinvestigating

   Hemos recibido un número elevado de informes sobre fallos de clones de git que provocan un error de 403, abortando el despliegue. Estamos investigando.

2. 19 de julio de 2026 a las 3:55 UTCidentified

   Los servicios que no se despliegan son los desplegados en Frankfurt. Los servicios de ejecución no están afectados, sólo el proceso de despliegue está fallando. Todavía estamos trabajando para determinar la causa de este error para esos servicios.

3. 19 de julio de 2026 a las 5:57 UTCidentified

   Los usuarios con servicios hospedados en Frankfurt que confían en los repositorios GitHub para los despliegues continúan viendo 403 errores en sus registros causando que el despliegue fracasara. Continuamos trabajando en este tema dentro de nuestros propios sistemas y hemos llegado a GitHub.

4. 19 de julio de 2026 a las 8:29 UTCidentified

   Seguimos trabajando para mitigar esta cuestión, al tiempo que trabajamos con GitHub para resolver estos fallos de despliegue.

5. 19 de julio de 2026 a las 9:10 UTCmonitoring

   Los despliegues se han completado constantemente desde aproximadamente 08:40 y están regresando a niveles normales. Estamos monitoreando cualquier otro impacto.

6. 19 de julio de 2026 a las 9:20 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 16 de julio de 2026 a las 22:42 UTCinvestigating

   Actualmente estamos investigando esta cuestión.

2. 16 de julio de 2026 a las 22:42 UTCinvestigating

   Seguimos investigando esta cuestión.

3. 16 de julio de 2026 a las 23:09 UTCidentified

   GitHub ha actualizado su página de estado para informar sobre la disponibilidad de REST API degradada: https://www.githubstatus.com/incidents/gxycch3076xk

4. 17 de julio de 2026 a las 0:13 UTCmonitoring

   GitHub informa que han mitigado su incidente y están monitoreando para garantizar la estabilidad.

5. 17 de julio de 2026 a las 0:14 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.

1. 15 de julio de 2026 a las 21:50 UTCinvestigating

   Algunos usuarios se inscribieron en los bucles de inicio de sesión de 2FA cuando intentaban acceder al panel Render. Estamos investigando.

2. 15 de julio de 2026 a las 21:55 UTCidentified

   Se ha determinado la cuestión y se está aplicando una solución.

3. 15 de julio de 2026 a las 22:06 UTCmonitoring

   Se ha aplicado una solución y estamos monitoreando los resultados.

4. 15 de julio de 2026 a las 22:56 UTCresolved

   Este incidente ha sido resuelto.

Traducido automáticamente desde la actualización oficial del incidente.