52 Sashido incidents · Aralık 2023 — official updates, affected components, duration and resolution details.
Ekibimiz şu anda konunun kök nedenini araştırıyor.
İzleme sistemimiz tüm başarısız uygulamaları sağlıklı rapor ediyor. proaktif olarak izlemeye devam edeceğiz.
İyi haber! İşler tahtada tekrar normale geri dönmeli. Lütfen daha fazla sorun olup olmadığını bize bildirin. Sabrınız için çok teşekkür ederim, bunu sıralamaya çalıştık.
Resmî olay güncellemesinden otomatik olarak çevrilmiştir.
Şu anda AB Bölgesindeki Parse Servers'ın sınırsız işlem e-postalarını etkileyen bir sorun yaşıyoruz. E-posta teslimat sağlayıcısımız Amazon SES, alışılmadık gönderme faaliyetini incelerken üretim bölgelerimizden birinden geçici olarak durakladı. Sonuç olarak, hesap bildirimleri, doğrulama e-postaları, parola sıfırlamaları ve diğer işlem mesajları gibi bazı e-postalar gecikebilir veya teslim edilemez. Sistemlerimiz operasyonel olarak kalıyor ve şu anda müşteri verilerinin etkilenmediğini gösteren bir gösterge yok. Aktif olarak konuyu AWS ile araştırıyoruz ve e-posta altyapımızı gözden geçiriyoruz. Normal e-posta teslimatını geri almak en yüksek önceliğimizdir. Daha fazla bilgimiz olduğu sürece başka bir güncelleme sağlayacağız.
AB Bölgesi'ndeki Parse Serverları etkileyen işlemsel e-posta teslimat kesintisini aktif olarak çözmeye devam ediyoruz. Amazon AWS ile birlikte, Amazon SES'in etkilenen üretim bölgesinden geçici olarak e-posta teslimatına neden olan olağandışı gönderi faaliyetlerinin kaynağını araştırıyoruz. Mevcut odaklanmamız sadece normal hizmeti geri yüklemeye değil, aynı zamanda temel nedeni tanımlamak ve sorunu sağlamak yeniden satın alamaz. Soruşturma başlangıçta beklediğimizden daha uzun sürüyor ve hesap doğrulama, şifre sıfırlama, bildirim ve diğer uygulama e-postaları da dahil olmak üzere işlemsel e-posta teslimatını anlıyoruz. Bu olay üretim uygulamanız veya iş operasyonlarınız üzerinde önemli bir etkiye sahipse, lütfen Müşteri Başarı Ekibimizle iletişime geç[email protected] Sizi doğrudan değerlendirmek ve mümkün olan bir alternatif e-posta teslimat çözümü sağlayacaktır, AWS ile yapılan soruşturma devam ederken. Parse Server altyapımız ve uygulamalarımız operasyonel olarak kalıyor ve şu anda müşteri verilerinin etkilendiğine dair bir göstergemiz yok. Geniş kesinti için özür dileriz ve sabrınızı takdir ediyoruz, ancak konuyu tamamen çözmek için AWS ile çalışıyoruz. Paylaşmak için anlamlı bir ilerlememiz olduğu sürece başka bir güncelleme sağlayacağız.
Amazon SES'in etkilenen üretim bölgesinden gelen e-posta teslimatını durdurmasına neden olan olağandışı gönderi faaliyetlerinin kaynağını tespit ettik. Ekibimiz zaten gerekli düzeltmeleri ve güvenlik iyileştirmelerini uygulamaya başladı. Bu değişiklikler tamamlandığında, konunun tamamen ele alınabilmesi için etkilenen sistemleri doğrulayacağız ve normal gönderen güvenli bir şekilde yeniden başlayabilir. Bu doğrulamadan sonra, Amazon AWS ile incelemelerini tamamlamak ve işlemsel e-posta teslimatlarını geri yüklemek için koordine edeceğiz. Soruşturma ve remediasyon süreci başlangıçta beklenenden daha uzun sürdü ve işlem e-postalarının - hesap doğrulama, şifre sıfırlamaları, bildirimleri ve diğer uygulama e-postaları dahil olmak üzere, bazı müşterilerin işletmelerine kritik olabilir. Bu olay üretim uygulamanızı veya iş operasyonlarınızı önemli ölçüde etkilerse, lütfen Destek ekibimizle iletişime geçin. Sizi doğrudan değerlendirmek ve mümkün olan bir alternatif e-posta teslimat çözümü sağlarken, nihai remediasyon ve AWS incelemesi tamamlandı. Parse Server altyapımız ve uygulamalarımız operasyonel olarak kalıyor ve şu anda müşteri verilerinin etkilendiğine dair bir göstergemiz yok. Sabrınızı takdir ederiz ve remediasyon ve geçerlilik süreci daha kısa sürede başka bir güncelleme sağlayacaktır.
.mazon AWS etkilenen SES hesabı için erişim sağlamaktadır ve işlemsel e-posta teslimatı şimdi tekrar çalışır. E-postaların başarıyla gönderildiğini doğruladık ve servisin istikrarlı kalmasını sağlamak için altyapıyı yakından izlemeye devam edeceğiz. Bu noktada, acil servis kesintisinin çözüldüğünü düşünüyoruz, izleme ek bir önlem olarak devam edecektir. Bu olay boyunca sabır ve anlayış için teşekkür ederiz.
İşlemsel e-posta teslimatı operasyonel olarak kalır ve son remediasyon çalışmalarının ardından altyapıyı yakından takip etmeye devam ediyoruz. Yeni güvenlik önlemlerinin bir parçası olarak, şu anda bazı meşru müşteri başvuru aktivitesini etkileyen küçük sayıda yanlış pozitif görüyoruz. Bu vakaları sürekli olarak gözden geçiriyoruz ve herhangi bir etkiyi en aza indirmek ve müşteri uygulamalarının normal olarak çalışmasını sağlamak mümkün olduğunca çabuk dağıtıyoruz. Beklenmeyen davranışları raporlayan tüm müşterilere teşekkür etmek istiyoruz, raporlarınız bu davaları hızlı bir şekilde tanımlamamıza ve ele almamıza izin vermek için son derece yararlıdır. Ayrıca sabrınızı ve anlayışınızı takdir ediyoruz, altyapımızın korunmasını güçlendirmeye devam ediyoruz. Bazı durumlarda, korumalarımız geçici olarak gerekli olduğundan daha kısıtlayıcı olabilir, ancak önceliğimiz platformu korumak ve nihayetinde, müşterilerimizin uygulamaları ve işletmeleri bunu çalıştırıyor. Durumu yakından takip etmeye ve gerekli olan ayarlamaları yapmaya devam edeceğiz.
Bu olay çözüldü.
Resmî olay güncellemesinden otomatik olarak çevrilmiştir.
We're experiencing an increased rate of unhealthy applications. Currently we are looking into the issue.
We are currently experiencing connectivity issues affecting part of our infrastructure hosted in the FR-PAR datacenter region. Our datacenter provider, Scaleway, has confirmed an ongoing network incident in the same region. According to their latest update, the issue is related to a power problem inside the datacenter, and most services have already recovered while their teams continue working on the remaining affected systems. Some users may experience intermittent connectivity issues, increased latency, or temporary service interruptions. Our team is actively monitoring the situation and will continue to follow Scaleway’s recovery progress closely. We will provide another update as soon as we have more information or once the situation is fully stabilized. Provider incident: https://status.scaleway.com/incidents/qkj49g6g3ykp
A fix has been implemented and we are monitoring the results.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
We're experiencing an increased rate of applications health errors currently looking into the issue.
Our monitoring system report all of the failing applications are healthy. We we will continue monitoring proactively.
The incident is resolved. Apologies for this connection blip. Thank you as always for sticking with us, we really appreciate it.
Our team is currently investigating the root cause of the issue.
The issue has been identified and a fix is being implemented.
A fix has been implemented and we are monitoring the results.
Issue is resolved and for more than 1 hour there are no reports for unhealthy applications.
We're experiencing an increased rate of applications health errors currently looking into the issue.
The issue has been identified and a fix is being implemented.
Our monitoring system report all of the failing applications are healthy. We we will continue monitoring proactively.
Issue is resolved and for more than 1 hour there are no reports for unhealthy applications.
We are currently experiencing an issue where builds and deployments are completing successfully at the infrastructure level, but are not being correctly reflected in the Dashboard for some applications. This appears to be a synchronization issue affecting the Dashboard visibility layer only. There is no impact on the actual build or deployment processes. Our team is actively investigating the root cause.
A fix has been implemented and we are monitoring the results.
This incident has been resolved.
Our team is currently investigating the root cause of the issue
We have identified and mitigated the immediate issue affecting multiple hypervisors. The platform is currently stable. We are continuing to investigate the underlying cause of the unusual hardware behavior to ensure long-term reliability. At this stage, there is no active impact, but we are monitoring closely and will share further updates as we learn more.
We continue to monitor the situation closely following the mitigation of the issue affecting multiple hypervisors. The platform remains stable following the applied mitigation. We are continuing to monitor the situation closely and investigate the root cause of the unusual hardware behavior. If you notice anything unexpected or experience any issues, please contact our support team immediately. Our team is actively investigating the underlying cause to ensure long-term reliability.
We continue to monitor the situation closely and investigate the underlying cause. As shared previously, we will provide the next update on this status page as soon as we have any significant new information.
After 10 days with no further anomalies observed, we are closing this incident. Over the course of the remediation, we fully replaced 100% of our database hardware infrastructure in Europe. This included a significant number of migrations, reconfigurations, and coordinated infrastructure changes performed across the platform. The work required a major effort from our engineering team and was executed with a strong focus on maintaining platform stability and minimizing customer-facing impact. Since completion, the platform has remained stable, and the affected services are now running on new and improved hardware. We will continue to monitor the environment closely, but at this stage the incident is considered resolved.
We're experiencing an increased rate of applications health errors currently looking into the issue.
We have implemented a fix for this issue and are currently monitoring the results. We will update once we have confirmed it is resolved.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
We're experiencing an increased rate of applications health errors currently looking into the issue.
All applications have returned to healthy state. We will continue to monitor the situation.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
Our team is currently investigating the root cause of the issue.
All applications have returned to healthy state. We will continue to monitor the situation.
We have some good news to share! Everything is now looking clear from our side and all users should be able to work with their applications without any interruptions. Please let us know at [email protected] if you are still experiencing problems. We apologize for disrupting your day and thank you for your patience.
We're experiencing an increased rate of applications health errors currently looking into the issue.
We have implemented a fix for this issue and are currently monitoring the results. We will update once we have confirmed it is resolved.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
Our team is currently investigating the root cause of the issue.
We have implemented a fix for this issue and are currently monitoring the results. We will update once we have confirmed it is resolved.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
We're experiencing an increased rate of applications health errors currently looking into the issue.
We’ve identified the cause of the increased application errors. The issue originates from our data center provider, who is currently experiencing an outage impacting network and compute stability. Our platform remains operational, but some requests may continue to fail intermittently until the provider resolves the incident. You can follow their official updates here: https://bare-metal-servers.status-ovhcloud.com/incidents/9y4sd9ly0lqb We’ll continue to monitor and update as the situation evolves.
Our monitoring system report all of the failing applications are healthy. We we will continue monitoring proactively.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
We're experiencing an increased rate of applications health errors currently looking into the issue.
We have implemented a fix for this issue and are currently monitoring the results. We will update once we have confirmed it is resolved.
We have some good news to share! Everything is now looking clear from our side and all users should be able to work with their applications without any interruptions. Please let us know at [email protected] if you are still experiencing problems. We apologize for disrupting your day and thank you for your patience.
Our team is currently investigating the root cause of the issue.
A fix has been implemented and we are monitoring the results.
Issue is resolved and for more than 1 hour there are no reports for unhealthy applications.
We are currently investigating this issue.
We’ve identified that the ongoing connectivity issues
We’ve identified that the ongoing connectivity issues affecting some services in our North America datacenter are due to scheduled maintenance on the vRack network infrastructure by OVHcloud. - Maintenance window: Oct 28, 2025, 08:00–10:00 UTC - Impact: Intermittent or total loss of vRack connectivity during the maintenance period. - Current state: Maintenance is still in progress on OVH’s side. - Reference: https://network.status-ovhcloud.com/incidents/pc33ftfc2xxq We are actively monitoring the situation and will update once connectivity is fully restored. Thank you for your patience and understanding.
Our monitoring system report all of the failing applications are healthy. We we will continue monitoring proactively.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
Our team is currently investigating the root cause of the issue.
All applications have returned to healthy state. We will continue to monitor the situation.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
We're experiencing an increased rate of applications health errors currently looking into the issue.
Our monitoring system report all of the failing applications are healthy. We we will continue monitoring proactively.
Issue is resolved and for more than 1 hour there are no reports for unhealthy applications.
We're experiencing an increased rate of unhealthy applications. Currently we are looking into the issue.
All applications have returned to healthy state. We will continue to monitor the situation.
We have implemented a fix for this issue and are currently monitoring the results. We will update once we have confirmed it is resolved.
Good news! Things should be back to normal again across the board. Please let us know if there is any further trouble. Thank you so much for your patience while we worked to sort this out.
