Istoricul incidentelor Pianoio

1. 15 august 2026 la 09:00 UTCmonitoring

   Pianul a identificat o problemă care afectează accesul la Piano Insight pentru unii utilizatori. Certificatul care cauzează erorile a fost reînnoit, iar fixarea a fost verificată intern. Suntem de monitorizare pentru a confirma că problema este pe deplin rezolvată și va împărtăși o nouă actualizare în curând.

2. 15 august 2026 la 09:12 UTCmonitoring

   Continuăm să monitorizăm orice alte probleme.

3. 15 august 2026 la 09:24 UTCresolved

   Acest incident a fost rezolvat.

Traducere automată din actualizarea oficială a incidentului.

1. 5 august 2026 la 10:01 UTCinvestigating

   We are experiencing an issue with report generation. Our team is aware and actively working to resolve it.

2. 5 august 2026 la 10:59 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 5 august 2026 la 12:40 UTCresolved

   This incident has been resolved.

Traducere automată din actualizarea oficială a incidentului.

1. 27 iulie 2026 la 08:30 UTCidentified

   Pianul se confruntă cu o problemă care afectează autentificarea și înregistrarea utilizatorilor din regiunea UE. Fereastra de conectare poate să nu se deschidă sau poate să nu răspundă. Am identificat cauza şi echipa noastră desfăşoară un fix. Vom împărtăși o actualizare de îndată ce sunt disponibile informații suplimentare.

2. 27 iulie 2026 la 08:34 UTCidentified

   Pianul a identificat faptul că această problemă afectează loginul și înregistrarea în toate regiunile, nu numai UE, așa cum s-a raportat inițial. Utilizatorii din toate regiunile pot avea aceleaşi simptome: fereastra de conectare nu se deschide sau nu răspunde. Echipa noastră continuă să-şi dea seama. Vom împărtăși o actualizare de îndată ce sunt disponibile informații suplimentare. Componente afectate: Înregistrare + Login - SUA - id. pian.io Înregistrare + Login - Australia - id-au.piano.io Înregistrare + Login - Asia - id-ap.piano.io Înregistrare + Login - UE - id. pian.io

3. 27 iulie 2026 la 08:35 UTCidentified

   Continuăm să lucrăm la o soluție pentru această problemă.

4. 27 iulie 2026 la 08:57 UTCidentified

   Pianul poate confirma această problemă, de fapt, afectează doar regiunile SUA și UE, precum și mediul Sandbox. AP şi AU nu sunt afectate. Ne cerem scuze pentru orice confuzie cauzată de actualizarea anterioară. Sandbox nu are o componentă dedicată a paginii de stare deoarece nu face parte din infrastructura de producție, această actualizare este prevăzută pentru vizibilitate. Echipa noastră continuă să-şi dea seama. Vom împărtăși o actualizare de îndată ce sunt disponibile informații suplimentare.

5. 27 iulie 2026 la 09:20 UTCmonitoring

   Pianul a implementat o fixare în toate regiunile și mediile afectate, inclusiv în Sandbox. Funcţionalitatea de conectare şi înregistrare a fost restaurată şi funcţionează normal. Vom continua să monitorizăm situația și vom oferi o actualizare suplimentară în cazul în care apar probleme.

6. 27 iulie 2026 la 14:50 UTCresolved

   Acest incident a fost rezolvat.

7. 3 august 2026 la 13:20 UTCpostmortem

   RCA pentru acest incident poate fi găsit la [** acest link**](https://rca.piano.io/wp-content/uploads/2026/07/2026-07-27-RCA-Identity-Management-login-issues.pdf).

Traducere automată din actualizarea oficială a incidentului.

1. 24 iulie 2026 la 07:51 UTCinvestigating

   Ca urmare a întreținerii recente a bazei de date programate în regiunea AP, am identificat un decalaj de date care afectează secțiunile jurnal de abonamente și subscripții Insights din Dashboard-ul editorului. Unii clienţi pot observa că achiziţiile recente nu sunt încă reflectate în raportul Jurnalului Abonamentului, iar unele măsurători în subscripţie Insights pot părea temporar inconsecvente. Echipa noastră regenerează datele afectate şi se aşteaptă ca acestea să fie rezolvate în următoarele zile. Vom împărtăși o actualizare de îndată ce vom avea mai multe informații.

2. 27 iulie 2026 la 08:04 UTCmonitoring

   A fost implementată o soluţie şi monitorizăm rezultatele.

3. 27 iulie 2026 la 08:39 UTCmonitoring

   Am restaurat datele afectate pentru Subscription Insights, iar măsurătorile ar trebui să fie acum afișate corect. Raportul Jurnalul Abonamentului nu a fost încă recuperat complet, iar unele achiziţii recente pot fi încă lipsă din această perspectivă. Echipa noastră continuă să regenereze datele rămase. Vom împărtăși o actualizare de îndată ce vom avea mai multe informații.

4. 28 iulie 2026 la 00:22 UTCresolved

   Decalajul de date care afectează jurnalul de abonament a fost acum rezolvat complet, iar toate achizițiile recente din regiunea AP sunt reflectate corect în raport. Combinat cu fixarea mai devreme a Subscription Insights, ambele zone afectate ale Editorului Dashboard au fost restabilite la normal. Acest incident este acum rezolvat. Vă mulțumim pentru răbdare în timp ce am finalizat regenerarea datelor.

Traducere automată din actualizarea oficială a incidentului.

1. 23 iulie 2026 la 12:31 UTCinvestigating

   Investigăm în prezent o problemă care afectează livrarea de pereți de plată și experiențe pentru editorii din Asia și Australia. Unele cereri nu reuşesc să se completeze cu succes. Echipa noastră de inginerie este activ de lucru pentru a identifica cauza rădăcină și de a restabili serviciul normal. Vom împărtăși o actualizare de îndată ce vom avea mai multe informații.

2. 23 iulie 2026 la 13:00 UTCidentified

   Problema a fost identificată și se pune în aplicare o soluție.

3. 23 iulie 2026 la 13:07 UTCmonitoring

   A fost implementată o soluţie şi monitorizăm rezultatele.

4. 23 iulie 2026 la 15:50 UTCresolved

   O problemă de infrastructură internă care afectează o dependenţă de sistem în centrul nostru de date din Tokyo a cauzat eşecuri de autentificare care au eşuat în cerere pentru API-ul publicului. Deoarece traficul de compas pentru Asia (AP) și Australia (AU) rute prin acest caz, ambele regiuni au văzut eșecuri ale cererilor de Compostor. Acest incident a fost rezolvat. Echipa noastră de inginerie a identificat cauza și restaurat sistemul afectat; serviciul a revenit la normal în toate regiunile. Ne cerem scuze pentru orice neplăceri cauzate.

Traducere automată din actualizarea oficială a incidentului.

1. 20 iulie 2026 la 20:36 UTCidentified

   Observăm întârzierile de prelucrare a datelor pe backend-ul profilului utilizatorului cauzate de eforturile de îmbunătățire a datelor pentru gestionarea prefixului cx și a aplicației compozitorului. Dacă utilizați actualizarea profilului extern al cxense API (https://api.cxense.com/profill/user/extern/update) veți observa 1-2 ore de întârzieri atunci când citiți același profil utilizând (https://api.cxense.com/profill/user/extern/update). Echipa noastră reconciliază acum datele înapoi într-o singură viziune, corectă, iar această reconciliere este sursa întârzierii în curs. Nu s-au pierdut date, toate evenimentele sunt prelucrate, în prezent cu o întârziere aproximativă de 1/2 ore. Ne cerem scuze pentru inconveniente și va împărtăși o actualizare ca backlog clar

2. 21 iulie 2026 la 11:52 UTCidentified

   Întârzierile de procesare a datelor continuă pe platforma profilurilor utilizatorilor, cu întârzieri curente de 1/2 ore. Am identificat faptul că o modificare recentă a datelor a dus la o creștere semnificativă a volumului datelor pentru un subset de clienți, care este principalul conducător al backlog-ului. Echipa noastră crește cu atenție procesul de procesare, monitorizând îndeaproape stabilitatea globală a sistemului pentru a evita introducerea de noi probleme. Suntem optimiști în ceea ce privește stabilizarea situației în curând și vom împărtăși o actualizare de îndată ce vom avea mai multe informații.

3. 22 iulie 2026 la 06:30 UTCmonitoring

   Procesarea datelor pe platforma de profil a utilizatorilor de pian a revenit aproape în timp real, iar backlog-ul este eliminat. Setez acest incident pentru monitorizare în timp ce echipa noastră completează curăţarea reziduală de la modificările anterioare ale datelor. Vom împărtăși o actualizare suplimentară odată ce incidentul este complet rezolvat.

4. 24 iulie 2026 la 20:38 UTCresolved

   Incidentul a fost rezolvat după monitorizare mai mult de 24 de ore. Vedem prelucrarea datelor în timp real

Traducere automată din actualizarea oficială a incidentului.

1. 20 iulie 2026 la 19:46 UTCidentified

   Observăm întârzierile de procesare a datelor pe profilul utilizatorului cauzate de eforturile de îmbunătăţire a datelor pentru gestionarea prefixului cx şi a aplicaţiei compozitorului. Dacă utilizați actualizarea profilului extern al cxense API (https://api.cxense.com/profill/user/extern/update) veți observa 1-2 ore de întârzieri atunci când citiți același profil utilizând (https://api.cxense.com/profill/user/extern/update). Echipa noastră reconciliază acum datele înapoi într-o singură viziune, corectă, iar această reconciliere este sursa întârzierii în curs. Nu s-au pierdut date, toate evenimentele sunt prelucrate, în prezent cu o întârziere aproximativă de 1/2 ore. Ne cerem scuze pentru inconveniente și va împărtăși o actualizare ca backlog clar

2. 20 iulie 2026 la 20:31 UTCidentified

   Continuăm să lucrăm la o soluție pentru această problemă.

Traducere automată din actualizarea oficială a incidentului.

1. 22 iunie 2026 la 14:59 UTCinvestigating

   We are currently experiencing a minor service disruption affecting user logins to the Piano dashboards, caused by an ongoing outage on Cloudflare's side. Our team is actively monitoring the situation. We apologize for any inconvenience this may cause and appreciate your patience. Further updates will be provided as soon as more information becomes available. For reference: https://www.cloudflarestatus.com/incidents/v3yl7jqmqj51

2. 22 iunie 2026 la 17:30 UTCmonitoring

   The incident has been mitigated, along with our provider's resolution. We will continue to monitor the situation.

3. 23 iunie 2026 la 01:02 UTCresolved

   This incident has been resolved.

1. 9 iunie 2026 la 09:52 UTCinvestigating

   Since approximately 11:00 PM (UTC) on June 8, 2026, there have been intermittent delays loading files into Snowflake. The average load duration is currently about 10 minutes, compared to the usual under 2 minutes. The issue has been identified and a ticket has been opened with Snowflake.

2. 10 iunie 2026 la 09:55 UTCresolved

   The incident has been resolved and is no longer affecting Piano Analytics. We apologise for the inconvenience caused.

3. 10 iunie 2026 la 09:55 UTCpostmortem

   **Incident explanation:** The latency was caused by an issue on our cloud data platform provider's side. An internal infrastructure configuration change introduced resource contention that affected workloads with high ingestion concurrency, leading to elevated response times and intermittent timeouts when loading files. The change has been reverted by the provider, and ingestion performance has fully returned to its normal baseline. **Actions performed:** Opened and tracked an incident with our data platform provider and provided detailed monitoring evidence to support their investigation. Deployed mitigations on our streaming ingestion stack (increased service scaling and improved handling of stalled ingestion calls) to limit customer impact during the incident. Temporarily tuned ingestion timeout and retry settings to keep file loading as stable as possible while the root cause was being addressed. Continuously monitored ingestion latency and error rates until performance returned to normal. Confirmed full recovery, then reverted the temporary configuration to restore standard behaviour and avoid masking any future issues. **Actions to come:** Continued close monitoring of ingestion latency over the coming days to confirm lasting stability. Keep the temporary mitigation patterns configurable in the code so they can be re-applied quickly should a similar provider-side degradation occur.

1. 29 mai 2026 la 02:31 UTCinvestigating

   We are currently experiencing an issue with the Content Crawler, which is failing to crawl content. Our team is actively investigating the root cause. We will provide further updates as more information becomes available.

2. 29 mai 2026 la 02:31 UTCinvestigating

   We are continuing to investigate this issue.

3. 29 mai 2026 la 08:39 UTCidentified

   The issue has been identified and a fix is being implemented.

4. 29 mai 2026 la 09:24 UTCmonitoring

   A fix has been implemented and all Content pipeline services have been restored. Some processing delays may persist while the crawling backlog clears. We will continue to monitor and confirm full resolution.

5. 29 mai 2026 la 14:03 UTCresolved

   This incident has been resolved.

6. 4 iunie 2026 la 09:00 UTCpostmortem

   RCA report for the incident is available at [**this link**](https://docs.piano.io/wp-content/uploads/2026/06/2026-05-29-RCA-Content-Crawler-Service-Disruption-1.pdf).

1. 28 mai 2026 la 16:27 UTCidentified

   We identified an issue in our systems starting around 10:20 UTC that is currently degrading CXSense platform responsiveness over the /public/user/id endpoint. As a result, some users may experience failed requests, while others may experience longer response times and timeouts. Our engineering team is actively investigating and working on mitigation efforts. We will continue to provide updates as more information becomes available.

2. 28 mai 2026 la 17:10 UTCmonitoring

   A fix has been implemented and we are currently monitoring the results. At this time, API performance has returned to normal operation levels and the platform is behaving as expected again. We will continue monitoring closely to ensure stability.

3. 29 mai 2026 la 03:53 UTCresolved

   This incident has been resolved.

4. 15 iunie 2026 la 09:25 UTCpostmortem

   RCA report for the incident is available at [**this link**](https://docs.piano.io/wp-content/uploads/2026/06/2026-05-28-RCA-Audience-API-Failures-happening-in-Europe-environment.pdf).

1. 20 mai 2026 la 10:19 UTCmonitoring

   On 20 May 2026, starting at approximately 09:58 UTC, we identified an issue affecting Piano Activation in the US environment, impacting the Dashboard, Piano ID authentication, and checkout flows. A fix has been applied and the platform is now operating normally. We are continuing to monitor the situation and further details will follow. We apologise for any inconvenience caused.

2. 20 mai 2026 la 12:41 UTCresolved

   The incident has been resolved. All services are operating normally. Between approximately 09:58 and 10:11 UTC, users in the US region may have experienced issues accessing the Piano Dashboard, signing in via Piano ID, or completing checkout flows. This was caused by a routine configuration update to our US environment that introduced a conflict and disrupted traffic routing to the affected services. Our team identified the issue, rolled back the change, and confirmed full recovery shortly after. To prevent this from happening again, we are reviewing our release process and will validate the change in a controlled manner before re-applying it. We apologize for the inconvenience and thank you for your patience.

1. 15 mai 2026 la 08:03 UTCidentified

   We are currently experiencing degraded performance across the Publisher Dashboard in the AP environment, with data taking up to 3 hours longer than usual to reflect recent changes. This may affect any section of the Dashboard — including user search, reporting, and other data views. Our engineering team has identified the underlying cause and is actively working on a resolution. We will provide updates as the situation progresses.

2. 16 mai 2026 la 07:16 UTCresolved

   This incident has been resolved.

1. 13 mai 2026 la 13:48 UTCinvestigating

   We are currently investigating issues affecting the execution of experiences in our European region for segmentation that relies on custom field rules. Impacted users may notice that experiences are not triggering as expected, not reaching the desired outcome. Our engineering team is actively investigating the issue.

2. 13 mai 2026 la 14:02 UTCmonitoring

   The issue has been identified and fixed; we're currently monitoring the experience executions.

3. 13 mai 2026 la 18:00 UTCresolved

   This incident has been resolved.

4. 15 mai 2026 la 09:39 UTCpostmortem

   An infrastructure update to the EU environment introduced an incompatibility that prevented Composer from retrieving Custom Fields. The issue was limited to the EU region and did not affect other environments. The update introduced a behavioural change in the network routing layer where a configuration setting that had previously been relied upon was no longer honoured under the new setup. This incompatibility was not detected during pre-production testing, as the test environments did not fully replicate the conditions needed to surface the issue. The root cause was identified and the configuration gap was addressed promptly. Piano is taking steps to improve parity between pre-production and production environments and to strengthen the validation process ahead of future infrastructure changes to prevent similar issues.

1. 13 mai 2026 la 08:52 UTCresolved

   Between 07:42 and 07:52 AM UTC, Piano experienced elevated error rates affecting the Publisher API and ID API in the EU environment. The incident occurred during an ingress upgrade from a deprecated version to the current supported version, which caused a routing configuration incompatibility. The issue lasted approximately 10 minutes and has been fully resolved. Publisher Dashboard, Checkout, and access controls in Composer operated normally throughout the incident and were not affected.

1. 8 mai 2026 la 22:21 UTCinvestigating

   We are currently experiencing a production incident on Piano Analytics products. Please excuse us for any inconvenience caused.

2. 8 mai 2026 la 22:21 UTCresolved

   The issue has been resolved and all Piano Analytics tools and interfaces are fully available. We are currently catching up the delay in real-time data retrieval.

1. 8 mai 2026 la 06:04 UTCinvestigating

   Composer is experiencing a service incident affecting C1X segmentation in both EU and US regions. Impact includes high error rates, degraded segment lookup, and degraded widget performance. The issue started at approximately 22:00 UTC on May 7 and continues with periods of instability. Our team is actively investigating the issue.

2. 8 mai 2026 la 09:26 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 8 mai 2026 la 17:36 UTCresolved

   The incident has been resolved.

1. 6 mai 2026 la 13:17 UTCidentified

   We are currently experiencing an issue with Composer in our sandbox environment; the Composer module and experiences fail to load. Our team has identified the root cause and is actively working to resolve the issue. We will provide updates as more information becomes available.

2. 6 mai 2026 la 13:43 UTCmonitoring

   The team has deployed a fix, and the issue has been resolved. Experiences are executing, and the Composer module is working normally. We will continue monitoring the remediation.

3. 6 mai 2026 la 13:44 UTCmonitoring

   We are continuing to monitor for any further issues.

4. 7 mai 2026 la 06:28 UTCresolved

   This incident has been resolved.

1. 5 mai 2026 la 08:21 UTCmonitoring

   Between 06:48 and 07:05 UTC, Piano ID API experienced elevated error rates in the US cluster. Requests requiring user authentication, token verification, and user profile retrieval were affected. Other Piano services including Composer and VX subscription management were not impacted. Service has been fully restored and all systems are operating normally. We apologize for any disruption caused during this incident.

2. 5 mai 2026 la 08:21 UTCresolved

   This incident has been resolved.

1. 27 aprilie 2026 la 16:57 UTCinvestigating

   We have found an issue with our priority rules for API interaction on server/edge in Composer. The dev team is currently investigating. Clients may find their list order being changed or unsorted without any user interaction. We will continue updating this incident once we identify the root cause.

2. 27 aprilie 2026 la 18:37 UTCinvestigating

   Our team has restored the priority rules to their pre-incident state while we continue to investigate the root cause. We advise customers to avoid making changes to priority rules until the investigation is complete. We will provide further updates as more information becomes available.

3. 27 aprilie 2026 la 22:01 UTCmonitoring

   The issue has been identified and mitigated; we will continue monitoring the remediation.

4. 28 aprilie 2026 la 09:20 UTCresolved

   This incident has been resolved.

5. 28 aprilie 2026 la 14:04 UTCpostmortem

   RCA report for the incident is available at [**this link**](https://docs.piano.io/wp-content/uploads/2026/04/2025-05-06-RCA-Experience-Priority-Data-Incident.pdf).