57 Pianoio incidents · 2025年8月 — official updates, affected components, duration and resolution details.
ピアノは、一部のユーザーのピアノインサイトへのアクセスに影響を与える問題を特定しました。 エラーが更新された証明書と、内部で修正が確認されています。 問題が完全に解決され、さらにアップデートを短時間で共有されるように監視しています.
今後の問題がないか引き続き監視しています。
この事件は解決しました.
公式のインシデント更新を自動翻訳しています。
We are experiencing an issue with report generation. Our team is aware and actively working to resolve it.
A fix has been implemented and we are monitoring the results.
This incident has been resolved.
ピアノは、EU地域の利用者のログインと登録に影響を及ぼす問題を経験しています。 ログインウィンドウが開くのに失敗したり、応答しなくなることがあります。 私たちは、原因を特定し、当社のチームは修正を展開しています。 更新履歴を随時更新いたします.
ピアノは、この問題がすべての地域でログインや登録に影響を及ぼすと確認しました。EUだけでなく、最初に報告しました。 すべての地域のユーザーは同じ症状を経験するかもしれません。ログインウィンドウが開きに失敗したり、反応しなくなることがあります。 当社のチームは、修正を引き続き展開しています。 更新履歴を随時更新いたします。 感染したコンポーネント: 登録 + ログイン - US - id.piano.io 登録+ログイン - オーストラリア - id-au.piano.io 登録 + ログイン - アジア - id-ap.piano.io 登録 + ログイン - EU - id.piano.io
この問題の修正には引き続き取り組んでいます。
ピアノは、アメリカやEU地域、サンドボックス環境にのみ影響を及ぼすため、この問題を確認することができます。 APとAUは影響を受けません。 事前のアップデートにより生じたいかなる混乱にもお詫び申し上げます。 サンドボックスは、生産インフラの一部ではないため、専用のステータスページコンポーネントを持っていません。このアップデートは、可視性のために提供されます。 当社のチームは、修正を引き続き展開しています。 更新履歴を随時更新いたします.
ピアノは、サンドボックスを含むすべての影響を受ける地域や環境全体で修正を行いました。 ログインと登録機能が復元され、正常に動作しています。 今後も状況を監視し、更なるアップデートをおこないていきます.
この事件は解決しました.
事件のRCAは[**このリンク**](https://rca.piano.io/wp-content/uploads/2026/07/2026-07-27-RCA-Identity-Management-login-issues.pdf)にあります.
公式のインシデント更新を自動翻訳しています。
最近、AP 地域におけるデータベースのメンテナンスを予定していた後、パブリッシャーダッシュボードのサブスクリプションログおよびサブスクリプションインサイトセクションに関するデータギャップを特定しました。 一部のクライアントは、最近の購入はまだサブスクリプションログレポートに反映されていないことに気づくかもしれません。サブスクリプションインサイトでは、一時的に矛盾する場合があります。 当社のチームは、影響を受けたデータを再生成し、次の数日以内に解決することが期待されます。 情報が増えるとすぐに更新情報を共有します.
修正を実装し、結果を監視しています.
サブスクリプションインサイトに影響を受けたデータを復元し、そこで測定したデータを正しく表示できるようになりました。 サブスクリプションログレポートはまだ完全に回復されていないと、一部の最近の購入はまだこのビューから欠落している可能性があります。 当社のチームは、残りのデータを再生し続けています。 情報が増えるとすぐに更新情報を共有します.
サブスクリプションログに影響するデータのギャップは完全に解決され、AP 領域のすべての最近の購入は、レポートに正しく反映されます。 以前の修正とサブスクリプションのインサイトと組み合わせ、パブリッシャーダッシュボードの影響を受けた領域は正常に戻りました。 この事件が解決しました。 データの再生が完了し、ご満足いただけましたら幸いです.
公式のインシデント更新を自動翻訳しています。
現在、アジアとオーストラリアの出版社のペイウォールや経験の配送に影響を及ぼす問題について調査しています。 一部のリクエストは正常に完了できません。 当社のエンジニアリングチームは、根本的な原因を特定し、正常なサービスを回復するために積極的に取り組んでいます。 情報が増えるとすぐに更新情報を共有します.
問題が特定され、修正が実装されています.
修正を実装し、結果を監視しています.
東京データセンターのバックエンドシステム依存性に影響を及ぼす内部インフラの問題は、Audience API の失敗リクエストにカスケードされた認証障害を引き起こしました。 アジア(AP)とオーストラリア(AU)のコンポーザートラフィックがこのインスタンスを通したため、コンポーザーのリクエストが失敗する地域も見つかります。 この事件は解決しました。 当社のエンジニアリングチームは、原因を特定し、影響を受けたシステムを復元する;サービスは、すべての地域で正常に戻りました。 ご迷惑をおかけいたしますが、何卒ご了承くださいますようお願い申し上げます.
公式のインシデント更新を自動翻訳しています。
Cx プレフィックスとコンポーサーアプリケーション ID の管理のためのデータ改善の努力によるユーザープロファイルのバックエンドのデータ処理遅延を観察しています。 cxense の外部プロファイル更新 API (https://api.cxense.com/profile/user/external/update) を使用している場合は、同じプロファイルを読んでいるときに1-2時間遅れを観察します(https://api.cxense.com/profile/user/external/update)。 弊社のチームは、データを単一の正しいビューに再構成し、この調整は進行中の遅延の原因となります。 データが失われず、すべてのイベントが処理され、現在約1～2時間遅れます。 不便をおかけし、バックログクリアとしてアップデートをお伝えします
データの処理遅延は、ユーザープロファイルのバックエンドを継続し、1〜2時間の現在の遅延で継続します。 最近のデータ変更は、バックログの第一次ドライバである、顧客のサブセットのためのデータ量を大幅に増加させることにつながりました。 当社のチームは、システム全体の安定性を密接に監視しながら、処理のスループットを徹底的に向上し、さらなる課題を防止します。 今後状況の安定化を最適化し、情報が増え次第にアップデートを共有します.
ピアノ・オーディエンス・ユーザー・プロファイル・バックエンドのデータ処理は、リアルタイムで処理され、バックログは消去されます。 このインシデントは、以前のデータ変更から残留クリーンアップを完了しながら、モニタリングするように設定しています。 インシデントが完全に解決したら、さらにアップデートを共有します.
監視後、24時間以上経過した事故が解決しました。 リアルタイムでデータの処理が見える
公式のインシデント更新を自動翻訳しています。
Cx プレフィックスとコンポーサーアプリケーション ID を管理するためのデータ改善努力によるユーザープロファイルのバックエンドのデータ処理の遅延を観察しています。 cxense の外部プロファイル更新 API (https://api.cxense.com/profile/user/external/update) を使用している場合は、同じプロファイルを読んでいるときに1-2時間遅れを観察します(https://api.cxense.com/profile/user/external/update)。 弊社のチームは、データを単一の正しいビューに再構成し、この調整は進行中の遅延の原因となります。 データが失われず、すべてのイベントが処理され、現在約1～2時間遅れます。 不便をおかけし、バックログクリアとしてアップデートをお伝えします
この問題の修正には引き続き取り組んでいます。
公式のインシデント更新を自動翻訳しています。
We are currently experiencing a minor service disruption affecting user logins to the Piano dashboards, caused by an ongoing outage on Cloudflare's side. Our team is actively monitoring the situation. We apologize for any inconvenience this may cause and appreciate your patience. Further updates will be provided as soon as more information becomes available. For reference: https://www.cloudflarestatus.com/incidents/v3yl7jqmqj51
The incident has been mitigated, along with our provider's resolution. We will continue to monitor the situation.
This incident has been resolved.
Since approximately 11:00 PM (UTC) on June 8, 2026, there have been intermittent delays loading files into Snowflake. The average load duration is currently about 10 minutes, compared to the usual under 2 minutes. The issue has been identified and a ticket has been opened with Snowflake.
The incident has been resolved and is no longer affecting Piano Analytics. We apologise for the inconvenience caused.
**Incident explanation:** The latency was caused by an issue on our cloud data platform provider's side. An internal infrastructure configuration change introduced resource contention that affected workloads with high ingestion concurrency, leading to elevated response times and intermittent timeouts when loading files. The change has been reverted by the provider, and ingestion performance has fully returned to its normal baseline. **Actions performed:** Opened and tracked an incident with our data platform provider and provided detailed monitoring evidence to support their investigation. Deployed mitigations on our streaming ingestion stack (increased service scaling and improved handling of stalled ingestion calls) to limit customer impact during the incident. Temporarily tuned ingestion timeout and retry settings to keep file loading as stable as possible while the root cause was being addressed. Continuously monitored ingestion latency and error rates until performance returned to normal. Confirmed full recovery, then reverted the temporary configuration to restore standard behaviour and avoid masking any future issues. **Actions to come:** Continued close monitoring of ingestion latency over the coming days to confirm lasting stability. Keep the temporary mitigation patterns configurable in the code so they can be re-applied quickly should a similar provider-side degradation occur.
We are currently experiencing an issue with the Content Crawler, which is failing to crawl content. Our team is actively investigating the root cause. We will provide further updates as more information becomes available.
We are continuing to investigate this issue.
The issue has been identified and a fix is being implemented.
A fix has been implemented and all Content pipeline services have been restored. Some processing delays may persist while the crawling backlog clears. We will continue to monitor and confirm full resolution.
This incident has been resolved.
RCA report for the incident is available at [**this link**](https://docs.piano.io/wp-content/uploads/2026/06/2026-05-29-RCA-Content-Crawler-Service-Disruption-1.pdf).
We identified an issue in our systems starting around 10:20 UTC that is currently degrading CXSense platform responsiveness over the /public/user/id endpoint. As a result, some users may experience failed requests, while others may experience longer response times and timeouts. Our engineering team is actively investigating and working on mitigation efforts. We will continue to provide updates as more information becomes available.
A fix has been implemented and we are currently monitoring the results. At this time, API performance has returned to normal operation levels and the platform is behaving as expected again. We will continue monitoring closely to ensure stability.
This incident has been resolved.
RCA report for the incident is available at [**this link**](https://docs.piano.io/wp-content/uploads/2026/06/2026-05-28-RCA-Audience-API-Failures-happening-in-Europe-environment.pdf).
On 20 May 2026, starting at approximately 09:58 UTC, we identified an issue affecting Piano Activation in the US environment, impacting the Dashboard, Piano ID authentication, and checkout flows. A fix has been applied and the platform is now operating normally. We are continuing to monitor the situation and further details will follow. We apologise for any inconvenience caused.
The incident has been resolved. All services are operating normally. Between approximately 09:58 and 10:11 UTC, users in the US region may have experienced issues accessing the Piano Dashboard, signing in via Piano ID, or completing checkout flows. This was caused by a routine configuration update to our US environment that introduced a conflict and disrupted traffic routing to the affected services. Our team identified the issue, rolled back the change, and confirmed full recovery shortly after. To prevent this from happening again, we are reviewing our release process and will validate the change in a controlled manner before re-applying it. We apologize for the inconvenience and thank you for your patience.
We are currently experiencing degraded performance across the Publisher Dashboard in the AP environment, with data taking up to 3 hours longer than usual to reflect recent changes. This may affect any section of the Dashboard — including user search, reporting, and other data views. Our engineering team has identified the underlying cause and is actively working on a resolution. We will provide updates as the situation progresses.
This incident has been resolved.
We are currently investigating issues affecting the execution of experiences in our European region for segmentation that relies on custom field rules. Impacted users may notice that experiences are not triggering as expected, not reaching the desired outcome. Our engineering team is actively investigating the issue.
The issue has been identified and fixed; we're currently monitoring the experience executions.
This incident has been resolved.
An infrastructure update to the EU environment introduced an incompatibility that prevented Composer from retrieving Custom Fields. The issue was limited to the EU region and did not affect other environments. The update introduced a behavioural change in the network routing layer where a configuration setting that had previously been relied upon was no longer honoured under the new setup. This incompatibility was not detected during pre-production testing, as the test environments did not fully replicate the conditions needed to surface the issue. The root cause was identified and the configuration gap was addressed promptly. Piano is taking steps to improve parity between pre-production and production environments and to strengthen the validation process ahead of future infrastructure changes to prevent similar issues.
Between 07:42 and 07:52 AM UTC, Piano experienced elevated error rates affecting the Publisher API and ID API in the EU environment. The incident occurred during an ingress upgrade from a deprecated version to the current supported version, which caused a routing configuration incompatibility. The issue lasted approximately 10 minutes and has been fully resolved. Publisher Dashboard, Checkout, and access controls in Composer operated normally throughout the incident and were not affected.
We are currently experiencing a production incident on Piano Analytics products. Please excuse us for any inconvenience caused.
The issue has been resolved and all Piano Analytics tools and interfaces are fully available. We are currently catching up the delay in real-time data retrieval.
Composer is experiencing a service incident affecting C1X segmentation in both EU and US regions. Impact includes high error rates, degraded segment lookup, and degraded widget performance. The issue started at approximately 22:00 UTC on May 7 and continues with periods of instability. Our team is actively investigating the issue.
A fix has been implemented and we are monitoring the results.
The incident has been resolved.
We are currently experiencing an issue with Composer in our sandbox environment; the Composer module and experiences fail to load. Our team has identified the root cause and is actively working to resolve the issue. We will provide updates as more information becomes available.
The team has deployed a fix, and the issue has been resolved. Experiences are executing, and the Composer module is working normally. We will continue monitoring the remediation.
We are continuing to monitor for any further issues.
This incident has been resolved.
Between 06:48 and 07:05 UTC, Piano ID API experienced elevated error rates in the US cluster. Requests requiring user authentication, token verification, and user profile retrieval were affected. Other Piano services including Composer and VX subscription management were not impacted. Service has been fully restored and all systems are operating normally. We apologize for any disruption caused during this incident.
This incident has been resolved.
We have found an issue with our priority rules for API interaction on server/edge in Composer. The dev team is currently investigating. Clients may find their list order being changed or unsorted without any user interaction. We will continue updating this incident once we identify the root cause.
Our team has restored the priority rules to their pre-incident state while we continue to investigate the root cause. We advise customers to avoid making changes to priority rules until the investigation is complete. We will provide further updates as more information becomes available.
The issue has been identified and mitigated; we will continue monitoring the remediation.
This incident has been resolved.
RCA report for the incident is available at [**this link**](https://docs.piano.io/wp-content/uploads/2026/04/2025-05-06-RCA-Experience-Priority-Data-Incident.pdf).