История сбоев Pianoio

1. 21 октября 2026 г. в 18:48 UTCidentified

   We are currently experiencing a production incident on Piano Analytics products. Please excuse us for any inconvenience caused.

2. 22 октября 2026 г. в 07:58 UTCresolved

   The incident has been resolved and is no longer affecting Piano Analytics. We apologise for the inconvenience caused.

3. 22 октября 2026 г. в 07:58 UTCpostmortem

   **Incident explanation:** Snowflake outage affecting multiple core Snowflake services and features. (AWS - Europe (Ireland)) Many of Snowflake's services were unavailable, which affected part of the data processing chain, certain types of exports, and the analytics API. Incident Report : https://status.snowflake.com/incidents/bfh045zclk5k **Actions performed:** Monitoring the situation while awaiting the fix from Snowflake, along with several actions on our end aimed at resolving issues caused by this incident (fixing data processing delays on our end, fixing delays in certain exports, etc.).

1. 27 октября 2026 г. в 07:52 UTCresolved

   Между 18:00 UTC и 20:21 UTC 21 октября 2026 года некоторые пользователи не смогли войти на панель инструментов Piano ESP, поскольку страница входа была отключена. Некоторые новые подписки на рассылку новостей также могут не быть зарегистрированы в течение этого времени. Проблема была вызвана сбоем в работе внешнего поставщика услуг. Было установлено исправление, и приборная панель ESP теперь работает нормально. Приносим извинения за неудобства.

Автоматический перевод официального обновления инцидента.

1. 21 октября 2026 г. в 06:12 UTCresolved

   Между 06:54 и 15:51 16 октября сообщения, отправленные в LinkedIn через SocialFlow, не были опубликованы, и сбор статистики сообщений LinkedIn также был затронут. Проблема была вызвана изменением со стороны LinkedIn и была решена. Публикация и сбор статистических данных работают в обычном режиме с 15:51 UTC. Посты, которые вышли из строя во время этого окна, не были проверены автоматически и должны быть перенесены. Реаутентификации страниц LinkedIn не требуется.

Автоматический перевод официального обновления инцидента.

1. 12 октября 2026 г. в 07:13 UTCinvestigating

   В настоящее время мы расследуем проблему, затрагивающую автоматизированную публикацию в SocialFlow. Клиенты могут видеть новый контент из своих лент, не появляющийся в очередях публикации, и автоматические сообщения, не публикуемые в социальных сетях, включая X. Проблема существует примерно с 10 октября. Ручная публикация продолжает работать. Наша инженерная команда активно работает над выявлением первопричины. Мы поделимся обновлениями, как только у нас будет больше информации.

2. 12 октября 2026 г. в 08:15 UTCresolved

   Этот инцидент был урегулирован. Автоматизированная публикация в SocialFlow снова работает нормально, а новый контент из лент появляется в очередях публикаций и размещается в подключенных социальных сетях. Приносим свои извинения за причиненные неудобства.

3. 12 октября 2026 г. в 08:33 UTCpostmortem

   ** Коренная причина:** Внутренний компонент, ответственный за извлечение контента из клиентских каналов, прекратил обработку 10 октября и не был автоматически перезапущен. Это уменьшило количество контента, попадающего в издательскую систему, и автоматические сообщения в подключенные социальные сети были отложены или не опубликованы. Посты, запланированные непосредственно пользователями, не пострадали. ** Резолюция:** Компонент был перезапущен 12 октября в 07:20 UTC, а публикация вернулась в норму. Содержание, которое было поставлено в очередь, было опубликовано вскоре после этого. ** Следующие шаги:** Мы улучшаем наш мониторинг и автоматическое восстановление, чтобы этот тип проблемы был обнаружен и решен быстрее. Мы приносим извинения за срыв.

Автоматический перевод официального обновления инцидента.

1. 24 сентября 2026 г. в 08:33 UTCresolved

   Между 14:53 и 16:26 UTC 21 сентября у Piano возник вопрос, влияющий на публикацию постов в X. В течение этого периода затрагиваемые сообщения не отправлялись и после ограниченного числа автоматических повторных обращений сообщались как несостоявшиеся, а не опубликованные, с уведомлениями об ошибках, отправленными в затронутые учетные записи. Сообщения, которые не были отправлены во время этого окна, не были отправлены задним числом после восстановления службы и должны быть опубликованы снова. Причиной стало изменение внутренней конфигурации, произведенное в ходе плановых мониторинговых работ, которое было возвращено. Публикация в X полностью восстановлена.

Автоматический перевод официального обновления инцидента.

1. 14 сентября 2026 г. в 12:38 UTCinvestigating

   В настоящее время мы сталкиваемся с производственным инцидентом на продуктах Piano Analytics. Прошу прощения за причиненные неудобства.

2. 14 сентября 2026 г. в 13:08 UTCresolved

   Была обнаружена проблема с конфигурацией входа API. Для решения проблемы был применен возврат к предыдущей версии.

Автоматический перевод официального обновления инцидента.

1. 14 сентября 2026 г. в 12:38 UTCinvestigating

   В настоящее время мы сталкиваемся с производственным инцидентом на продуктах Piano Analytics. Прошу прощения за причиненные неудобства.

2. 14 сентября 2026 г. в 12:58 UTCresolved

   Некоторое проблемное поведение относительно разрешения было активным на производстве, когда оно должно было быть отключено с самого начала. Проблемная сетевая аннотация была отключена для производственной среды.

Автоматический перевод официального обновления инцидента.

1. 10 сентября 2026 г. в 09:28 UTCmonitoring

   Piano выявил проблему, затрагивающую проверку доступа в Composer для пользователей в регионах США и ЕС, которая началась примерно в 06:49 UTC. Основная причина была устранена, и проверки доступа были полностью восстановлены. Наша команда продолжит внимательно следить за ситуацией и предоставит дополнительную информацию в случае возникновения каких-либо проблем.

2. 10 сентября 2026 г. в 10:14 UTCmonitoring

   Этот инцидент был урегулирован. Проверки доступа в Composer были затронуты между 06:45 и 07:39 UTC в регионе США и между 07:10 и 07:34 UTC в регионе ЕС. Наряду с ошибками проверки доступа, доля запросов к затронутым службам также возвращала ошибки в течение тех же периодов. Вся затронутая функциональность была полностью восстановлена и никаких дальнейших ошибок не наблюдалось.

3. 10 сентября 2026 г. в 10:14 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 11 сентября 2026 г. в 11:01 UTCresolved

   Между 23:12 UTC 8 сентября и 10:03 UTC 9 сентября у Piano возникла проблема, связанная с автоматической публикацией контента. В течение этого периода настроенные RSS-каналы не могли быть получены, а сообщения на основе каналов не были опубликованы в Facebook или X. Статьи, опубликованные во время активной работы, могут не быть автоматически размещены на соответствующих социальных аккаунтах. Основная проблема была решена, и сбор и публикация кормов были полностью восстановлены. Наша команда продолжает работать над мерами по предотвращению повторения.

Автоматический перевод официального обновления инцидента.

1. 26 августа 2026 г. в 07:43 UTCinvestigating

   В настоящее время мы расследуем проблему, затрагивающую персонализированный контент и сегментацию аудитории для пользователей в нашей среде в США. Некоторые пользователи могут видеть отсутствующие или устаревшие данные персонализации, включая проблемы с сегментами аудитории и данными профиля пользователя, используемыми для таргетинга. Выпуск начался около 05:00 UTC. Наша инженерная команда активно работает над выявлением первопричины. Мы поделимся обновлениями, как только у нас будет больше информации.

2. 26 августа 2026 г. в 08:32 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

3. 26 августа 2026 г. в 20:26 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 24 августа 2026 г. в 15:31 UTCinvestigating

   В настоящее время мы расследуем проблему, затрагивающую персонализированный контент и сегментацию аудитории для пользователей в нашей среде в США. Некоторые пользователи могут видеть отсутствующие или устаревшие данные персонализации, включая проблемы с сегментами аудитории и данными профиля пользователя, используемыми для таргетинга. Наша инженерная команда активно работает над выявлением первопричины. Мы поделимся обновлениями, как только у нас будет больше информации.

2. 24 августа 2026 г. в 16:46 UTCmonitoring

   Доступность API улучшается и, как ожидается, полностью восстановится в ближайшее время. Мы обновим страницу статуса после ее восстановления.

3. 24 августа 2026 г. в 18:04 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 24 августа 2026 г. в 06:44 UTCinvestigating

   В настоящее время мы расследуем вопрос, влияющий на доставку электронных писем и push-уведомлений для пользователей ESP. Наша инженерная команда активно работает над выявлением первопричины. Мы поделимся обновлениями, как только у нас будет больше информации.

2. 24 августа 2026 г. в 07:47 UTCidentified

   Этот вопрос был определен, и в настоящее время осуществляется исправление.

3. 24 августа 2026 г. в 07:54 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

4. 24 августа 2026 г. в 09:15 UTCresolved

   Этот инцидент был урегулирован. Между 05:02 и 07:30 UTC сетевая ошибка, затрагивающая один сервер в центре обработки данных нашего хостинг-провайдера, нарушила инфраструктуру, ответственную за рендеринг электронной почты, отправку, импорт кормов и запланированные задачи. Электронные письма, запланированные во время этого окна, хранились и отправлялись после восстановления сервиса, а контент, используемый в кампаниях, отправленных вскоре после восстановления, мог отражать немного более старые данные.

Автоматический перевод официального обновления инцидента.

1. 15 августа 2026 г. в 09:00 UTCmonitoring

   Piano выявил проблему, затрагивающую доступ к Piano Insight для некоторых пользователей. Сертификат, вызывающий ошибки, был обновлен, и исправление было проверено внутри компании. Мы отслеживаем, чтобы подтвердить, что проблема полностью решена, и вскоре поделимся дальнейшим обновлением.

2. 15 августа 2026 г. в 09:12 UTCmonitoring

   Мы продолжаем отслеживать любые дополнительные проблемы.

3. 15 августа 2026 г. в 09:24 UTCresolved

   Этот инцидент был урегулирован.

Автоматический перевод официального обновления инцидента.

1. 5 августа 2026 г. в 10:01 UTCinvestigating

   Мы столкнулись с проблемой генерации отчетов. Наша команда знает и активно работает над его решением.

2. 5 августа 2026 г. в 10:59 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 5 августа 2026 г. в 12:40 UTCresolved

   This incident has been resolved.

Автоматический перевод официального обновления инцидента.

1. 27 июля 2026 г. в 08:30 UTCidentified

   Piano сталкивается с проблемой, затрагивающей логин и регистрацию пользователей в регионе ЕС. Окно входа может не открыться или может быть не реагирующим. Мы определили причину, и наша команда внедряет исправление. Мы поделимся обновлениями, как только появится дополнительная информация.

2. 27 июля 2026 г. в 08:34 UTCidentified

   Piano определила, что этот вопрос влияет на логин и регистрацию во всех регионах, а не только в ЕС. Пользователи во всех регионах могут испытывать одни и те же симптомы — окно входа не открывается или становится невосприимчивым. Наша команда продолжает развертывать исправление. Мы поделимся обновлениями, как только появится дополнительная информация. Пострадавшие компоненты: Регистрация + Логин - США - id.piano.io Регистрация + Логин - Австралия - id-au.piano.io Регистрация + Логин - Азия - id-ap.piano.io Регистрация + Логин - ЕС - id.piano.io

3. 27 июля 2026 г. в 08:35 UTCidentified

   Мы продолжаем работать над решением этой проблемы.

4. 27 июля 2026 г. в 08:57 UTCidentified

   Фортепиано может подтвердить, что эта проблема на самом деле затрагивает только регионы США и ЕС, а также среду Sandbox. AP и AU не затронуты. Мы приносим извинения за любую путаницу, вызванную предыдущим обновлением. Песочница не имеет выделенного компонента страницы статуса, поскольку она не является частью производственной инфраструктуры, это обновление предусмотрено для видимости. Наша команда продолжает развертывать исправление. Мы поделимся обновлениями, как только появится дополнительная информация.

5. 27 июля 2026 г. в 09:20 UTCmonitoring

   Piano внедрил исправление во всех пострадавших регионах и средах, включая песочницу. Функционал входа и регистрации восстановлен и работает в штатном режиме. Мы продолжим следить за ситуацией и предоставим дополнительную информацию в случае возникновения каких-либо проблем.

6. 27 июля 2026 г. в 14:50 UTCresolved

   Этот инцидент был урегулирован.

7. 3 августа 2026 г. в 13:20 UTCpostmortem

   RCA для инцидента можно найти по адресу [**эта ссылка**] (https://rca.piano.io/wp-content/uploads/2026/07/2026-07-27-RCA-Identity-Management-login-issues.pdf).

Автоматический перевод официального обновления инцидента.

1. 24 июля 2026 г. в 07:51 UTCinvestigating

   После недавнего запланированного обслуживания базы данных в регионе AP мы выявили пробел в данных, влияющий на разделы журнала подписки и инсайт подписки панели издателя. Некоторые клиенты могут заметить, что недавние покупки еще не отражены в отчете журнала подписки, а некоторые измерения в Subscription Insights могут показаться временно непоследовательными. Наша команда восстанавливает данные и ожидает, что это будет решено в течение следующих нескольких дней. Мы поделимся обновлениями, как только у нас будет больше информации.

2. 27 июля 2026 г. в 08:04 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

3. 27 июля 2026 г. в 08:39 UTCmonitoring

   Мы восстановили затронутые данные для Subscription Insights, и измерения теперь должны отображаться правильно. Отчет журнала подписки еще не полностью восстановлен, и некоторые недавние покупки все еще могут отсутствовать с этой точки зрения. Наша команда продолжает восстанавливать оставшиеся данные. Мы поделимся обновлениями, как только у нас будет больше информации.

4. 28 июля 2026 г. в 00:22 UTCresolved

   Пробел в данных, влияющий на журнал подписки, в настоящее время полностью устранен, и все недавние покупки в регионе AP правильно отражены в отчете. В сочетании с более ранним исправлением Subscription Insights, обе пораженные области панели инструментов Publisher были восстановлены в нормальном состоянии. Теперь этот инцидент урегулирован. Спасибо за ваше терпение, пока мы завершаем регенерацию данных.

Автоматический перевод официального обновления инцидента.

1. 23 июля 2026 г. в 12:31 UTCinvestigating

   В настоящее время мы расследуем вопрос, влияющий на предоставление платных веб-сайтов и опыта для издателей в Азии и Австралии. Некоторые запросы не могут быть успешно выполнены. Наша инженерная команда активно работает над выявлением первопричины и восстановлением нормального обслуживания. Мы поделимся обновлениями, как только у нас будет больше информации.

2. 23 июля 2026 г. в 13:00 UTCidentified

   Этот вопрос был определен, и в настоящее время осуществляется исправление.

3. 23 июля 2026 г. в 13:07 UTCmonitoring

   Реализовано исправление, и мы отслеживаем результаты.

4. 23 июля 2026 г. в 15:50 UTCresolved

   Проблема внутренней инфраструктуры, затрагивающая зависимость бэкэнд-системы в нашем токийском центре обработки данных, вызвала сбои аутентификации, которые привели к сбоям запросов для API Audience. Поскольку трафик Composer для маршрутов Азии (AP) и Австралии (AU) через этот экземпляр, оба региона увидели сбои в запросах Composer. Этот инцидент был урегулирован. Наша инженерная команда выявила причину и восстановила пораженную систему, сервис вернулся в норму во всех регионах. Мы приносим извинения за любые неудобства, которые это могло вызвать.

Автоматический перевод официального обновления инцидента.

1. 20 июля 2026 г. в 20:36 UTCidentified

   Мы наблюдаем задержки обработки данных на бэкэнде профиля пользователя, вызванные усилиями по улучшению данных для управления префиксом cx и идентификатором приложения композитора. Если вы используете API обновления внешнего профиля cxense (https://api.cxense.com/profile/user/external/update), вы будете наблюдать 1-2 часа задержки при чтении того же профиля с использованием (https://api.cxense.com/profile/user/external/update). Теперь наша команда согласует данные в едином правильном виде, и это согласование является источником продолжающейся задержки. Данные не были потеряны, все события обрабатываются, в настоящее время с приблизительной задержкой в 1-2 часа. Мы приносим извинения за неудобства и поделимся обновлением, поскольку отставание ясно

2. 21 июля 2026 г. в 11:52 UTCidentified

   Задержки обработки данных продолжаются на бэкэнде профиля пользователя с текущими задержками 1-2 часа. Мы определили, что недавнее изменение данных привело к значительному увеличению объема данных для подмножества клиентов, что является основным драйвером отставания. Наша команда тщательно увеличивает пропускную способность обработки, внимательно следя за общей стабильностью системы, чтобы избежать дальнейших проблем. Мы с оптимизмом смотрим на стабилизацию ситуации в ближайшее время и поделимся обновлениями, как только у нас будет больше информации.

3. 22 июля 2026 г. в 06:30 UTCmonitoring

   Обработка данных на бэкэнде Piano Audience User Profiles вернулась почти в режиме реального времени, и отставание было устранено. Мы устанавливаем этот инцидент для мониторинга, пока наша команда завершает остаточное очистку от более раннего изменения данных. Мы поделимся дополнительной информацией после того, как инцидент будет полностью урегулирован.

4. 24 июля 2026 г. в 20:38 UTCresolved

   Инцидент был урегулирован после мониторинга более 24 часов. Мы видим обработку данных в режиме реального времени

Автоматический перевод официального обновления инцидента.

1. 20 июля 2026 г. в 19:46 UTCidentified

   Мы наблюдаем задержки обработки данных на задней панели профиля пользователя, вызванные усилиями по улучшению данных для управления префиксом cx и идентификатором приложения композитора. Если вы используете API обновления внешнего профиля cxense (https://api.cxense.com/profile/user/external/update), вы будете наблюдать 1-2 часа задержки при чтении того же профиля с использованием (https://api.cxense.com/profile/user/external/update). Теперь наша команда согласует данные в едином правильном виде, и это согласование является источником продолжающейся задержки. Данные не были потеряны, все события обрабатываются, в настоящее время с приблизительной задержкой в 1-2 часа. Мы приносим извинения за неудобства и поделимся обновлением, поскольку отставание ясно

2. 20 июля 2026 г. в 20:31 UTCidentified

   Мы продолжаем работать над решением этой проблемы.

Автоматический перевод официального обновления инцидента.

1. 22 июня 2026 г. в 14:59 UTCinvestigating

   We are currently experiencing a minor service disruption affecting user logins to the Piano dashboards, caused by an ongoing outage on Cloudflare's side. Our team is actively monitoring the situation. We apologize for any inconvenience this may cause and appreciate your patience. Further updates will be provided as soon as more information becomes available. For reference: https://www.cloudflarestatus.com/incidents/v3yl7jqmqj51

2. 22 июня 2026 г. в 17:30 UTCmonitoring

   The incident has been mitigated, along with our provider's resolution. We will continue to monitor the situation.

3. 23 июня 2026 г. в 01:02 UTCresolved

   This incident has been resolved.