Google Chat
- resolved
** Резюме:** Пользователи чата Google сталкиваются с проблемой, когда они получают уведомления о новых сообщениях, но фактические сообщения не отображаются в их приложении чата, если пользователь не обновляет свое мнение. **Описание:** Мы испытываем периодические проблемы с Google Chat Friday, 2026-08-28 10:25 PDT. Наша инженерная команда исследовала этот вопрос и в настоящее время работает над его смягчением. Более подробную информацию мы предоставим к пятнице 2026-08-28 14:15 ПДТ с актуальными деталями. Мы приносим извинения всем, кто пострадал от сбоя. ** Симптомы клиента: ** Пользователи сталкиваются с проблемой, когда они получают уведомления о новых сообщениях, но фактические сообщения не отображаются в их приложении чата, если пользователь не обновляет свое мнение. **Работа вокруг:** Пользователи могут обновляться, чтобы видеть новые сообщения
- resolved
** Резюме** Пользователи Google Chat столкнулись с проблемой, когда они получали уведомления о новых сообщениях, но фактические сообщения не появлялись в их приложении чата, если пользователь не обновлял свое мнение. **Описание** Проблема с Google Chat была решена для всех пострадавших пользователей по состоянию на пятницу 2026-08-28 13:45 PDT. Из предварительного анализа вопрос был вызван недавними изменениями, которые были отменены для смягчения последствий. Мы благодарим вас за терпение, пока мы работали над решением проблемы. ** Симптомы клиентов** Пользователи столкнулись с проблемой, когда они получали уведомления о новых сообщениях, но фактические сообщения не появлялись в их приложении чата, если пользователь не обновлял свое мнение. **Работа вокруг** Никто, поскольку вопрос решен.
- resolved
##Инцидентный отчет ##Резюме В пятницу, 28 августа 2026 года, между 10:50 США / Тихий океан и 13:34 США / Тихий океан в течение 2 часов и 44 минут пользователи чата Google столкнулись с задержками в получении входящих сообщений в режиме реального времени в активных потоках разговоров через веб-сайты, настольные и мобильные приложения. В то время как пользователи продолжали получать уведомления о новых сообщениях, содержимое сообщений автоматически не отображалось в активных потоках разговора, пока пользователь вручную не обновил приложение или не отправил ответное сообщение. Для наших уважаемых клиентов Google Workspace мы глубоко сожалеем о перерыве в обслуживании, который вы испытали. Мы принимаем незамедлительные и решительные меры для решения этой проблемы и укрепления наших систем против будущих инцидентов. ##Коренная причина Инцидент произошел во время развертывания глобальной схемы базы данных. Несовместимое изменение схемы базы данных привело к тому, что записи базы данных, необходимые для доставки сообщений, начали выходить из строя. В частности, механизм синхронизации схем, разработанный для обеспечения высокой согласованности между первичным хранением и доставкой живых сообщений, столкнулся с редкой ошибкой состояния гонки. Это привело к тому, что диспетчеры бэкэнд-сообщений пытались писать против неготового состояния схемы, что приводило к сбоям в написании. Поскольку доставка сообщений в реальном времени имела активную зависимость от успешного завершения этих записей перед переносом событий на экраны пользователей, сбой вызвал задержки синхронизации входящих сообщений. Отдельные службы push-уведомлений и основное хранилище сообщений работали независимо и не затрагивались, поэтому пользователи по-прежнему получали оповещения о новых сообщениях, в то время как активные потоки разговоров испытывали задержки. ## Реабилитация и профилактика Проблема была обнаружена с помощью автоматического бэкэнд-оповещения об ошибках отправки, наряду с соответствующими отчетами клиентов. Google Engineering инициировала параллельные рабочие потоки для восстановления сервиса. В 12:44 по США / Тихому океану Google Engineering напрямую смягчила источник проблемы, удалив зависимость, которую доставка живого сообщения имела от неисправной записи базы данных. Это позволило новым вводимым сообщениям обойти несостоявшуюся запись и немедленно возобновить нормальную доставку в реальном времени на экраны пользователей. В 13:00 US/Pacific Engineering остановила и вернула изменение схемы базы данных в свою предыдущую проверенную стабильную версию, восстановив полную совместимость базы данных. К 13:34 по США/Тихоокеанскому региону при обработке очередей задержки синхронизации сообщений в реальном времени вернулись к 0% во всех доменах клиентов. Инженеры подтвердили, что полное состояние службы было восстановлено с нулевой потерей сообщений. Чтобы это не повторилось, мы выполняем следующие профилактические действия: ** Затрудненное внутреннее обнаружение:** Усилить автоматическую валидацию и верификацию для охвата этого конкретного сценария отказа на этапах предварительного производства и внутреннего развертывания. Это направлено на улавливание и смягчение несовместимости схем и синхронизацию краевых случаев внутри компании, прежде чем какой-либо трафик клиентов может быть затронут в будущем. ** Устойчивость к расовым условиям:** Внедрить архитектурные улучшения, чтобы сделать архитектуру синхронизации схемы и доставки сообщений устойчивой к условиям гонки. Это направлено на то, чтобы несоответствия фоновой схемы и синхронизации конфигурации не могли нарушить доставку сообщений в режиме реального времени. ## Подробное описание воздействия Окно удара инцидента произошло между 10:50 US/Pacific и 13:34 US/Pacific в пятницу, 28 августа 2026 года. Эта проблема применяется во всем мире ко всем средам чата Google. ** Google Chat: ** *** Отсроченное сообщение:** Новые сообщения не появлялись в активных потоках разговора автоматически. Пользователи должны были вручную обновить свой клиент или отправить новое сообщение/реакцию, чтобы заставить поток синхронизироваться. ***Сортировка почтовых ящиков и состояний чтения** Справочные действия, такие как обновление непрочитанных значков и перемещение активных пространств в верхнюю часть почтового ящика, имели высокую внутреннюю частоту ошибок и были значительно отложены для пользователей. *** Задержки индексации поиска:** Новые сообщения, отправленные во время окна отключения, застопорились в трубопроводе индексации, испытывая задержки в поиске. **Особые исключения:** ** Без потерь данных:** Ни в какой момент данные клиентов не были потеряны или скомпрометированы. Все сообщения, переданные во время окна инцидента, были надежно захвачены в первичном хранилище и успешно доставлены в потоки разговоров после очистки отставания.
Автоматический перевод официального обновления инцидента.