История сбоев Ncedcloud

1. 31 мая 2024 г. в 14:15 UTCresolved

   23 мая 2024 9:35AM EDT NCDPI и Identity Automation выявили проблему с данными, задерживающую обработку данных студентов и сотрудников. Этот вопрос был определен, и в настоящее время мы работаем над его решением. 23 мая 2024 10:26AM EDT NCDPI и Identity Automation в настоящее время ожидают, что данные будут успешно обработаны завтра утром, 5/24 во время следующего запуска файла. 24 мая 2024 9:16AM EDT Идентифицированная задержка обработки данных студентом и персоналом сохраняется по состоянию на 5/24. NCDPI и Identity Automation продолжают работать над решением и будут продолжать сообщать о статусе до тех пор, пока проблема не будет полностью решена. 30 мая 2024 10:14AM EDT Идентифицированные данные студентов и сотрудников точны до 5/28. В то время как основная причина проблем с файлами расследуется, NCDPI и Identity Automation планируют вручную исправлять и обрабатывать файлы по понедельникам, средам и пятницам, пока проблема не будет решена. Следующие файлы будут обработаны 5/31. 31 мая 2024 года 10:15 утра EDT Resolved - файлы студентов и сотрудников были обработаны, как и ожидалось, 5/31.

Автоматический перевод официального обновления инцидента.

1. 29 марта 2024 г. в 12:49 UTCresolved

   27 марта 2024 4:55PM EDT Обновления данных персонала NCEdCloud в настоящее время задерживаются из-за проблемы, когда поле пользователя в исходных данных слишком велико для системы постановки данных. NCDPI и Identity Automation в настоящее время ведут расследование и разработали предлагаемое решение. Еще одно обновление статуса будет опубликовано утром 3/28. В настоящее время данные о персонале должны быть точными до 3/22. Обратите внимание, что добавления сотрудников не затрагиваются, а только обновления существующих сотрудников. 28 марта 2024 9:58AM EDT Monitoring - Данные о персонале NCEdCloud должны быть актуальными по состоянию на 3/28. NCPDI и Identity Automation работают над тем, чтобы подтвердить, что проблема не повторится в досье сотрудников 3/29. 29 марта 2024 8:49AM EDT Решение проблемы было успешно решено в процессе обработки данных о персонале, как и ожидалось на 3/29.

Автоматический перевод официального обновления инцидента.

1. 21 февраля 2024 г. в 13:45 UTCresolved

   20 февраля 2024 8:33AM EST Обработка исходных данных NCEdCloud в настоящее время приостановлена из-за проблем с доставкой файлов. NCDPI и Identity Automation ведут активные исследования. Данные NCEdCloud должны быть актуальными до 2/18. 20 февраля 2024 3:53PM EST NCDPI и Identity Automation ожидают, что проблема обработки файлов будет решена 2/21. 21 февраля 2024 8:45AM EST Resolved - Данные в NCEdCloud актуальны по состоянию на 2/21.

Автоматический перевод официального обновления инцидента.

1. 31 января 2024 г. в 14:57 UTCresolved

   30 января 2024 10:02AM EST Обработка исходных данных NCEdCloud в настоящее время задерживается из-за неожиданного количества электронных писем, отсутствующих в учетных записях пользователей. Этот вопрос расследуется IDAuto и NCDPI. Учетные записи NCEdCloud не были затронуты, но обработка будет отложена до тех пор, пока не будут обработаны новые файлы. 31 января 2024 9:57AM EST Исходные данные для 1/31 были успешно обработаны.

Автоматический перевод официального обновления инцидента.

1. 29 сентября 2022 г. в 18:03 UTCresolved

   September 15, 2022 10:28AM EDT Investigating - We have identified there is an issues and latency is expected at this time. We are investigating the core issue and will update site as details are available. September 15, 2022 2:16PM EDT Monitoring - At this time we are monitoring the site in order to ensure there are no additional issues. Upgraded to Operational. September 16, 2022 8:24AM EDT Investigating - It appears that we are experiencing latency within NCEdCloud 9-16-22. Currently amending the situation within AWS and will be monitor situation soon. September 21, 2022 12:44PM EDT Monitoring - Currently still monitoring issues that were happening with NCEdCloud last week. RCA occurring. September 29, 2022 2:03PM EDT Resolved - Issue is resolved. This is a 24 hours a day 7 days a week monitored event with alerts attached. RCA being determined.

1. 1 марта 2022 г. в 14:42 UTCresolved

   February 28, 2022 1:37PM EST Monitoring - Amazon SNS service enables Rapid Identity to send SMS text messages directly to your employees. This service is currently having issues with specifically T-Mobile carrier. There is no indication that there are issues with any other carriers at this time. February 28, 2022 4:23PM EST Monitoring - The issue is not causing all carriers to be affected only T-Mobile and Sprint. March 1, 2022 9:42AM EST Resolved - On February 26, 2022, it appears that T-mobile's SMS servers started blocking the 10 origin numbers associated with our Amazon SNS account. We've reached out to the carrier to get reason behind the blockage, but at this time have still not heard back from them. To mitigate this issue we generated a new bank of origin phone numbers to send from. This change to origin numbers appears to have worked as we are now seeing successful delivery rate creep back up to normal. SMS service should now be restored for your T-mobile users. From what we can tell, this issue did not affect any other phone carrier.

1. 10 февраля 2022 г. в 18:00 UTCresolved

   February 10, 2022 11:11AM EST Investigating - We are currently experiencing a service disruption for NCDPI/NCEdCloud. We have identified the issue and are currently working to repair. No estimate at this time for repair. The ticket number for reference is 00062626. February 10, 2022 11:31AM EST Monitoring - Issue is being monitored and root cause analysis is being performed. All users should be able to access NCEdCloud at this time. February 10, 2022 1:00PM EST Resolved - This morning we experienced a 20 minute downtime that caused intermittent problems logging into NCEdCloud. The interruption has been identified and resolved with AWS and Identity Automation. Users should not be experiencing any further issues logging into NCEdCloud.

1. 31 января 2022 г. в 03:25 UTCresolved

   January 28, 2022 9:14AM EST Identified - There was an issue with a sync in PowerSchool that has been identified. There is a file that has not been able to process since Wednesday, January 26, 2022 identified as the Student file. We are currently working on a resolution for this issue. There will be no interruption or degradation of performance. Identity Automation appreciates your patience while we rectify the matter. January 30, 2022 10:25PM EST Resolved - All student file have been processed at this time.

1. 10 января 2022 г. в 02:50 UTCresolved

   January 9, 2022 9:50PM EST Identified - All internal Identity Automation emails are back up at this time. We do not expect any further downtime. January 9, 2022 9:50PM EST Resolved - All internal Identity Automation emails are back up at this time. We do not expect any further downtime.