Ncedcloud 장애 기록

1. 2024년 5월 31일 PM 2:15 UTCresolved

   5월 23, 2024 9:35 Identified - NCDPI 및 Identity Automation은 이 아침에 학생 및 직원 데이터의 처리를 지연시키는 데이터를 식별했습니다. 문제는 식별되어 현재 해결에 노력하고 있습니다. 5월 23, 2024 10:26AM EDT Identified - NCDPI 및 Identity Automation은 현재 데이터가 성공적으로 내일 아침, 다음 파일 실행 중 5/24로 처리될 것으로 예상됩니다. 5월 24, 2024 9:16오전 Identified - 학생 및 직원 데이터 처리 지연은 5 / 24만큼 지속됩니다. NCDPI 및 Identity Automation은 해결을 위해 지속적으로 노력하고 있으며, 문제가 완전히 해결될 때까지 상태를 의사소통합니다. 5월 30, 2024 10:14AM EDT Identified - 학생 및 직원 데이터는 5 / 28까지 정확합니다. 파일 문제의 근본 원인은 조사 중이지만, NCDPI 및 Identity Automation은 월요일, 수요일 및 금요일에 파일을 수동으로 수정하고 처리 할 계획이 있습니다. 다음 학생 및 직원 파일은 5 / 31에 처리됩니다. 5월 31, 2024 10:15AM EDT 해결 - 학생 및 직원 파일은 5/31에 예상대로 처리되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2024년 3월 29일 PM 12:49 UTCresolved

   3월 27, 2024 4:55PM EDT Identified - NCEdCloud 직원 데이터 업데이트는 현재 소스 데이터의 사용자 필드가 데이터 staging 시스템에 너무 큰 문제가 발생했습니다. NCDPI 및 Identity Automation은 현재 투자하고 제안 된 해상도로 올립니다. 또 다른 상태 업데이트는 아침에 게시됩니다 3/28. 직원 데이터는 현재 3/22까지 정확해야 합니다. 직원은 영향을받지 않습니다, 기존 직원의 만 업데이트. 월 28, 2024 9:58AM EDT 모니터링 - NCEdCloud 직원 데이터는 3 / 28의 현재이어야합니다. NCPDI 및 Identity Automation은 3/29 직원 파일에 문제가 해결되지 않을 것이라고 확인하기 위해 노력하고 있습니다. 3월 29, 2024 8:49AM EDT 해결 - 3 / 29에 예상대로 직원 데이터 프로세스로 성공적으로 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2024년 2월 21일 PM 1:45 UTCresolved

   2월 20, 2024 8:33오전 EST Investigating - NCEdCloud 소스 데이터 처리는 현재 파일 배달 문제로 파악됩니다. NCDPI 및 Identity Automation은 적극적으로 투자하고 있습니다. NCEdCloud 데이터는 현재 2/18이어야 합니다. 2월 20, 2024 3:53오후 EST Identified - NCDPI 및 Identity 자동화는 파일 처리 문제점이 2/21에 해결될 것으로 예상됩니다. 2월 21, 2024 8:45AM EST Resolved - NCEdCloud의 데이터는 현재 2/21입니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2024년 1월 31일 PM 2:57 UTCresolved

   1월 30, 2024 10:02오전 EST Investigating - NCEdCloud 소스 데이터 처리는 현재 사용자가 계정에 누락 된 이메일의 예상치 못한 수로 인해 지연됩니다. 문제는 IDAuto와 NCDPI에 의해 조사됩니다. NCEdCloud 계정이 영향을받지 않았지만 새로운 파일이 처리 될 때까지 처리가 지연됩니다. 1월 31, 2024 9:57오전 EST Resolved - 1/31의 소스 데이터가 성공적으로 처리되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2022년 9월 29일 PM 6:03 UTCresolved

   September 15, 2022 10:28AM EDT Investigating - We have identified there is an issues and latency is expected at this time. We are investigating the core issue and will update site as details are available. September 15, 2022 2:16PM EDT Monitoring - At this time we are monitoring the site in order to ensure there are no additional issues. Upgraded to Operational. September 16, 2022 8:24AM EDT Investigating - It appears that we are experiencing latency within NCEdCloud 9-16-22. Currently amending the situation within AWS and will be monitor situation soon. September 21, 2022 12:44PM EDT Monitoring - Currently still monitoring issues that were happening with NCEdCloud last week. RCA occurring. September 29, 2022 2:03PM EDT Resolved - Issue is resolved. This is a 24 hours a day 7 days a week monitored event with alerts attached. RCA being determined.

1. 2022년 3월 1일 PM 2:42 UTCresolved

   February 28, 2022 1:37PM EST Monitoring - Amazon SNS service enables Rapid Identity to send SMS text messages directly to your employees. This service is currently having issues with specifically T-Mobile carrier. There is no indication that there are issues with any other carriers at this time. February 28, 2022 4:23PM EST Monitoring - The issue is not causing all carriers to be affected only T-Mobile and Sprint. March 1, 2022 9:42AM EST Resolved - On February 26, 2022, it appears that T-mobile's SMS servers started blocking the 10 origin numbers associated with our Amazon SNS account. We've reached out to the carrier to get reason behind the blockage, but at this time have still not heard back from them. To mitigate this issue we generated a new bank of origin phone numbers to send from. This change to origin numbers appears to have worked as we are now seeing successful delivery rate creep back up to normal. SMS service should now be restored for your T-mobile users. From what we can tell, this issue did not affect any other phone carrier.

1. 2022년 2월 10일 PM 6:00 UTCresolved

   February 10, 2022 11:11AM EST Investigating - We are currently experiencing a service disruption for NCDPI/NCEdCloud. We have identified the issue and are currently working to repair. No estimate at this time for repair. The ticket number for reference is 00062626. February 10, 2022 11:31AM EST Monitoring - Issue is being monitored and root cause analysis is being performed. All users should be able to access NCEdCloud at this time. February 10, 2022 1:00PM EST Resolved - This morning we experienced a 20 minute downtime that caused intermittent problems logging into NCEdCloud. The interruption has been identified and resolved with AWS and Identity Automation. Users should not be experiencing any further issues logging into NCEdCloud.

1. 2022년 1월 31일 AM 3:25 UTCresolved

   January 28, 2022 9:14AM EST Identified - There was an issue with a sync in PowerSchool that has been identified. There is a file that has not been able to process since Wednesday, January 26, 2022 identified as the Student file. We are currently working on a resolution for this issue. There will be no interruption or degradation of performance. Identity Automation appreciates your patience while we rectify the matter. January 30, 2022 10:25PM EST Resolved - All student file have been processed at this time.

1. 2022년 1월 10일 AM 2:50 UTCresolved

   January 9, 2022 9:50PM EST Identified - All internal Identity Automation emails are back up at this time. We do not expect any further downtime. January 9, 2022 9:50PM EST Resolved - All internal Identity Automation emails are back up at this time. We do not expect any further downtime.