Pricing
Status historyRSS updatesStatus API

Powered by Uptimus

    Viedoc 장애 기록

    50 Viedoc incidents · 2024년 3월 — official updates, affected components, duration and resolution details.

    현재 상태로 돌아가기

    PHP 취약점에 대한 정보 (php2shell)

    시작 2026년 10월 21일 오후 4:25 UTC · 진행 중

    Pending
    1. 2026년 10월 21일 오후 4:25 UTCmonitoring

      상태: 정보, 충격 없음 우리는 최근 공개 된 PHP 취약점의 인식입니다 “php2shell” (CVE-2026-109618 및 CVE-2026-109619). 우리는 취약점을 평가하고 Viedoc Suite에 영향을 미치지 않는 것을 확인할 수 있습니다. 우리의 고객에서 아무 활동도 요구되지 않으며, 당신의 자료의 가용성, 안전 또는 무결성에 충격이 없습니다. 우리는 우리의 표준 보안 프로세스의 일부로 상황을 모니터링합니다. 어떤 변경 사항이 있으면이 통지를 업데이트합니다.

    공식 인시던트 업데이트를 자동 번역했습니다.

    Sporadic 이메일 실패 EU 생산 Instance

    시작 2026년 9월 8일 오후 2:07 UTC · 2d 18h

    Issues경미한 인시던트
    영향을 받은 구성 요소
    Background processes (import/export/revisions/alerts/archive/disposal)
    1. 2026년 9월 8일 오후 2:07 UTCinvestigating

      Viedoc의 EDC 행동에 의해 트리거 된 이메일 경고는 다음 시간 동안 EU 생산 인스턴스에 간헐적으로 실패했습니다. 월요일, 8월 31, 11:02–17:25 CEST 목요일, 9월 3, 13:31 CEST – 9월 4, 22:07 CEST 대부분의 이메일은 예상대로 보내지 만, 일부 경우에 하위 설정이 지연되거나, 전혀 배달되지 않습니다. 다른 인스턴스는 영향을받지 않습니다. 우리는 적극적으로 투자하고 더 많은 정보로 업데이트를 게시 할 것입니다.

    2. 2026년 9월 10일 오후 1:51 UTCmonitoring

      우리는 우리의 이전 보고서 이후 새로운 이메일 실패를 관찰하지 않았습니다. 우리는 이제 상황을 모니터링하고 문제가 완전히 해결 될 수 있도록 한 번 추가 업데이트를 게시합니다.

    3. 2026년 9월 11일 오전 8:25 UTCresolved

      이 사건은 해결되었습니다.

    4. 2026년 9월 17일 오전 8:12 UTCpostmortem

      ** EU Production Instance의 이메일 실패 ** ** 설명** 아래 두 창 동안 Viedoc의 행동에 의해 유발 된 이메일 경고가 간헐적으로 전송되었습니다. 가장 예상대로 배달되었습니다. 하위 세트가 지연되고 일부는 전혀 배달되지 않았습니다. * 8월 31일 월요일 11:02–17:25 CEST * 목요일, 9월 3, 13:31 CEST – 9월 4, 22:07 CEST Viedoc의 이메일 경고는 사용자가 데이터를 저장하는 순간에 응용 프로그램에 의해 전송되지 않습니다. 이 연구의 구성을 기반으로 한 후 즉시 실행되는 배경 처리에 의해 생산됩니다. 경고가 전송되어야합니다. 이 두 창 동안 배경 처리는 항상 완료되지 않았다, 그래서 경고 발생 되었거나 결코 생성되지 않았다. 이 기간 동안 사용자가 입력하고 저장 한 데이터는 예상대로 저장되었습니다. 이 웹 사이트는 애플 리케이션에 전념. 우리는 정품 앱과 게임을 제공 할 목적으로이 사이트를 만들었습니다. 4AppsApk 최고의 안드로이드 애플 리케이션을위한 무료 APK 파일 다운로드 서비스, 계략. ** 원인 ** Viedoc의 백그라운드 처리는 병렬에서 일하는 몇몇 서버의 맞은편에 달합니다. 각 서버는 Viedoc이 작업을 안전하게 조정할 수있는 공유 된 내부 서비스에 대한 작업 연결이 필요합니다. 예를 들어, 두 서버가 동일한 주제를 동시에 처리하지 않도록하십시오. 이 창에서, 개별 서버는 연결이 잃고 그것을 다시 설치하지 않았다. 영향을받는 서버가 계속 작업을 수락하지만 완료 할 수 없습니다. 다른 서버는 동시에 실행되지 않았기 때문에 충격이 간헐적이었고, 왜 플랫폼이 건강한 전반적인 모습을 계속했습니다. ** 정확한 행동 ** * 영향을받는 서버가 식별 및 교체되었습니다. 정상적인 처리, 경고 발생을 포함하여, 즉시 후에 재개. * 우리는 그 후속 처리가 제대로 완료되었는지 확인하고, 그 이상의 이메일 실패가 발생했습니다. **Preventative 동작 ** 증가된 감시 우리는 모니터링을 증가시키고 모든 개별 서버에서이 특정 실패를 감지하는 추가 경고를 훨씬 빨리, 이을 방지하는 것은 조용히 실패. 지속적인 조사 이 연결이 열리지 않는 이유에 대한 조사, 우리는 위의 완화에서 분리로 치료하고 있습니다.

    공식 인시던트 업데이트를 자동 번역했습니다.

    중국에 있는 임시 방해

    시작 2026년 9월 4일 오후 3:00 UTC · 0m

    Issues경미한 인시던트
    1. 2026년 9월 4일 오후 4:15 UTCresolved

      우리는 23 : 00과 00:00 사이에 .cn 포털에 도달 할 수없는 고객에게 주도하는 임시 방해가있었습니다. 문제는 우리의 인프라에 있었고, 우리는 불편을 해결합니다. 시스템은 정상으로 돌아가고 기밀성이나 무결성에 문제가 없습니다. 이 문제는 우리의 시스템에 영향을 미치는 접근.

    공식 인시던트 업데이트를 자동 번역했습니다.

    프랑스 중앙 정전 (Viedoc Europe)

    시작 2026년 8월 17일 오전 9:54 UTC · 1h 27m

    Outage중대한 인시던트
    영향을 받은 구성 요소
    Subject portal (ViedocMe)Document management (ViedocTMF)Application programming interface (API)Main portal (clinic/admin/designer)Reporting tool (ViedocReports)Background processes (import/export/revisions/alerts/archive/disposal)
    1. 2026년 8월 17일 오전 9:54 UTCmonitoring

      우리는 프랑스 중앙 지역의 Azure의 underlying 플랫폼 구성 요소에 inssues를 경험하고있다, 이것은 짧은 기간 동안 사용할 수없는 서비스로 경험 할 수있는 트래픽의 일부 손실을 만들. 우리는 투자하고 여기에 게시 할 것입니다.

    2. 2026년 8월 17일 오전 10:09 UTCmonitoring

      우리는 더 많은 문제를 모니터링하고 있습니다.

    3. 2026년 8월 17일 오전 11:25 UTCresolved

      Incident는 이제 Microsoft에 의해 해결되고 우리는 Viedoc 스위트가 다시 완전히 작동한다는 것을 확인할 수 있습니다. 우리는 불편을 끼쳐 드려요.

    4. 2026년 8월 17일 오후 12:27 UTCpostmortem

      ## 요약 우리는 프랑스 중부 지역의 Azure \ (Azure App services\)의 underlying 플랫폼 구성 요소에 대한 경험이 풍부한 문제가 있으며, 고객이 사용할 수없는 서비스로 경험 한 트래픽의 손실을 만들었습니다. 우리의 시스템 모니터링은 즉시 문제를 잡았고 1 분 이내에 응답 한 플랫폼 팀을 경고했습니다. 우리는 15 분 안에 문제를 플랫폼 공급자로 이었습니다. ## 영향 Europe 인스턴스의 모든 제품 ## 기간 2026-08-17 09:32 UTC에서 2026-08-17 11:20 UTC. ## 뿌리 원인 Microsoft Azure Cloud의 인프라 구성 요소는 프랑스 중부 지역의 Azure App Service 플랫폼 내에서 들어오는 요청을 처리하는 데 책임있는 운영 임계 값을 초과하여 고객의 작업 부하를 지원하는 서비스 리소스의 가용성을 감소시킵니다. 결과, Viedoc 경험의 간헐적 인 가용성 문제 및 실패 요청. ## 충격 데이터 confidentality, 무결성 또는 개인 정보 보호에 영향을받지 않고 Viedoc 가용성에 영향을 미칩니다. ## 활동 플랫폼 제공 업체와 함께 용량.

    공식 인시던트 업데이트를 자동 번역했습니다.

    중국 지역 문제

    시작 2026년 7월 29일 오후 12:07 UTC · 4h 59m

    Outage중대한 인시던트
    영향을 받은 구성 요소
    Document management (ViedocTMF)Application programming interface (API)Background processes (import/export/revisions/alerts/archive/disposal)Subject portal (ViedocMe)Main portal (clinic/admin/designer)Reporting tool (ViedocReports)
    1. 2026년 7월 29일 오후 1:35 UTCinvestigating

      우리는 현재이 문제를 조사, 곧 업데이트.

    2. 2026년 7월 29일 오후 2:11 UTCinvestigating

      이 문제는 중국의 데이터 센터 decommissioning과 관련이 있으며 조사를 계속하고 있습니다.

    3. 2026년 7월 29일 오후 5:06 UTCresolved

      이 사건은 Azure Cloud China 내의 문제로 확인되었으며 문제가 미묘한 것으로 확인되었습니다. 우리는 root-cause 분석이있는 경우 우리는 사건 보고서로 업데이트됩니다. 우리는 어떤 불편든지를 위해 apologize.

    4. 2026년 7월 31일 오후 1:23 UTCpostmortem

      ## 요약 우리의 중국 지역은 우리의 체계 성분 사이 내부 메시징과 관련된 우리의 플랫폼 공급자에 있는 윤곽 결함 때문에 outage를, 효과적으로 4 시간 및 40 분의 기간 동안 우리의 제품 한 벌을 렌더링합니다. 고객 영향은 일반적으로 매우 낮은 교통량으로 중국에서 밤낮으로 인해 낮을 것으로 예상됩니다. 우리의 시스템 모니터링은 즉시 문제를 붙잡고 1 분 안에 응답한 우리의 플랫폼 팀을 경고하고 우리는 1 시간 안에 문제가 플랫폼 공급자로 이었습니다. A 타입의 지원 티켓은 실제로 2 시간 및 32 분 후에 문제가 있었는지 확인 할 수있는 플랫폼 제공 업체로 기록되었으며 38 분 후에 해결되었습니다. ## 영향 China 인스턴스의 모든 제품 ## 기간 2026-07-29 12:07 UTC에서 2026-07-29 16:47 UTC. ## 뿌리 원인 중국, 21ViaNet/Microsoft Azure Cloud China의 플랫폼 공급자의 구성 오류. ## 충격 가용성만. 데이터 무결성 및 데이터 기밀성. ## 활동 플랫폼 공급자와 함께 운영 절차, 모니터링 및 사고 응답을 개선합니다.

    공식 인시던트 업데이트를 자동 번역했습니다.

    Viedoc Me Submissions는 UTC 대신 현지 시간대에 기록

    시작 2026년 7월 9일 오후 9:40 UTC · 6d 12h

    Pending
    영향을 받은 구성 요소
    Subject portal (ViedocMe)Subject portal (ViedocMe)Subject portal (ViedocMe)Subject portal (ViedocMe)
    1. 2026년 7월 9일 오후 9:40 UTCidentified

      4.95 출시 이후, Viedoc Me 제출은 사이트의 로컬 시간대보다 UTC 시간을 사용하여 데이터베이스에 기록되었습니다. UTC 날짜와 사이트의 로컬 날짜가 제출 시점과 다릅니다. Viedoc Clinic의 이벤트 날짜는 현지 날짜 대신 UTC 날짜를 잘못 반영합니다. 연구 디자인에서 정의된 자료 입력 창에 따라서, 이것은 또한 out-of-window 쿼리에서 유래할지도 모릅니다. Viedoc Clinic UI의 감사 트레일은 "Show History"를 통해 액세스하여 현지 시간대에 따라 올바른 날짜와 시간 우표를 표시합니다. 이 문제는 Viedoc Me 응용 프로그램의 현재와 유산 버전에 영향을줍니다. 문제는 식별되고 수정은 현재 준비 중입니다. 수정은 사이트의 현지 시간대를 사용하여 새 제출을 저장하지만, 이미 발생 한 out-of-window 쿼리를 수정하지 않습니다. 이 미래 업데이트에 해결 될 것입니다.

    2. 2026년 7월 14일 오후 2:57 UTCidentified

      우리는 가능한 한 빨리이 문제를 해결하기 위해 적극적으로 노력하고 있습니다. Hotfix는 현재 최종화되고 테스트되고 있으며, 다음 주 상반기에 생산할 것으로 예상됩니다.

    3. 2026년 7월 16일 오전 6:53 UTCidentified

      우리는 오늘 일 도중 생산 환경에 hotfix를 풀어 시작할 것입니다. 업데이트는 릴리스가 모든 인스턴스에 완료되면 게시됩니다.

    4. 2026년 7월 16일 오전 9:42 UTCresolved

      사건은 모든 훈련 및 생산 인스턴스에 hotfix 4.95.2의 방출로 해결되었습니다. 이 릴리스는 재발송에서 문제를 방지합니다. 그러나 UTC에 이미 기록 된 이벤트 날짜는 현재 변경되지 않으며이 문제에 의해 이미 방아쇠가 발생하면 수정 될 수 있습니다. 현재 UTC에 저장 된 제출은 나중에 수정됩니다. 이 보정의 타이밍은 아직 확인되지 않았습니다.

    공식 인시던트 업데이트를 자동 번역했습니다.

    Batch upgrade after form revision clears data in repeating item groups on EU and US instances

    시작 2026년 6월 10일 오후 6:32 UTC · 6d 16h

    Pending
    영향을 받은 구성 요소
    Main portal (clinic/admin/designer)Main portal (clinic/admin/designer)
    1. 2026년 6월 10일 오후 6:32 UTCinvestigating

      After the Viedoc 4.95 release, when a revision is applied to a form containing a repeating item group, and a user upgrades the form from the landing page, data previously entered in the repeating item group is cleared. The issue is occurring on the EU and US training and production instances. Investigation is ongoing. Until further information is known, we advise all customers to refrain from applying revisions requiring form upgrades on forms containing repeating item groups.

    2. 2026년 6월 10일 오후 11:31 UTCidentified

      The issue has been identified and a fix is being implemented.

    3. 2026년 6월 16일 오후 2:45 UTCidentified

      Hotfix 4.95.1 has been released on the US training and production instances. The incident is resolved on those instances. The hotfix will be deployed to EU training and production instances tomorrow.

    4. 2026년 6월 17일 오전 10:40 UTCresolved

      Hotfix 4.95.1 has been released on the EU training and production instances. The incident is now resolved on all instances.

    Temporary operational disturbance observed on the Chinese instance

    시작 2026년 6월 3일 오후 12:12 UTC · 1h 11m

    Issues경미한 인시던트
    영향을 받은 구성 요소
    Document management (ViedocTMF)Application programming interface (API)Background processes (import/export/revisions/alerts/archive/disposal)Subject portal (ViedocMe)Main portal (clinic/admin/designer)Reporting tool (ViedocReports)
    1. 2026년 6월 3일 오후 12:12 UTCmonitoring

      Temporary operational disturbance observed in the Viedoc suite on the Chinese instance (clinic.viedoc.cn).

    2. 2026년 6월 3일 오후 1:23 UTCresolved

      This incident has been resolved.

    Operational disturbance observed on the Chinese instance

    시작 2026년 5월 28일 오전 5:30 UTC · 1h 10m

    Outage중대한 인시던트
    영향을 받은 구성 요소
    Document management (ViedocTMF)Application programming interface (API)Background processes (import/export/revisions/alerts/archive/disposal)Subject portal (ViedocMe)Main portal (clinic/admin/designer)Reporting tool (ViedocReports)
    1. 2026년 5월 28일 오전 7:35 UTCinvestigating

      Operational disturbance observed in Viedoc suite on the Chinese instance (clinic.viedoc.cn). Investigations are ongoing since 05:20 CMT

    2. 2026년 5월 28일 오전 7:38 UTCresolved

      The incident has been resolved since 06:40 CMT

    Operational disturbance observed on the Chinese instance

    시작 2026년 5월 18일 오전 9:55 UTC · 37m

    Pending
    영향을 받은 구성 요소
    Document management (ViedocTMF)Application programming interface (API)Background processes (import/export/revisions/alerts/archive/disposal)Subject portal (ViedocMe)Main portal (clinic/admin/designer)Reporting tool (ViedocReports)
    1. 2026년 5월 18일 오전 10:24 UTCinvestigating

      Operational disturbance observed in Training on the Chinese instance (clinic.viedoc.cn). Investigations are ongoing.

    2. 2026년 5월 18일 오전 10:26 UTCinvestigating

      We are continuing to investigate this issue.

    3. 2026년 5월 18일 오전 10:32 UTCresolved

      This incident has been resolved.

    Issues with randomization configuration approval and legacy medical coding tool on EU and US instances

    시작 2026년 5월 6일 오전 9:48 UTC · 5d 0h

    Issues경미한 인시던트
    영향을 받은 구성 요소
    Main portal (clinic/admin/designer)Main portal (clinic/admin/designer)
    1. 2026년 5월 6일 오전 9:48 UTCidentified

      After the Viedoc 4.94 release, the following issues affect the EU and US training and production instances: - Users cannot approve randomization configurations in Viedoc Admin when kit allocation is not used. Randomization and kit allocation in Viedoc Clinic are not affected. - WHO Drug dictionary terms are not loading as expected in the legacy medical coding tool. The new medical coding tool is not affected. We are working on a fix for these issues.

    2. 2026년 5월 7일 오전 6:34 UTCidentified

      After the Viedoc 4.94 release, the following issues affect the EU and US training and production instances: - Users cannot approve randomization configurations in Viedoc Admin when kit allocation is not used. Randomization and kit allocation in Viedoc Clinic are not affected. - WHO Drug dictionary terms are not loading as expected in the legacy medical coding tool. The new medical coding tool is not affected. - Intermittent failures in Designer, where users are unexpectedly logged out, are affecting certain users. We are working on a fix for these issues, and the Designer issue is currently under investigation.

    3. 2026년 5월 8일 오전 8:22 UTCidentified

      A hotfix is currently being prepared and will be deployed to both our EU and US instances. Based on preliminary timelines, we expect this release to go out on Monday, May 11.

    4. 2026년 5월 11일 오전 9:54 UTCresolved

      This incident was resolved this morning with the release of hotfix version 4.94.1 on both the EU and US instances.

    Operational disturbance observed on the European instance

    시작 2026년 4월 27일 오전 11:00 UTC · 8h 0m

    Pending
    영향을 받은 구성 요소
    Subject portal (ViedocMe)Document management (ViedocTMF)Application programming interface (API)Main portal (clinic/admin/designer)Reporting tool (ViedocReports)Background processes (import/export/revisions/alerts/archive/disposal)
    1. 2026년 4월 27일 오후 1:04 UTCinvestigating

      Operational disturbance observed in Viedoc 4 on the European instance (v4.viedoc.net). Investigations are ongoing.

    2. 2026년 4월 27일 오후 5:40 UTCinvestigating

      Microsoft Azure experienced a power event at their France Central datacenter, caused by a loss of utility power from an external provider. Power has since been restored via backup generators and recovery is underway. As of now, there are no active disruptions to Viedoc services, and we continue to monitor the situation closely.

    3. 2026년 4월 27일 오후 5:42 UTCmonitoring

      Microsoft Azure experienced a power event at their France Central datacenter, caused by a loss of utility power from an external provider. Power has since been restored via backup generators and recovery is underway. As of now, there are no active disruptions to Viedoc services, and we continue to monitor the situation closely.

    4. 2026년 4월 27일 오후 7:00 UTCresolved

      This incident has been resolved.

    Sporadic failures with text message delivery in some European countries

    시작 2025년 12월 9일 오전 9:37 UTC · 2h 43m

    Pending
    영향을 받은 구성 요소
    Subject portal (ViedocMe)Main portal (clinic/admin/designer)
    1. 2025년 12월 9일 오전 9:37 UTCinvestigating

      We have received reports of intermittent delivery failures affecting text messages sent to numbers with country codes +31 (Netherlands), +32 (Belgium), +33 (France), and +44 (United Kingdom). An investigation is currently underway together with the subproccessor. The default SMS sender is changed from a phone number to "Viedoc" to reduce the risk of texts being treated as spam.

    2. 2025년 12월 9일 오후 12:20 UTCresolved

      Since 10.30 CET today text messages are delivered as expected to numbers with country codes previously listed.

    Issues Generating the User Administration Log

    시작 2025년 12월 5일 오후 12:25 UTC · 11d 2h

    Pending
    영향을 받은 구성 요소
    Main portal (clinic/admin/designer)Main portal (clinic/admin/designer)Main portal (clinic/admin/designer)Main portal (clinic/admin/designer)
    1. 2025년 12월 5일 오후 12:25 UTCidentified

      The User Administration Log (Excel) and Log of Users and Roles (PDF) cannot currently be generated for studies containing more than 100 users. This issue was introduced in the 4.90 release and affects all instances where version 4.90 has been deployed. The root cause has been identified, and a corrective fix is currently in preparation.

    2. 2025년 12월 9일 오전 8:30 UTCidentified

      A fix has been developed and is currently undergoing testing. The fix is planned to be deployed as a hotfix.

    3. 2025년 12월 16일 오후 3:18 UTCresolved

      This issue has been resolved with the release of Viedoc 4.90.1, which was deployed to all production instances on 2025-12-16. The User Administration Log (Excel) and Log of Users and Roles (PDF) can now be generated as expected, including for studies containing more than 100 users.

    Delay in email delivery on US and EU instances

    시작 2025년 12월 1일 오후 1:10 UTC · 19h 11m

    Issues경미한 인시던트
    영향을 받은 구성 요소
    Background processes (import/export/revisions/alerts/archive/disposal)Background processes (import/export/revisions/alerts/archive/disposal)
    1. 2025년 12월 1일 오후 1:10 UTCidentified

      Since around 12.30 CET, 1st of December, Viedoc is not sending any emails from the EU and US training and production instances due to a service disruption. The issue has been identified and we are working with our subprocessor to resolve the issue. All emails triggered during the affected period have been queued and will be delivered. The incident is caused by a malfunction at one of our subprocessors.

    2. 2025년 12월 1일 오후 1:46 UTCmonitoring

      The email queue is currently being processed, and messages are being delivered, although with a temporary delay.

    3. 2025년 12월 2일 오전 8:21 UTCresolved

      The queue had been fully processed at around 9.20 PM CET on 2025-12-01. Since that time emails have been delivered without delay.

    Delay in email delivery on EU instances

    시작 2025년 11월 25일 오후 1:31 UTC · 19h 36m

    Issues경미한 인시던트
    영향을 받은 구성 요소
    Background processes (import/export/revisions/alerts/archive/disposal)
    1. 2025년 11월 25일 오후 1:31 UTCmonitoring

      Between 13:22 CET and 14:12 CET on 25 November 2025, Viedoc did not send any emails from the EU training and production instance due to a service disruption. The issue was identified and fully resolved at 14:12 CET, after which email processing resumed as normal. All emails triggered during the affected period have been queued and will be delivered. The incident was caused by a malfunction at one of our subprocessors.

    2. 2025년 11월 25일 오후 2:16 UTCmonitoring

      The email queue is currently being processed, and messages are being delivered, although with a temporary delay.

    3. 2025년 11월 26일 오전 9:08 UTCresolved

      The queue had been fully processed at around 5.30 PM CET on 2025-11-25.

    Operational disturbance observed on the Chinese instance

    시작 2025년 11월 25일 오전 1:00 UTC · 0m

    Outage중대한 인시던트
    1. 2025년 11월 25일 오전 3:19 UTCresolved

      Operational disturbance observed on the Chinese instance (clinic.viedoc.cn). Resolved

    Cancellation of the 4.89 Release for CN Instances

    시작 2025년 11월 11일 오전 11:55 UTC · 0m

    Pending
    영향을 받은 구성 요소
    Document management (ViedocTMF)Application programming interface (API)Background processes (import/export/revisions/alerts/archive/disposal)Subject portal (ViedocMe)Main portal (clinic/admin/designer)Reporting tool (ViedocReports)
    1. 2025년 11월 11일 오전 11:55 UTCresolved

      The planned release of version 4.89 to the CN training and production instances has been cancelled due to unforeseen technical issues specific to the Chinese server environment. As the 4.90 release is already scheduled for December, we will proceed directly from version 4.88 to 4.90 for the CN training and production instances. The impact to end users is minimal, as version 4.89 contains only non-critical bug fixes. No other instances or regions are affected by this change. We appreciate your understanding and apologize for any inconvenience this may cause.

    Login issues on EU production instance

    시작 2025년 11월 2일 오후 10:30 UTC · 0m

    Outage중대한 인시던트
    1. 2025년 11월 3일 오후 1:27 UTCresolved

      From approximately 23.44 UTC to 23.54 UTC, users faced issues logging in to the European production instance. Investigations to find the root cause are ongoing. No other instances were affected.

    2. 2025년 11월 10일 오전 10:45 UTCpostmortem

      Description From approximately 23.44 UTC to 23.54 UTC on 2025-11-02, users were unable to log in to the European production instance. It is possible that users faced sporadic issues logging in also between approximately 23.00 UTC and 23.44 UTC. No other instances were affected. ‌ Cause The cause of the issue was an unexpected error in the identity provider \(idp\), leading to an accumulating memory consumption during the evening \(UTC\) of 2025-11-02. From approximately 23.00 UTC users would face sporadic failures when trying to log in. From approximately 23.44 UTC users could not log in. At 23.54 UTC on 2025-11-02 the idp was restarted, and users could log in as expected again. ‌ Corrective Action Alerts were triggered when the idp did not respond and the idp was restarted again at 2354 UTC on 2025-11-02. After the restart users could log in as expected again. ‌ Preventive Action Preliminary investigation identified a few improvements that could be made to make the idp more resilient. Implementation of these improvements have been initiated while the investigation of the issue continues.

    Sporadic email failures on EU production server

    시작 2025년 9월 2일 오후 1:56 UTC · 1d 0h

    Issues경미한 인시던트
    영향을 받은 구성 요소
    Main portal (clinic/admin/designer)
    1. 2025년 9월 2일 오후 1:56 UTCinvestigating

      Emails triggered from EDC actions in Viedoc has been failing sporadically on the EU production instance since approximately 9AM CEST 2025-09-02. No other instances are affected. Investigations are ongoing.

    2. 2025년 9월 3일 오전 8:49 UTCidentified

      The issue has been identified and a fix is being implemented.

    3. 2025년 9월 3일 오전 11:25 UTCmonitoring

      A fix has been implemented and emails are now being sent as expected. We will continue to monitor the situation.

    4. 2025년 9월 3일 오후 2:27 UTCresolved

      Since approximately noon CEST, emails triggered from the EDC has been delivered as expected.

    5. 2025년 9월 9일 오후 8:22 UTCpostmortem

      **Description** Between 9AM CEST on 2025-09-02 and noon CEST 2025-09-03 there were sporadic failures in email alerts expected to be triggered from Viedoc on the EU production instance. No other instances were affected. Customers were initially informed through the status page at 15.56 CEST on 2025-09-03. ‌ **Cause** On Tuesday at 9AM CEST on 2025-09-02, there was a very high load on the system. The high load on the system caused worker function apps, used to handle various processes  in the EDC, to scale out to the maximum use of 20 instances in parallel. This caused failures, and in combination with in-built retry policy of failing actions, there was an overload on the system. While form save and form view continued to work as expected throughout the duration of the issue, there were sporadic errors in specific system actions in the post-processing step. * EDC email alerts, configured in the CRF design, were sporadically not sent during this time window. It did not affect all emails. * Terms defined to be coded in the medical coding tool sporadically failed to sync to Viedoc Coder. It did not affect all terms. ‌ **Corrective action** Once the root cause of the exceptions was identified, the worker function app was gradually scaled down to run on 4 instances to avoid having too many actions ongoing at the same time. This work begun around 11AM CET on 2025-09-03 and an immediate improvement could be seen. Around noon 2025-09-03 the situation was completely resolved, and all emails could be sent as expected again. ‌ Email alerts not sent during this issue could not be re-sent and will also not show up in the communication log. ‌ All terms that had not synced properly with Viedoc Coder during the issue, were synced with Viedoc Coder on the afternoon of 2025-09-03 and 2025-09-04. ‌ **Preventive action** Scaling down the worker function app to run on 4 instances is not considered to bring any noticeable impact on performance, but will ensure the same overload issue will not occur again. An evaluation will be performed if it is necessary to scale up the worker function app again and if so, how this could be done without causing any similar issues.