1password 장애 기록

1. 2026년 7월 22일 PM 5:55 UTCinvestigating

   SaaS Manager는 현재 관리된 Credentials과 통신할 수 없습니다. 결과적으로 Better Together 기능을 사용하는 고객은 credential 소유권으로 변경할 수 없습니다. 우리는 적극적으로 문제를 투자하고 더 많은 정보를 제공 할 것입니다.

2. 2026년 7월 22일 PM 7:20 UTCresolved

   수정이 배포되고이 문제는 이제 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 17일 PM 6:52 UTCmonitoring

   SaaS Manager 고객에 능동적 워크플로우를 제공 할 수 있습니다. 우리 팀은 신속하게 문제를 확인하고 수정을 구현했습니다. 우리는 이제 복구를 모니터링하여 서비스를 계속 정상으로 돌려줍니다.

2. 2026년 7월 17일 PM 6:57 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 13일 PM 6:59 UTCinvestigating

   우리의 엔지니어링 팀은 개별 및 가족 계정의 사용자 관련 작업을 분해하는 문제를 조사하고 있습니다. 사용자는 사용자를 확인하고 삭제하거나 삭제할 수 없습니다. 사용자는 통합 페이지를로드 할 수 없습니다.

2. 2026년 7월 13일 PM 7:37 UTCidentified

   이 문제는 확인되고 우리의 엔지니어링 팀은 수정을 배포하기 위해 노력하고 있습니다.

3. 2026년 7월 13일 PM 7:57 UTCresolved

   수정이 배포되고이 문제는 이제 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 13일 PM 3:47 UTCresolved

   이 문제의 해결은 구현되었으며, 우리 팀은 모니터링하고 있습니다. 아웃시, GitHub Actions는 최신 CLI 버전을 끌어 들일 수 있으며, 파이프라인을 실패합니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 7월 2일 PM 7:44 UTCinvestigating

   우리는 장치 신뢰의 부족을 인식하고 문제점을 조사하고 있습니다.

2. 2026년 7월 2일 PM 8:05 UTCinvestigating

   이 문제를 계속 조사하고 있습니다.

3. 2026년 7월 2일 PM 8:12 UTCidentified

   문제는 식별되고 수정이 구현됩니다.

4. 2026년 7월 2일 PM 8:30 UTCresolved

   수정이 배포되고 모든 서비스는 작업입니다.

5. 2026년 7월 11일 AM 1:05 UTCpostmortem

   # Incident Postmortem - 장치 신뢰 인증 아웃 **일시:** 2026-07-02 **입력시간 \(UTC\):** 19:28 - 20:28 ** 서비스 \ (s \)는 다음과 같습니다 : ** 이 사건에 영향을 미치는: 미국/글로벌 \(Device Trust Authentication Service, Device Trust Check Server, Device Trust Portal, Device Trust API\) 및 유럽 \(Device Trust Authentication Service, Device Trust Check Server, Device Trust Portal, Device Trust API\). **실시간:** 1시간 ## 요약 7월 2일, 2026일, 1Password Device Trust는 19:28 UTC에 시작된 약 1시간을 지속했습니다. 이 창에서 모든 장치 신뢰 서비스는 사용할 수 없으며 사용자는 인증 할 수 없습니다. 우리는 루트 원인을 확인했습니다: 우리의 클라우드 로드 밸런싱 인프라에 대한 내부 구성 변경은 일시적으로 필요한 엔드 포인트를 허용하는 것보다 더 넓은 적용되었습니다. 이것은 보안 사건이 아니며 제 3 자를 포함하지 않았습니다. 구성은 완전히 복원되었습니다, 서비스는 완전히 복원되었습니다, 그리고 우리는 반복에서 이 유형의 문제점을 방지하기 위하여 추가적인 safeguard를 실행했습니다. ## 고객에 충격 * ** 모든 장치 신뢰 서비스는 60 분 초과 창에서 완전히 사용할 수 없습니다. 사용자는 인증 포털 \(**[**auth.kolide.com**](http://auth.kolide.com)**\), admin 콘솔 \(**[**app.kolide.com**](http://app.kolide.com)**\), API 엔드포인트 및 장치 서버를 포함한 모든 장치 신뢰 서비스에 대해 인증할 수 없습니다.** * ** 고객 수 \ (대략 \) : ** 장치 신뢰 고객의 100 % * **Geographic Regions Affected \ (해당되는 경우) : ** 미국 및 EU ## 어떤 Happened? 7 월 2, 2026, 내부 서비스의 보안 구성을 개선하기위한 구성 변경은 장치 신뢰에 의해 의존 공유 네트워크 라우팅 구성 요소에 영향을보다 더 광범위하게 적용되었습니다. 변경은 Device Trust를 지원하는 네트워크 인프라를 대체합니다. 그러나, 트래픽 라우팅 구성은 새로 만들어진 자원 대신 이전 인프라를 참조하는 것을 계속. 결과적으로 Device Trust 인증 엔드포인트는 제한이 없습니다. 변경 복원 된 연결 및 서비스를 재생합니다. ***시간표 \(UTC\):** * 19:28: 적용된 네트워크 윤곽 변화; 장치 신뢰 서비스를 위한 여정 소통량에 책임있는 네트워크 짐 승수기는 unachable 되었습니다 * 19:30: 자동화된 감시는 정전과 방아쇠 경고를 검출합니다 * 19:33: Incident는 [status.1password.com] (http://status.1password.com)에 선언됩니다. * 20:03: 뿌리 원인은 짐 balancer 윤곽 문제점으로 확인됩니다 * 20:24: 짐 balancer는 정확한 윤곽으로 recreated * 20:26 복구는 [app.kolide.com] (http://app.kolide.com)에 대해 확인 * 20:28 회복은 [auth.kolide.com] (http://auth.kolide.com)를 위해 확인됩니다 * ** 기여 인자 \(if any\):** * ** 검토 또는 유효 기간 동안 검색되지 않은 구성 요소 범위. ** 변화에 의해 영향을받는 네트워크 인프라 클래스는 여러 서비스에서 공유되었지만, 이 의존성은 변경 검토 과정에서 문서 또는 표면이되지 않았습니다. 결과, 사전 제작 유효성 검사, 생산 롤아웃 전에 낮은 환경에서 수행하면서 모든 의존적 서비스를 커버하지 않았고, Device Trust의 영향은 변경 도달 생산 전에 확인되지 않았습니다. * **Concurrent 진단 신호는 뿌리 원인 ID를 느렸습니다. ** 시간이 시작되면 관련 인증서 갱신 오류가 네트워크 연결 실패와 함께 표면. 네트워크 구성 변경의 동시 지연 식별을 모두 조사합니다. ## 어떻게 해결되었습니까? * **해결 단계:** 정전의 소스가 확인되면, 엔지니어가 구성 변경을 다시 거쳤습니다. 영향을받는 네트워크 인프라는 원본, 공개적으로 접근 가능한 구성으로 재구성되었으며 모든 장치 신뢰 인증 엔드포인트로 복원되었습니다. 서비스 복구는 사건이 폐쇄되기 전에 영향을받는 서비스에서 순차적으로 확인되었습니다. * ** 해결책의 평가: ** 뒤로, 모든 Device Trust 인증 엔드포인트가 닿을 수 있고 트래픽을 수용하도록 검증된 엔지니어. 해결책의 고객 확인은 지원 팀을 통해서 그 후에 받았습니다. ## 미래 사고를 방지하기 위해 무엇을 할 것인가 * **부설 인프라 변경에 대한 명시적 승인이 필요합니다. ** 우리는 중요한 네트워크 인프라를 파괴하고 재창조하기 전에 수동 검토 및 승인을 필요로하는 안전한 가드를 구현하고 있습니다. 변경 범위 생산 전에 의도되지 않은 범위를 잡기위한 포크 기능을 만듭니다. * ** 공유 인프라 구성 요소에 대한 범위 가시성을 향상시킵니다. ** 우리는 공유 인프라 구성 요소와 서비스의 의존성을 문서화하고,이 정보를 우리의 변경 검토 프로세스에 통합. 공유 구성 요소의 미래 변화는 배포하기 전에 다운스트림 영향의 명시적 평가가 필요합니다. * ** 공유된 종속의 사전 제작 검증.** 우리는 영향을받는 구성 요소를 공유하는 모든 서비스에 대한 검증을 요구하기 위해 우리의 변경 촉진 프로세스를 업데이트하고 있습니다. - 변경 전은 생산에 홍보됩니다. * ** 트래픽 라우팅에 실패의 단일 지점. ** 우리는 장치 트러스트의 트래픽 라우팅 구성으로 중복을 소개하는 건축 변화를 평가하고, 완전한 아웃age 보다는 오히려 degraded 서비스에 있는 어떤 단 하나 성분 결과에 있는 실패. ## 다음 단계 및 통신 * 이 시간에 우리의 고객에서 아무 활동도 요구되지 않습니다. 우리는 신뢰할 수있는 안정적인 서비스를 제공하기 위해 최선을 다하고 있으며, 우리는이 행사에서 배우고 다시 일어나기 위해 필요한 조치를 취하고 있습니다. 감사합니다. 감사합니다. 1Password 팀

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 6월 29일 PM 10:08 UTCinvestigating

   SSO 집행과의 초대를 수락하려고 시도하는 사용자는 초대를받지 않고 403 오류를받습니다. 우리의 기술설계 팀은 적극적으로 문제점을 투자하고 있습니다.

2. 2026년 6월 29일 PM 10:55 UTCidentified

   문제점은 확인되고 우리의 기술설계 팀은 고침을 배치하는 것을 노력하고 있습니다.

3. 2026년 6월 29일 PM 11:40 UTCidentified

   우리의 엔지니어링 팀은이 문제에 대한 수정을 배포하기 위해 계속됩니다. 반면에, 운동은 확인되었습니다. [email protected]에 직접 지원팀에 문의하고, 당신은 운동 단계를 통해 당신을 지원할 것입니다.

4. 2026년 6월 30일 PM 2:09 UTCresolved

   이 사건은 해결되었습니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 6월 24일 PM 5:15 UTCinvestigating

   1Password 계정에서 잠겨있는 일부 사용자는 복구 코드를 사용하여 액세스 권한을 복원하려고 시도 할 때 "Something was wrong" 오류가 발생합니다. 우리의 개발 팀은 문제점의 aware이고 적극적으로 원인을 조사하고 있습니다. 우리는 더 많은 정보로 업데이트를 제공 할 것입니다.

2. 2026년 6월 24일 PM 5:30 UTCinvestigating

   우리 팀은이 문제를 조사합니다. 우리는 적극적으로 원인을 결정하고 가능한 한 추가 업데이트를 공유합니다.

3. 2026년 6월 24일 PM 5:50 UTCinvestigating

   문제는 여전히 조사 중입니다. 업데이트는 계속됩니다.

4. 2026년 6월 24일 PM 6:32 UTCinvestigating

   조사는 진행 중입니다. 우리의 팀은 적극적으로 원인을 결정하고 그들이 가능한 한 업데이트 공유.

5. 2026년 6월 24일 PM 6:35 UTCidentified

   문제는 식별되고 수정이 구현됩니다.

6. 2026년 6월 24일 PM 6:51 UTCmonitoring

   수정이 구현되어 결과를 모니터링하고 있습니다.

7. 2026년 6월 24일 PM 7:01 UTCresolved

   문제는 이제 해결되고, 1Password 서비스에 대한 액세스는 완전히 복원되어야 합니다.

공식 인시던트 업데이트를 자동 번역했습니다.

1. 2026년 6월 18일 PM 5:54 UTCidentified

   We have identified the cause of the synchronization issues affecting legacy 1Password 7 clients (OPI7 and OPM7) with 1Password and are deploying a fix. Affected customers may experience item creations or updates not synchronizing to 1Password, in some cases without a visible error. We expect service to be restored shortly and will provide another update once the fix has been fully deployed and verified. Modern clients and broader 1Password functionality do not appear to be affected.

2. 2026년 6월 18일 PM 6:50 UTCresolved

   This incident has been resolved.

1. 2026년 6월 16일 PM 4:24 UTCidentified

   Sign in attempt audit events are currently delayed and admins are unable to migrate to hosted provisioning. Our engineering team has identified the issue and are actively working on a fix.

2. 2026년 6월 16일 PM 4:58 UTCmonitoring

   A fix has been deployed and we are now monitoring the results.

3. 2026년 6월 16일 PM 9:11 UTCmonitoring

   We are still monitoring the results of the deployed fix. Hosted provisioning issues are resolved. Audit events in some regions are caught up while others are still in progress.

4. 2026년 6월 17일 PM 4:00 UTCresolved

   This incident has been resolved.

1. 2026년 6월 11일 PM 9:49 UTCinvestigating

   We are currently investigating an issue affecting the Device Trust Authentication Service. Customers may experience timeouts or receive 503 responses when attempting to authenticate with Device Trust. Our team is actively working to identify the cause and restore normal service as quickly as possible.

2. 2026년 6월 11일 PM 10:02 UTCinvestigating

   Our teams continue to investigate the cause of timeout errors affecting the Device Trust Authentication Service.

3. 2026년 6월 11일 PM 10:17 UTCinvestigating

   Our teams continue to investigate the cause of timeout errors affecting the Device Trust Authentication Service. Customers may experience authentication failures, timeouts, or 503 errors when attempting to authenticate with Device Trust. At this time, there is no significant change in impact or scope to report. Investigation and mitigation efforts remain ongoing, and we will provide another update as soon as additional information becomes available.

4. 2026년 6월 11일 PM 10:32 UTCinvestigating

   Authentication services have recovered, and our teams continue to investigate the cause of timeout errors affecting the Device Trust Authentication Service. Investigation and mitigation efforts remain ongoing, and we will provide another update as soon as additional information becomes available.

5. 2026년 6월 11일 PM 10:47 UTCmonitoring

   Our teams have identified a cause of the issues affecting the Device Trust Authentication Service and have taken steps to provide relief. We are seeing improved service performance and are continuing to monitor the situation closely to ensure stability. We will provide further updates as needed.

6. 2026년 6월 12일 PM 11:18 UTCresolved

   This incident has been resolved.

1. 2026년 5월 16일 PM 3:51 UTCinvestigating

   Files can not be uploaded or downloaded, and images may not be loading properly. Pages within the application may not be loading. Some integrations and workflows may have experienced errors. This issue affects the US and EU regions. Our engineering team is currently investigating.

2. 2026년 5월 16일 PM 5:33 UTCidentified

   The issue has been identified, and our engineers are working on a fix.

3. 2026년 5월 16일 PM 5:46 UTCmonitoring

   Issues with file uploads and downloads, pages not loading, and errors affecting some integrations and workflows are now resolved. Customers may still experience issues with images loading properly, and our engineering team is actively working to resolve them. We expect further progress and resolution later today. The issue affected both the US and EU regions.

4. 2026년 5월 16일 PM 8:36 UTCresolved

   This incident has been resolved.

1. 2026년 5월 4일 PM 5:59 UTCidentified

   Workflows and integrations have not run as of approximately 12:30pm ET today, this means that automatic onboarding and off-boarding are currently not occurring. In addition, the Workflows and Integrations pages are failing to load. Our Engineering team has identified the issue and are currently working on a fix.

2. 2026년 5월 4일 PM 6:27 UTCmonitoring

   A fix has been implemented and we are now monitoring the results. Failed workflows will need to be manually re-run, failed integrations will re-run automatically within 24 hours but likely sooner.

3. 2026년 5월 4일 PM 6:34 UTCresolved

   This incident has been resolved.

1. 2026년 4월 27일 PM 2:54 UTCinvestigating

   We are currently investigating an issue causing errors and increased latency across our services. Customers may experience failures or delays when logging in and syncing, including via CLI.

2. 2026년 4월 27일 PM 3:08 UTCinvestigating

   Our teams continue to investigate an issue causing errors and increased latency across our services. Customers may experience failures or delays when logging in and syncing, including via CLI. We are actively working to identify the root cause and will provide further updates as more information becomes available.

3. 2026년 4월 27일 PM 3:22 UTCidentified

   We are seeing signs of recovery for the issue causing errors and increased latency across our services. Some customers may still experience intermittent failures or delays when logging in and syncing, including via CLI. Our teams continue to monitor the situation closely.

4. 2026년 4월 27일 PM 3:41 UTCmonitoring

   Service has largely recovered, and we are continuing to monitor the situation closely. Some customers may still experience intermittent issues with login and syncing, including via CLI.

5. 2026년 4월 27일 PM 5:09 UTCmonitoring

   Traffic levels have returned to normal and service performance has stabilized. We are continuing to monitor to ensure full recovery.

6. 2026년 4월 28일 PM 6:00 UTCresolved

   This incident has been resolved.

7. 2026년 5월 12일 PM 3:38 UTCpostmortem

   # Incident Postmortem - Login and Sync Issues **Date of Incident:** 2026-04-27 **Time of Incident \(UTC\):** 14:15 - 15:41 **Service\(s\) Affected:** All web APIs **Impact Duration:** Approximately 86 minutes ## Summary On April 27, 2026, [1Password.com](http://1password.com/) experienced a period of elevated error and full service unavailability in our USA/Global region. A defect deployed in application scaling logic caused a cascading failure during peak usage. This resulted in a period of service unavailability for customers in the USA/Global region. This was not a security incident, and there was no loss of data. ## Impact on Customers * **Sign-in and account access:** Customers in the USA/Global region experienced errors or were unable to sign in or access their 1Password accounts between approximately 14:15 and 15:41 UTC on April 27, 2026. * **All 1Password clients:** The disruption applied to all client types, including the web app, CLI, browser extensions, and desktop and mobile applications, for customers connecting through the USA/Global region. * **Geographic regions affected:** Only customers on the USA/Global region were affected. Other regions were not impacted. ## What Happened? We deployed a change to how our services signal their readiness to serve requests, which contained a latent defect. * **Timeline of events:** * **2026-04-27 14:15 UTC** - Load increase triggers issues. * **2026-04-27 14:29 UTC** - Incident declared; response team mobilized. * **2026-04-27 15:41 UTC** - Issue identified and fix deployed. * **2026-04-28 18:06 UTC** - Incident formally resolved following monitoring. ## How Was It Resolved? Our on-call engineering team identified the scaling logic as the cause of the cascading failure and disabled it via a configuration change. Once disabled, capacity was restored, and traffic recovered. A subsequent configuration change was made to prevent this logic from being re-enabled in production environments. ## What We Are Doing to Prevent Future Incidents * **Immediate fix:** We disabled the defective health check logic and locked the configuration to prevent it from being re-enabled in production. * **Retrospective:** We are conducting a full retrospective with the incident responders to identify further improvements to our systems and our response processes. ## Next Steps and Communication * No action is required from our customers at this time. We are committed to providing a reliable and stable service, and we are taking the necessary steps to learn from this event and prevent it from happening again. Thank you for your patience and understanding. Sincerely, The 1Password Team

1. 2026년 4월 22일 PM 3:18 UTCinvestigating

   We’re aware of an issue affecting sign-in to 1Password SaaS Manager. Our teams are actively investigating and working to resolve this as quickly as possible.

2. 2026년 4월 22일 PM 3:27 UTCmonitoring

   The issue affecting sign-in to 1Password SaaS Manager has been mitigated. Our teams are continuing to monitor the situation to ensure stability.

3. 2026년 4월 22일 PM 4:06 UTCresolved

   This incident has been resolved.

1. 2026년 4월 14일 PM 5:25 UTCinvestigating

   The 1Password Hosted Service in the US is experiencing high latency and errors. The response team is currently investigating.

2. 2026년 4월 14일 PM 5:46 UTCinvestigating

   The 1Password engineering team is investigating an issue where customers may be unable to sign in to 1Password. This issue may also prevent changes from syncing between 1Password clients. This issue impacts the 1Password.com (US) service.

3. 2026년 4월 14일 PM 6:00 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

4. 2026년 4월 15일 AM 1:54 UTCresolved

   This incident has been resolved. We will publish a postmortem as soon as one is completed.

5. 2026년 5월 6일 PM 3:31 UTCpostmortem

   # 2026-04-14 SEV1 Incident Postmortem - Hosted Service in the US experiencing high latency and errors # Incident Postmortem - Elevated Application Error **Date of Incident:** 2026-04-14 **Time of Incident \(UTC\):** 17:25 - 18:00 **Service\(s\) Affected:** Sign in, Admin console **Impact Duration:** Approximately 35 minutes ## Summary On April 14, 2026, [1Password.com](http://1Password.com) experienced elevated error rates due to an increase in traffic to our USA/Global infrastructure. Requests arrived more quickly than they could be serviced in our USA/global region. Customers experienced errors and high latency. This was not a security incident, and there was no loss of data. ## Impact on Customers * **Sign-in and account access:** Some customers in the USA/Global region experienced errors when attempting to sign in or access their 1Password accounts between 17:25 and 18:00 UTC on April 14, 2026. * **All 1Password clients:** The disruption applied to all client types, including the web app, browser extensions, and desktop and mobile applications, for customers connecting through the USA/Global region. * **Number of affected requests:** Approximately 2.95% of requests over the incident window to [1Password.com](http://1Password.com) \(USA/Global\) during the incident window resulted in errors or timeouts, though for some brief spikes up to 45% of requests failed. * **Geographic regions affected:** Customers on our USA/Global only, other regions were not affected. ## What Happened? An unusually high volume of traffic exceeded the capacity of our controls, and triggered latency and errors in the underlying applications. * **Timeline of events:** * **2026-04-14 17:25** - Start of incident. * **2026-04-14 17:36** - Issue identified. * **2026-04-14 17:51** - Fix implemented. * **2026-04-14 18:01** - Recovery complete. * **Root cause analysis:** An increase in traffic exceeded the capacity of our traffic management layer, causing degraded service for customers in the USA/Global region. ## How Was It Resolved? * Established runbooks for load shedding and system upgrades mitigated the issue. ## What We Are Doing to Prevent Future Incidents * **Resolution:** We made two key changes to prevent recurrence: 1. **Increased capacity of internal systems** 2. **Upgraded traffic controls at the network edge** * **Verification:** Since implementing these changes, we have observed several additional instances of unusually high traffic matching this incident. In each case, the new controls handled the traffic automatically with no impact to customers or our systems. ## Next Steps and Communication * No action is required from our customers at this time. We are committed to providing a reliable and stable service, and we are taking the necessary steps to learn from this event and prevent it from happening again. Thank you for your understanding. Sincerely, The 1Password Team

1. 2026년 4월 13일 PM 5:24 UTCmonitoring

   SSO is experiencing degraded functionality because of an upstream provider. We are monitoring, and users may need to retry when authenticating with their IdP.

2. 2026년 4월 17일 PM 3:07 UTCmonitoring

   We are continuing to monitor for any further issues.

3. 2026년 4월 22일 PM 3:17 UTCresolved

   This incident has been resolved.

1. 2026년 4월 1일 PM 2:13 UTCidentified

   Teams accounts are currently unable to access their Environments. Our engineering team has identified the issue and are working towards deploying a fix.

2. 2026년 4월 1일 PM 5:52 UTCmonitoring

   Our engineering team has deployed a fix and we are monitoring the results.

3. 2026년 4월 2일 PM 2:23 UTCresolved

   This incident has been resolved.

1. 2026년 3월 31일 PM 9:28 UTCinvestigating

   Users with Individual and Family accounts are currently unable to access their Environments. The impact is scoped to individual account holders and family account users. Our engineering team is actively investigating.

2. 2026년 3월 31일 PM 10:01 UTCidentified

   The issue has been identified and our engineering team are working towards deploying a fix.

3. 2026년 4월 1일 AM 12:43 UTCresolved

   A fix has been deployed and this issue is now resolved.

1. 2026년 3월 16일 PM 5:11 UTCinvestigating

   Our team is investigating an issue where features have been turned off for some customers.

2. 2026년 3월 16일 PM 5:26 UTCmonitoring

   A fix has been implemented and we are monitoring the results.

3. 2026년 3월 16일 PM 5:43 UTCresolved

   This incident has been resolved.

1. 2026년 3월 12일 PM 5:53 UTCresolved

   Users were unable to retrieve documents across multiple platforms. This included degraded performance or failures when attempting to access documents via the CLI as well as through other interfaces.