Incident Library

구성 요소

코디네이션 키-값 저장소

Coordination and key-value store · coordination-store

13건 · 2013년부터 2026년

원인 소프트웨어 결함5건클라우드 제공자 장애3건설정 변경2건용량 한계1건배포 결함1건DNS·네트워크 장애1건
기여 요인 모니터링 사각지대5건자동화 증폭4건수동 조치 악화3건재시도 폭주3건단일 장애점3건미검증 가정2건과도한 영향 범위2건장애 중첩2건기본 설정 방치1건늦게 드러난 변경1건초기 신호 무시1건미패치 알려진 버그1건한계 미인지1건여유 용량 부재1건단계적 배포 부재1건의존성에 묶인 헬스 체크1건
증상 서비스 중단9건오류율 상승6건지연 시간 증가3건데이터베이스 과부하2건모니터링 중단2건클러스터·노드 생성 정체1건장애 조치 실패1건간헐적 연결 실패1건간헐적 타임아웃1건노드 CPU 고부하1건노드 커널 패닉1건OOMKilled1건패킷 손실1건파드 Terminating 정체1건복제 지연1건처리량 저하1건쓰기 거부1건
조직 Discord2건Elastic2건Amazon Web Services1건AppOptics1건CDN771건Cloudflare1건DigitalOcean1건PagerDuty1건Parse.ly1건Python Software Foundation1건Roblox1건

사례, 심각도 순

  1. IL-0271 서비스 디스커버리에 잘못된 항목이 들어가 Elixir 서비스들이 한꺼번에 죽으면서 Discord 가 대부분의 사용자에게 한 시간 동안 열리지 않았다Discord · 2020 · sev1

    원인 소프트웨어 결함

  2. IL-0362 PagerDuty 의 알림 발송이 18분 동안 멈추고 API 가 500 을 냈다PagerDuty · 2013 · sev1

    원인 클라우드 제공자 장애

  3. IL-0499 세션 서버가 대량으로 내려간 뒤 음성 통화 라우팅 서비스가 과부하로 멈춰 음성·영상 통화가 세 시간 넘게 연결되지 않았다Discord · 2026

    원인 설정 변경

  4. IL-0288 CDN77 의 ClickHouse 데이터 파이프라인에서 이중화된 인스턴스 세 곳의 ZooKeeperWait 가 수천 초로 치솟아 복제가 한 시간 넘게 느려졌다CDN77 · 2026

    원인 용량 한계

  5. IL-0374 DigitalOcean 내부 서비스 디스커버리가 전 리전에서 멈춰 생성, 이벤트 처리, 제어판과 API 관리가 실패했다DigitalOcean · 2024

    원인 설정 변경

  6. IL-0514 클라우드 사업자의 노드 교체 뒤 Consul 이 리더를 뽑지 못하고 Vault 가 봉인된 채 남아 PyPI 백엔드가 7분 동안 응답하지 않았다Python Software Foundation · 2022

    원인 클라우드 제공자 장애

  7. IL-0213 Consul 클러스터의 KV 쓰기가 느려지고 리더가 뒤처지며 Roblox 전체가 73시간 동안 멈췄다Roblox · 2021

    원인 소프트웨어 결함

  8. IL-0240 인증 데이터베이스가 과부하에 걸려 Cloudflare API 와 대시보드가 6시간 33분 동안 실패하고 느려졌다Cloudflare · 2020

    원인 DNS·네트워크 장애

  9. IL-0277 Elastic Cloud us-east-1 의 ZooKeeper 조정 계층이 쿼럼을 잃어 Elasticsearch 배포에 6시간 넘게 접속하지 못하고 Kibana 는 18:44 UTC 까지 불안정했다Elastic · 2019

    원인 소프트웨어 결함

  10. IL-0587 Elastic Cloud AWS eu-west-1 리전의 클러스터 접속이 약 3시간 심하게 저하되고 20분 동안 완전히 끊겼다Elastic · 2019

    원인 소프트웨어 결함

  11. IL-0588 AppOptics 와 Librato 의 메트릭 API 가 대부분의 데이터에 5xx 를 내고 Kafka 파티션이 리더 없이 오프라인으로 남았다AppOptics · 2018

    원인 클라우드 제공자 장애

  12. IL-0276 Chef 가 ZooKeeper 세 노드 가운데 두 대를 동시에 재시작해 쿼럼이 깨지면서 Parse.ly 의 실시간 데이터 전달이 약 3시간 멈췄다Parse.ly · 2016

    원인 배포 결함

  13. IL-0536 US East 의 Amazon SimpleDB 가 두 시간 동안 거의 모든 API 호출에 실패했다Amazon Web Services · 2014

    원인 소프트웨어 결함

그래프에서 보기