Incident Library

기여 요인

데워진 캐시에 기댄 구조

Dependence on a warm cache · warm-cache-dependency

10건 · 2012년부터 2026년

원인 용량 한계3건배포 결함3건소프트웨어 결함3건의존성 장애1건
구성 요소 데이터베이스8건인메모리 캐시6건CI 시스템1건컨피그맵과 시크릿1건데이터베이스 복제1건Elasticsearch 와 OpenSearch1건데이터베이스 장애 조치 관리자1건Helm1건언어 런타임 설정1건재귀 DNS 리졸버 서비스1건서비스 디스커버리1건
증상 데이터베이스 과부하8건지연 시간 증가7건서비스 중단6건오류율 상승4건DNS 조회 실패1건장애 조치 실패1건간헐적 타임아웃1건잠금 경합과 교착1건로그 폭증1건메모리 압박1건모니터링 중단1건OOMKilled1건복제 지연1건요청 오라우팅1건스플릿 브레인1건처리량 저하1건부하 불균형1건
조직 Wikimedia Foundation2건AdGuard DNS1건Devsisters1건Discord1건GitHub1건Honeycomb1건Mezmo1건OpenRouter1건Slack1건

사례

  1. IL-0408 API 키 조회 캐시가 비워진 채 돌아와 OpenRouter API 가 두 번에 걸쳐 500 과 401 "User not found" 오류를 냈다OpenRouter · 2026

    원인 의존성 장애

  2. IL-0268 유럽 여러 거점의 AdGuard DNS 리졸버가 과부하에 걸려 DNS 조회가 타임아웃되거나 SERVFAIL 을 냈다AdGuard DNS · 2025

    원인 배포 결함

  3. IL-0324 External Storage 데이터베이스 클러스터에 과부하가 걸려 mw-api-int, mw-parsoid, mw-jobrunner 의 지연과 데이터베이스 오류가 늘었다Wikimedia Foundation · 2025

    원인 배포 결함

  4. IL-0270 인증용 ScyllaDB 클러스터가 과부하로 조회를 처리하지 못해 Discord 에서 약 50분 동안 접속과 로그인이 되지 않았다Discord · 2023

    원인 용량 한계

  5. IL-0216 데이터센터 전환 직후 CirrusSearch Elasticsearch 지연이 치솟아 위키 검색이 일부 사용자에게 늦거나 안 됐다Wikimedia Foundation · 2023

    원인 소프트웨어 결함

  6. IL-0567 쿠키런: 오븐브레이크의 패키지 매출 랭킹 기능을 배포한 뒤 Aurora MySQL CPU가 100%에 이르러 유저가 게임에 접속하지 못했다Devsisters · 2023

    원인 배포 결함

  7. IL-0217 스키마 캐시가 데워지지 않아 주 MySQL 데이터베이스가 내부 교착에 빠지고 Honeycomb 전체가 68분 동안 멈췄다Honeycomb · 2023

    원인 소프트웨어 결함

  8. IL-0212 캐시 적중률이 떨어지며 채널 멤버십 Vitess 키스페이스가 과부하에 빠져 많은 사용자가 Slack 에 접속하지 못했다Slack · 2022

    원인 용량 한계

  9. IL-0297 Mezmo 의 인증 캐시 Redis 서버가 OOM 으로 죽고 다시 뜨지 못해 로그인이 막히고 로그 색인이 늦어졌다Mezmo · 2019

    원인 용량 한계

  10. IL-0303 GitHub 의 새 3노드 MySQL 클러스터에서 자동 페일오버가 잘못 일어나고 클러스터 상태가 갈라져 GitHub.com 이 두 번 멈췄다GitHub · 2012

    원인 소프트웨어 결함

그래프에서 보기