Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

구성 요소

노드 루트 디스크

Node root disk · node-disk

5건 · 2017년부터 2026년

원인 용량 한계2건 클라우드 제공자 장애1건 설정 변경1건 하드웨어 고장1건

기여 요인 기본 설정 방치2건 모니터링 사각지대2건 단일 장애점2건 미검증 가정1건

증상 노드 NotReady3건 이미지 풀 실패2건 노드 디스크 가득 참2건 파드 Pending2건

조직 Grafana Labs1건 Hans H. Kim1건 Onkar Raghunath Shelke1건 Saltside1건

사례, 심각도 순

IL-0071 작은 파일이 4만 개 넘게 든 단일 스테이지 이미지의 containerd 스냅샷이 쌓여 워커 노드의 inode 가 디스크보다 빠르게 소진되고 있었다Onkar Raghunath Shelke · 2026
원인 용량 한계
IL-0019 EKS 모듈 18 업그레이드로 새 노드의 디스크가 20Gb 로 줄어 이미지 풀이 no space left on device 로 실패했다UK Ministry of Justice · 2023
원인 설정 변경
IL-0185 Kubespray 로 만든 클러스터의 첫 번째 control plane 노드 디스크가 I/O 오류로 읽기 전용이 되면서 노드가 죽었다

그래프에서 보기

초기 신호 무시1건

미패치 알려진 버그1건

한계 미인지1건

한계 경보 부재1건

설정 테스트 부재1건

장애 중첩1건

리뷰 누락1건

서비스 중단2건

오류율 상승1건

IP 주소 고갈1건

파드 ContainerCreating 정체1건

파드 축출1건

UK Ministry of Justice1건

Hans H. Kim · 2023

원인 하드웨어 고장

IL-0193 GCP SSD 영구 디스크 장애로 Cassandra 파드가 볼륨을 붙이지 못했고, OrderedReady 정책 때문에 나머지 파드도 다시 뜨지 못한 데다 Metrictank 가 바뀐 Cassandra IP 로 다시 연결하지 못해, Grafana Cloud Graphite 쿼리 일부가 최대 23시간 실패했다.Grafana Labs · 2019

원인 클라우드 제공자 장애

IL-0040 비운영 쿠버네티스 클러스터에 Helm 차트를 한꺼번에 설치하자 작은 gp2 루트 볼륨의 IOPS 가 바닥나, 워커 노드 세 대에서 kubelet 이나 Docker 가 내려가 세 대 모두 NotReady 가 됐다Saltside · 2017

원인 용량 한계