Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

증상

노드 CPU 고부하

Sustained high node CPU · node-high-cpu

5건 · 2019년부터 2025년

원인 용량 한계3건 설정 변경1건 unknown1건

구성 요소 애플리케이션 데이터베이스2건 노드 풀2건 파드 스케줄링과 배치2건 인메모리 캐시1건 Calico

기여 요인 미검증 가정3건 과도한 영향 범위2건 단일 장애점2건 자동화 증폭1건

조직 2i2c1건 Fyra Labs1건 JW Player1건 Moonlight1건 PostHog1건

사례

IL-0100 노드가 파드의 CPU 요청에 비해 작아 CPU 가 포화되면서 PostHog 기능 플래그 서비스에 열흘 사이 장애가 세 번 났다.PostHog · 2025
원인 용량 한계
IL-0087 RKE2 클러스터 노드를 재부팅한 뒤 Multus 가 쿠버네티스 API 에 닿지 못해 파드가 IP 를 받지 못했고, 같은 장애가 모든 노드로 번져 전체 서비스가 멈췄다.Fyra Labs · 2023
원인 unknown
IL-0094 JupyterHub 클러스터에서 학생 파드가 노드의 CPU 와 메모리를 다 써서 자원 보장이 부족했던 코어 파드가 자원을 얻지 못했고, 허브 전체가 멈췄다. · 2020

그래프에서 보기

1건

클라우드 로드 밸런서1건

클러스터 대시보드1건

컨테이너 런타임1건

리눅스 커널1건

컨테이너 메모리 한도1건

Multus 메타 CNI1건

기본 설정 방치1건

초기 신호 무시1건

수동 조치 악화1건

모니터링 사각지대1건

한계 경보 부재1건

리소스 요청과 한도 미설정1건

단계적 배포 부재1건

재시도 폭주1건

롤백 무효1건

스테이징 불일치1건

원인 용량 한계

IL-0052 인증 없이 인터넷에 열린 Weave Scope 대시보드를 통해 암호화폐 채굴기가 개발 클러스터와 스테이징 클러스터의 모든 노드에서 돌았다.JW Player · 2019

원인 설정 변경

IL-0064 CPU 를 많이 쓰는 파드가 Google Cloud 노드 하나에 몰려 노드가 커널 패닉으로 죽었고, 다시 배치된 파드가 다음 노드를 또 죽이며 웹사이트와 API 가 멈췄다.Moonlight · 2019

원인 용량 한계