Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

증상

파드 축출

Pod eviction · pods-evicted

7건 · 2018년부터 2025년

원인 설정 변경3건 용량 한계2건 배포 결함1건 소프트웨어 결함1건

구성 요소 노드 풀5건 AWS VPC CNI2건 클러스터 오토스케일러1건 CoreDNS1건 디스케줄러

기여 요인 여유 용량 부재3건 과도한 영향 범위2건 한계 경보 부재2건 리뷰 누락2건

조직 2i2c2건 UK Ministry of Justice2건 CoW Protocol1건 Grafana Labs1건 Oath

사례

IL-0099 메모리 상한 없이 8GB 만 보장한 프로필 때문에 워크숍 중 사용자 파드가 서로를 축출해 서버 시작이 15분을 넘고 커널이 죽었다.2i2c · 2025
원인 용량 한계
IL-0020 EKS 1.30 업그레이드 중 디스케줄러가 cordon 된 노드의 파드를 한꺼번에 쫓아내 운영 서비스가 멈췄다UK Ministry of Justice · 2025
원인 배포 결함
IL-0114 클러스터 용량을 늘리던 중 버전이 고정되지 않은 VPC CNI 플러그인이 자동으로 업데이트돼 새 파드가 IP 를 받지 못하고 Pending 에 머물렀고, 메인넷 운영 환경의 정산이 약 3.5시간 멈췄다. · 2024

그래프에서 보기

1건

쿠버네티스 컨트롤러 매니저1건

노드 런치 템플릿1건

컨테이너 메모리 한도1건

노드 루트 디스크1건

파드 우선순위와 선점1건

자동화 증폭1건

기본 설정 방치1건

모니터링 사각지대1건

설정 테스트 부재1건

헬스 프로브 부재1건

리소스 요청과 한도 미설정1건

장애 중첩1건

부분 배포1건

재시도 폭주1건

버전 미고정1건

1건

원인 설정 변경

IL-0019 EKS 모듈 18 업그레이드로 새 노드의 디스크가 20Gb 로 줄어 이미지 풀이 no space left on device 로 실패했다UK Ministry of Justice · 2023

원인 설정 변경

IL-0070 dask-gateway로 워커를 대량으로 띄우자 노드가 1분 만에 100대 늘었고, Prometheus가 메모리를 거의 다 쓰던 코어 노드에서 hub 파드를 비롯한 중요한 파드들이 축출되거나 재시작됐다2i2c · 2023

원인 용량 한계

IL-0004 새 Cortex 클러스터에서 기본 우선순위를 받은 파드가 우선순위가 없는 운영 Ingester 를 연쇄적으로 선점해 Hosted Prometheus 쓰기가 실패했다Grafana Labs · 2019

원인 설정 변경

IL-0038 kubelet 설정 변경을 롤링 업데이트하다 쿠버네티스 버그로 kubelet 이 올라오지 못해 한 클러스터의 노드가 NotReady 가 되고 파드 절반쯤이 축출됐다Oath · 2018

원인 소프트웨어 결함