Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

기여 요인

용량 계획 부재

No capacity planning · no-capacity-planning

7건 · 2019년부터 2025년

원인 용량 한계6건 클라우드 제공자 장애1건

구성 요소 쿠버네티스 API 서버2건 VPC 서브넷 또는 파드 주소 범위2건 AWS VPC CNI2건 인메모리 캐시1건 클러스터 오토스케일러1건 conntrack 테이블1건 etcd1건 HAProxy1건 Karpenter1건 kube-proxy1건 kubelet1건 리눅스 커널1건 노드 풀1건 영구 볼륨과 스테이트풀셋1건 Prometheus1건 텔레메트리 에이전트1건

증상 컨트롤 플레인 지연2건 컨테이너 재시작 반복2건 오류율 상승2건 지연 시간 증가2건

조직 Adevinta1건 BC Government1건 Civis Analytics1건 LINE+1건 loveholidays

사례

IL-0067 Redis 마스터의 50Mi 영구 볼륨이 가득 차 AOF 가 깨졌고, Redis 파드가 크래시 루프에 빠져 Klamm 운영 서비스가 멈췄다BC Government · 2025 · sev1
원인 용량 한계
IL-0006 AWS VPC CNI 가 자원이 찬 노드에 IP 를 붙잡아 두어 us-east-1 서브넷 IP 가 바닥났고, WARM_IP_TARGET 을 바꾼 조치가 파드 시작 실패를 더 오래 끌었다Neon · 2025
원인 용량 한계
IL-0007 EKS 클러스터에서 VPC-CNI 가 파드마다 VPC IP 를 쓰다가 서브넷 IP 가 바닥나 파드가 IP 를 받지 못했다 · 2024

그래프에서 보기

간헐적 연결 실패2건

IP 주소 고갈2건

파드 Pending2건

서비스 중단2건

연결 리셋1건

컨트롤 플레인 무응답1건

DNS 조회 실패1건

모니터링 중단1건

프로브 실패1건

영구 볼륨 가득 참1건

1건

원인 용량 한계

IL-0084 베어메탈 업체 vSwitch 의 패킷 드롭으로 Namespace 의 fra3 리전이 빠져 전 세계 용량이 모자랐고, 다음 날에는 컨트롤 플레인 노드의 느린 NVMe 쓰기로 쿠버네티스 API 서버 CPU 가 치솟아 zrh1 이 멈췄다.Namespace · 2024

원인 클라우드 제공자 장애

IL-0176 시계열 급증으로 호스트 메모리가 바닥나자 oom_score_adj 999 를 받은 Prometheus 컨테이너가 커널 OOM Killer 에게 먼저 죽어 CrashLoopBackOff 에 빠졌다.LINE · 2020

원인 용량 한계

IL-0013 노드 RAM 을 절반으로 줄이자 conntrack 테이블이 가득 차 집계 서비스에 연결 리셋과 오류가 늘었다loveholidays · 2020

원인 용량 한계

IL-0075 클러스터가 EC2 인스턴스 약 290대로 커지자 노드마다 도는 Datadog 에이전트가 쿠버네티스 API 를 폴링하면서 API 서버가 CPU 와 메모리를 다 써 쿠버네티스 컨트롤 플레인을 쓸 수 없게 됐다.Civis Analytics · 2019

원인 용량 한계