Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

구성 요소

kubelet

kubelet · kubelet

20건 · 2017년부터 2026년

원인 용량 한계6건 소프트웨어 결함6건 설정 변경3건 인증서·자격 증명 만료2건 DNS·네트워크 장애1건 unknown1건 업그레이드로 깨진 호환성1건

기여 요인 기본 설정 방치8건 모니터링 사각지대8건 단일 장애점6건 과도한 영향 범위4건

증상 노드 NotReady8건 서비스 중단7건 컨트롤 플레인 무응답5건 오류율 상승5건

조직 DigitalOcean2건 AirMap1건 Backpackr1건 ckck8031건 dbhang1건

사례, 심각도 순

IL-0071 작은 파일이 4만 개 넘게 든 단일 스테이지 이미지의 containerd 스냅샷이 쌓여 워커 노드의 inode 가 디스크보다 빠르게 소진되고 있었다Onkar Raghunath Shelke · 2026
원인 용량 한계
IL-0183 kubeadm 으로 만든 클러스터의 1년짜리 인증서가 만료되어 kube-apiserver 가 etcd 와 TLS 연결을 맺지 못하고 재시작을 반복했고, 클러스터에 접속할 수 없게 됐다.ckck803 · 2026
원인 인증서·자격 증명 만료
IL-0027 CoreDNS 파드가 모두 한 노드에 몰린 채 그 노드의 메모리가 고갈되자 DNS 가 응답하지 못해 아이디어스 서비스 전체가 멈췄다

그래프에서 보기

자동화 증폭3건

한계 미인지3건

헬스 프로브 부재3건

초기 신호 무시2건

미패치 알려진 버그2건

수동 조치 악화2건

한계 경보 부재2건

리소스 요청과 한도 미설정2건

단계적 배포 부재2건

장애 중첩2건

늦게 드러난 변경1건

디버그 접근 제한1건

캐시 부재1건

용량 계획 부재1건

재시도 폭주1건

롤백 무효1건

간헐적 연결 실패4건

간헐적 타임아웃4건

모니터링 중단4건

컨테이너 재시작 반복3건

DNS 조회 실패3건

지연 시간 증가3건

파드 Pending3건

프로브 실패3건

이미지 풀 실패2건

업그레이드 정체2건

컨트롤 플레인 지연1건

CPU 스로틀링1건

자격 증명 획득 실패1건

배포 실패1건

노드 디스크 가득 참1건

노드 재생성 반복1건

파드 Terminating 정체1건

파드 축출1건

오래된 엔드포인트 라우팅1건

Google Cloud1건

Microsoft Azure1건

Onkar Raghunath Shelke1건

Backpackr · 2025

원인 용량 한계

IL-0154 SFO3 코어 라우터의 라인 카드가 하드웨어 오류로 한꺼번에 재부팅된 뒤 게스트 네트워킹이 돌아오지 않은 DOKS 노드가 비정상으로 남아, 일부 클러스터의 연결과 컨트롤 플레인 접속이 01:40 UTC까지 불안정했다.DigitalOcean · 2024

원인 DNS·네트워크 장애

IL-0169 FR-PAR 의 Scaleway Kubernetes API 가 메모리 부족으로 쓰러져 노드 인증이 막히고 Kapsule 노드가 NotReady 가 됐다.Scaleway · 2024

원인 용량 한계

IL-0153 DOKS 1.27.6-do.0 과 1.28.2-do.0 워커 노드에서 매일 아침 도는 apt 자동 업그레이드가 15분 타임아웃에 걸려 강제 종료되면서 노드 네트워킹이 망가지고, 노드가 사흘 연속 NotReady 가 됐다.DigitalOcean · 2023

원인 설정 변경

IL-0112 나중에 회수된 EKS 노드 AMI 로 노드를 교체한 뒤 노드가 PLEG is not healthy 를 보고하며 NotReady 를 오갔고 파드 네트워크 타임아웃이 났다DFDS · 2022

원인 소프트웨어 결함

IL-0139 Calico 네트워크 정책을 쓰는 GKE 클러스터를 1.22 이상으로 업그레이드하자 경쟁 조건 때문에 CNI 정리가 Unauthorized 로 실패해 파드가 Terminating 이나 Pending 에 멈췄다.Google Cloud · 2022

원인 소프트웨어 결함

IL-0144 Ubuntu 18.04 의 systemd 보안 업데이트가 DNS 설정을 날려 AKS 노드의 kubelet 이 레지스트리 이름을 해석하지 못하고 파드가 ImagePullBackoff 에 빠졌다.Microsoft Azure · 2022

원인 업그레이드로 깨진 호환성

IL-0184 kubeadm 클러스터의 API 서버와 내부 인증서가 만료돼 JupyterHub KubeSpawner 가 컨테이너를 만들지 못하고 kubectl 연결이 거부됐다dbhang · 2021

원인 인증서·자격 증명 만료

IL-0176 시계열 급증으로 호스트 메모리가 바닥나자 oom_score_adj 999 를 받은 Prometheus 컨테이너가 커널 OOM Killer 에게 먼저 죽어 CrashLoopBackOff 에 빠졌다.LINE · 2020

원인 용량 한계

IL-0012 CPU limit 과 커널 CFS 쿼터 버그로 파드가 과하게 스로틀링돼 헬스 체크가 실패하고 애플리케이션이 멈췄다Omio · 2020

원인 소프트웨어 결함

IL-0008 응답하지 않는 OPA 검증 웹훅 때문에 GKE 마스터 업그레이드가 멈추고 API 서버가 간헐적으로 끊기면서 노드가 끝없이 재생성됐다Jetstack · 2019

원인 설정 변경

IL-0002 빌더 파드가 노드 한 대에 몰리자 kubelet 이 기본 API QPS 한도에 막혀 파드 상태를 늦게 갱신했고, CI 빌드가 AWS IAM 자격 증명을 받지 못해 실패했다Zalando · 2019

원인 용량 한계

IL-0035 ElastAlert 에 새로 넣은 알림 규칙 때문에 ElastAlert 파드가 메모리를 끝없이 써서 노드가 잇달아 NotReady 가 되었고, 같은 클러스터의 도구와 Grafana, Prometheus 가 함께 흔들렸다.NU.nl · 2019

원인 설정 변경

IL-0059 kubeadm이 만든 etcd 정적 파드의 liveness probe가 실패해 kubelet이 약 2분마다 etcd를 재시작했고, 단일 마스터 클러스터의 API 서버가 계속 끊겼다NRE Labs · 2018

원인 unknown

IL-0074 워커 노드가 잇달아 Not Ready 에 빠지고 네트워크와 DNS 실패로 사이드카가 죽으면서, AirMap 플랫폼의 모든 서비스가 다섯 시간 동안 응답하지 않았다.AirMap · 2018

원인 소프트웨어 결함

IL-0038 kubelet 설정 변경을 롤링 업데이트하다 쿠버네티스 버그로 kubelet 이 올라오지 못해 한 클러스터의 노드가 NotReady 가 되고 파드 절반쯤이 축출됐다Oath · 2018

원인 소프트웨어 결함

IL-0003 etcd 클러스터 재구성 뒤 쿠버네티스 버그로 linkerd 가 서비스 위치 갱신을 받지 못했고, linkerd 를 모두 재시작하자 엔드포인트가 없는 서비스를 파싱하지 못하는 오류가 드러나 플랫폼 전체가 멈췄다Monzo · 2017

원인 소프트웨어 결함

IL-0040 비운영 쿠버네티스 클러스터에 Helm 차트를 한꺼번에 설치하자 작은 gp2 루트 볼륨의 IOPS 가 바닥나, 워커 노드 세 대에서 kubelet 이나 Docker 가 내려가 세 대 모두 NotReady 가 됐다Saltside · 2017

원인 용량 한계