Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

증상

컨트롤 플레인 무응답

Control plane unresponsive · control-plane-unresponsive

22건 · 2018년부터 2026년

원인 용량 한계7건 설정 변경4건 인증서·자격 증명 만료3건 의존성 장애2건 소프트웨어 결함2건 클라우드 제공자 장애1건 배포 결함1건 DNS·네트워크 장애1건 unknown1건

구성 요소 쿠버네티스 API 서버18건 etcd9건 kubelet5건 텔레메트리 에이전트4건 애플리케이션 데이터베이스

기여 요인 기본 설정 방치6건 모니터링 사각지대6건 단일 장애점6건 과도한 영향 범위5건

조직 Linode3건 DigitalOcean2건 OpenAI2건 Palark2건 Barush Mendez1건

사례

IL-0133 폭풍으로 데이터센터 냉각이 멈춰 us-central1 리전 전체가 내려갔고, 디스크 핫플러그 버그로 Managed Kubernetes 컨트롤 플레인 약 140개의 복구가 길어졌다.Nebius · 2026
원인 의존성 장애
IL-0160 고쳐서 다시 돌린 레거시 GPU 모니터링 스크립트의 펌웨어 조회가 GSP 레이스 컨디션을 일으켜 Linode 의 RTX 4000 Ada GPU 가 잠기고 LKE 워커 노드의 GPU 작업이 멈췄다Linode · 2026
원인 배포 결함
IL-0183 kubeadm 으로 만든 클러스터의 1년짜리 인증서가 만료되어 kube-apiserver 가 etcd 와 TLS 연결을 맺지 못하고 재시작을 반복했고, 클러스터에 접속할 수 없게 됐다.

그래프에서 보기

2건

GKE 컨트롤 플레인2건

GPU 드라이버2건

어드미션 웹훅1건

AKS 컨트롤 플레인1건

클라우드 블록 스토리지1건

데이터센터 전력·냉각1건

클라이언트 쪽 DNS 리졸버와 캐시1건

DNS 서버와 레코드1건

InfiniBand 패브릭1건

인그레스 컨트롤러1건

리눅스 커널1건

컨테이너 메모리 한도1건

클러스터 인증 제공자1건

정책 엔진1건

RBAC 와 서비스 어카운트1건

디버그 접근 제한5건

초기 신호 무시3건

한계 미인지3건

수동 조치 악화3건

한계 경보 부재3건

미검증 가정2건

자동화 증폭2건

늦게 드러난 변경1건

캐시로 가려진 장애1건

용량 계획 부재1건

헬스 프로브 부재1건

런북 부재1건

파괴적 변경 보호 장치 부재1건

단계적 배포 부재1건

장애 중첩1건

재시도 폭주1건

리뷰 누락1건

스테이징 불일치1건

Civis Analytics1건

Marcin Cuber1건

Microsoft Azure1건

Webhook Relay1건

ckck803 · 2026

원인 인증서·자격 증명 만료

IL-0162 데이터베이스 업데이트 뒤 LKE 내부 DNS 서비스가 멈춰 사용자가 LKE 클러스터 컨트롤 플레인과 LKE 대시보드에 접속하지 못했다Linode · 2025

원인 의존성 장애

IL-0138 nvidia-dkms-390 드라이버 빌드 실패로 망가진 커널 헤더가 몇 주 동안 방치됐다가, 정전 뒤 재부팅하자 하나뿐인 마스터 노드가 커널 패닉에 빠져 홈랩 쿠버네티스 클러스터가 6일 동안 멈췄다.Barush Mendez · 2025

원인 소프트웨어 결함

IL-0204 Render 프랑크푸르트 클러스터에서 etcd 메모리 급증으로 컨트롤 플레인이 과부하에 걸렸고, 컨트롤 플레인 노드를 재부팅하자 그 위의 CoreDNS 가 다시 뜨지 못해 DNS 가 멈췄다.Render · 2024

원인 용량 한계

IL-0005 새 텔레메트리 서비스가 모든 노드에서 무거운 쿠버네티스 API 요청을 보내 대형 클러스터의 컨트롤 플레인이 무너졌고, DNS 기반 서비스 디스커버리가 깨져 OpenAI 의 모든 서비스가 멈췄다OpenAI · 2024

원인 설정 변경

IL-0118 쿠버네티스 네임스페이스 라벨을 전역으로 바꾸자 네트워크 계층이 메타데이터를 다시 계산하면서 가장 큰 GPU 클러스터들 가운데 세 곳의 컨트롤 플레인이 과부하에 빠졌고, ChatGPT 와 API 가 타임아웃과 503 오류를 냈다.OpenAI · 2024

원인 설정 변경

IL-0154 SFO3 코어 라우터의 라인 카드가 하드웨어 오류로 한꺼번에 재부팅된 뒤 게스트 네트워킹이 돌아오지 않은 DOKS 노드가 비정상으로 남아, 일부 클러스터의 연결과 컨트롤 플레인 접속이 01:40 UTC까지 불안정했다.DigitalOcean · 2024

원인 DNS·네트워크 장애

IL-0077 Kyverno 1.12 가 만든 ephemeralreports 객체가 쌓여 EKS 의 etcd 데이터베이스가 한도를 넘었고 운영 클러스터가 읽기 전용이 되어 모든 쓰기가 거부됐다Marcin Cuber · 2024 · sev1

원인 소프트웨어 결함

IL-0152 정비 작업 중 FRA1 내부 인프라 클러스터에 잘못된 설정이 들어가 그 위에서 돌던 DOKS 클러스터 200개의 컨트롤 플레인이 자동으로 삭제됐다.DigitalOcean · 2024

원인 설정 변경

IL-0145 Australia East 의 전압 강하로 냉각기가 멈춰 데이터 홀 장비가 꺼지면서, 영역 중복이 아닌 AKS 작업 큐 데이터베이스가 내려가 두 리전의 AKS 생성, 수정, 삭제 작업이 막혔다Microsoft Azure · 2023

원인 클라우드 제공자 장애

IL-0195 200개가 넘는 노드의 고객 클러스터에서 Cilium 파드가 LIST 요청을 한꺼번에 쏟아내 kube-apiserver 가 메모리를 다 쓰고 죽기를 되풀이했다.Palark · 2023

원인 용량 한계

IL-0165 프랑크푸르트 LKE 의 백엔드 서비스가 메모리 부족으로 실패해 일부 사용자가 kubectl 로 kube-apiserver 에 접속하지 못했다Linode · 2023

원인 용량 한계

IL-0194 kube-apiserver 재시작 뒤 Vector DaemonSet 의 파드 list 요청이 한꺼번에 몰려 etcd 메모리가 세 배 가까이 늘고 마스터 노드가 연쇄적으로 재시작했다.Palark · 2023

원인 용량 한계

IL-0113 한 번도 교체되지 않은 GKE API 서버 인증서 때문에 메인 클러스터의 컨트롤 플레인이 망가져 EU 리전의 백엔드 API, 프런트엔드, 터널이 모두 멈췄다Webhook Relay · 2022

원인 인증서·자격 증명 만료

IL-0184 kubeadm 클러스터의 API 서버와 내부 인증서가 만료돼 JupyterHub KubeSpawner 가 컨테이너를 만들지 못하고 kubectl 연결이 거부됐다dbhang · 2021

원인 인증서·자격 증명 만료

IL-0008 응답하지 않는 OPA 검증 웹훅 때문에 GKE 마스터 업그레이드가 멈추고 API 서버가 간헐적으로 끊기면서 노드가 끝없이 재생성됐다Jetstack · 2019

원인 설정 변경

IL-0076 dex의 AuthRequest 리소스가 끝없이 쌓였고, 이를 치우려고 네임스페이스를 지우자 목록 조회 타임아웃과 재시도가 반복되며 쿠버네티스 마스터가 내려갔다Fullstaq · 2019

원인 용량 한계

IL-0075 클러스터가 EC2 인스턴스 약 290대로 커지자 노드마다 도는 Datadog 에이전트가 쿠버네티스 API 를 폴링하면서 API 서버가 CPU 와 메모리를 다 써 쿠버네티스 컨트롤 플레인을 쓸 수 없게 됐다.Civis Analytics · 2019

원인 용량 한계

IL-0031 API 서버가 OOMKill로 죽자 Skipper 인그레스가 라우트를 잃었고, 고객 트래픽이 끊기며 IAM 서비스에서 404 오류가 났다Zalando · 2018

원인 용량 한계

IL-0059 kubeadm이 만든 etcd 정적 파드의 liveness probe가 실패해 kubelet이 약 2분마다 etcd를 재시작했고, 단일 마스터 클러스터의 API 서버가 계속 끊겼다NRE Labs · 2018

원인 unknown