Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

기여 요인

설정 테스트 부재

No configuration tests · no-config-tests

7건 · 2020년부터 2023년

원인 설정 변경6건 소프트웨어 결함1건

구성 요소 노드 풀3건 AWS VPC CNI3건 클라우드 로드 밸런서2건 노드 런치 템플릿2건 Terraform2건 어드미션 웹훅1건 Argo CD1건 설정 템플릿1건 컨테이너 런타임1건 CoreDNS1건 인그레스 컨트롤러1건 쿠버네티스 API 서버1건 노드 루트 디스크1건 텔레메트리 에이전트1건

증상 서비스 중단4건 오류율 상승2건 IP 주소 고갈2건 파드 ContainerCreating 정체2건

조직 DFDS4건 UK Ministry of Justice2건 Skyscanner1건

사례

IL-0019 EKS 모듈 18 업그레이드로 새 노드의 디스크가 20Gb 로 줄어 이미지 풀이 no space left on device 로 실패했다UK Ministry of Justice · 2023
원인 설정 변경
IL-0017 live 클러스터 노드 6대에서 VPC CNI 가 IP 주소를 할당하지 못해 새 파드가 ContainerCreating 에 멈췄다UK Ministry of Justice · 2023
원인 설정 변경
IL-0109 로그 수집을 고치려던 EKS 노드 롤오버가 꼬이면서 Auto Scaling 그룹이 정상 워커 노드를 모두 종료해 클러스터에 노드가 하나도 남지 않았다.

그래프에서 보기

리소스 삭제2건

컨트롤 플레인 지연1건

배포 실패1건

이미지 풀 실패1건

모니터링 중단1건

노드 디스크 가득 참1건

파드 축출1건

프로브 실패1건

DFDS · 2023 · sev1

원인 설정 변경

IL-0106 잘못된 IngressRoute 매니페스트가 Traefik v2 버그를 건드려 Traefik 파드가 모두 재시작된 뒤 Kubernetes 의 모든 서비스가 404 를 냈다DFDS · 2021

원인 소프트웨어 결함

IL-0010 템플릿 중괄호가 빠진 설정 변경으로 ArgoCD 가 전 세계 모든 클러스터의 서비스를 지웠다Skyscanner · 2021

원인 설정 변경

IL-0105 VPC CNI 교체로 ALB 에서 타깃 그룹이 떨어져 나가 쿠버네티스 클러스터의 모든 서비스가 503 을 냈다DFDS · 2021

원인 설정 변경

IL-0108 워크숍 중 운영 클러스터에 적용한 Alcide admission 컨트롤러 때문에 Deployment 생성과 수정이 타임아웃되었다DFDS · 2020

원인 설정 변경