Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

구성 요소

노드 런치 템플릿

Node launch template · launch-template

4건 · 2022년부터 2023년

원인 설정 변경2건 운영 실수1건 소프트웨어 결함1건

기여 요인 자동화 증폭2건 설정 테스트 부재2건 설정 내 자격 증명1건 기본 설정 방치1건

증상 이미지 풀 실패2건 간헐적 연결 실패1건 간헐적 타임아웃1건 모니터링 중단1건

조직 DFDS2건 UK Ministry of Justice2건

사례, 심각도 순

IL-0109 로그 수집을 고치려던 EKS 노드 롤오버가 꼬이면서 Auto Scaling 그룹이 정상 워커 노드를 모두 종료해 클러스터에 노드가 하나도 남지 않았다.DFDS · 2023 · sev1
원인 설정 변경
IL-0019 EKS 모듈 18 업그레이드로 새 노드의 디스크가 20Gb 로 줄어 이미지 풀이 no space left on device 로 실패했다UK Ministry of Justice · 2023
원인 설정 변경
IL-0018 DockerHub 비밀번호를 바꾼 뒤 Concourse 와 EKS 클러스터 노드가 Docker Hub 에서 이미지를 받지 못했다 · 2023

그래프에서 보기

수동 조치 악화1건

모니터링 사각지대1건

한계 경보 부재1건

헬스 프로브 부재1건

런북 부재1건

단계적 배포 부재1건

장애 중첩1건

리뷰 누락1건

공용 자격 증명1건

스테이징 불일치1건

IP 주소 고갈1건

노드 디스크 가득 참1건

노드 NotReady1건

파드 ContainerCreating 정체1건

파드 축출1건

리소스 삭제1건

서비스 중단1건

업그레이드 정체1건

UK Ministry of Justice

원인 운영 실수

IL-0112 나중에 회수된 EKS 노드 AMI 로 노드를 교체한 뒤 노드가 PLEG is not healthy 를 보고하며 NotReady 를 오갔고 파드 네트워크 타임아웃이 났다DFDS · 2022

원인 소프트웨어 결함