Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

증상

리소스 삭제

Resources deleted · resources-deleted

13건 · 2019년부터 2026년

원인 설정 변경7건 운영 실수3건 소프트웨어 결함2건 배포 결함1건

구성 요소 Argo CD3건 설정 템플릿3건 인그레스 컨트롤러3건 Terraform3건 클라우드 로드 밸런서

기여 요인 파괴적 변경 보호 장치 부재8건 자동화 증폭5건 과도한 영향 범위5건 런북 부재4건

조직 2i2c1건 Aqua Security1건 Argo CD users1건 CircleCI1건 DFDS1건

사례

IL-0058 Argo CD 에서 여러 앱이 함께 선언한 네임스페이스가 force 동기화로 지워져 앱 약 97개가 Missing/OutOfSync 상태에서 빠져나오지 못했다.Argo CD users · 2026
원인 소프트웨어 결함
IL-0095 엔지니어가 kubectl 이 다른 클러스터를 가리키는 줄 모르고 prod 네임스페이스를 지워 LEAP JupyterHub 가 약 1시간 동안 멈췄다.2i2c · 2025
원인 운영 실수
IL-0192 Crossplane 컴포지션의 병합 정책 변경이 Service 타입을 ClusterIP 로 바꿔 클라우드 로드 밸런서가 지워지고 Grafana Cloud 서비스의 약 25%가 끊겼다.

그래프에서 보기

2건

쿠버네티스 API 서버2건

영구 볼륨과 스테이트풀셋2건

CI 시스템1건

컨테이너 런타임1건

파드용 자격 증명 중개자1건

애플리케이션 데이터베이스1건

external-dns1건

GKE 컨트롤 플레인1건

잡과 크론잡1건

노드 런치 템플릿1건

모델 요청 라우팅1건

RBAC 와 서비스 어카운트1건

컨테이너 레지스트리와 자격 증명1건

텔레메트리 에이전트1건

미검증 가정3건

모니터링 사각지대3건

리뷰 누락3건

수동 조치 악화2건

설정 테스트 부재2건

단계적 배포 부재2건

미검증 백업1건

기본 설정 방치1건

스테이징 불일치1건

DigitalOcean1건

Google Cloud1건

Grafana Labs1건

UK Ministry of Justice1건

Grafana Labs · 2025

원인 설정 변경

IL-0152 정비 작업 중 FRA1 내부 인프라 클러스터에 잘못된 설정이 들어가 그 위에서 돌던 DOKS 클러스터 200개의 컨트롤 플레인이 자동으로 삭제됐다.DigitalOcean · 2024

원인 설정 변경

IL-0068 익명 요청을 허용한 쿠버네티스 API 서버로 공격자가 들어와 RBAC 로 백도어를 만들고, DaemonSet 으로 Monero 채굴기를 모든 노드에 띄웠다.Aqua Security · 2023

원인 설정 변경

IL-0109 로그 수집을 고치려던 EKS 노드 롤오버가 꼬이면서 Auto Scaling 그룹이 정상 워커 노드를 모두 종료해 클러스터에 노드가 하나도 남지 않았다.DFDS · 2023 · sev1

원인 설정 변경

IL-0207 로컬 개발 환경에서 돌린 작업이 운영 컨텍스트로 넘어가 Kubernetes 클러스터의 Consul 릴리스를 통째로 지웠고, Patroni 가 무너져 GitLab.com 전체가 5XX 오류를 냈다.GitLab · 2022

원인 운영 실수

IL-0009 ArgoCD Application 이름이 겹쳐 InfluxDB Cloud 운영 환경 하나가 통째로 삭제됐다InfluxData · 2022

원인 설정 변경

IL-0132 잘못된 리소스 정리 작업이 Vertex AI 예측 엔드포인트를 전역에서 삭제된 것으로 표시해 고객 모델이 내려가고 예측 요청이 4시간 넘게 실패했다.Google Cloud · 2022

원인 소프트웨어 결함

IL-0010 템플릿 중괄호가 빠진 설정 변경으로 ArgoCD 가 전 세계 모든 클러스터의 서비스를 지웠다Skyscanner · 2021

원인 설정 변경

IL-0086 테스트 Kubernetes 클러스터용 배포가 운영 클러스터의 Traefik 과 Calico 리소스까지 지워 CircleCI UI 와 runner.circleci.com 이 1시간 54분 동안 내려갔다.CircleCI · 2021

원인 배포 결함

IL-0089 테스트 클러스터 삭제 스크립트가 운영 클러스터 live-1 을 대상으로 실행돼 인그레스 컨트롤러, 모니터링, 인증서 구성 요소가 지워지고 사용자 서비스에 접속할 수 없게 됐다.UK Ministry of Justice · 2020

원인 운영 실수

IL-0061 Terraform 상태 파일이 리뷰 빌드에서 바뀐 데다 권한 차이까지 겹쳐 Terraform 이 운영 GKE 클러스터 세 개 중 두 개를 삭제했다Spotify · 2019

원인 설정 변경