Incident Library
적용된 필터 도메인쿠버네티스조직UK Ministry of Justice모두 풀기검색어 없이 필터만 적용한 목록입니다. 최근 사례부터입니다.
추천 필터 검색하면 검색어에서 찾은 분류 값이 여기에 나옵니다.

그래프

  • 원인
  • 구성 요소
  • 증상
  • 기여 요인
  • 사례

사례17건

17건 중 17~17번째

  1. IL-0093 리더 ingress 컨트롤러 파드가 공유 메모리를 다 써서 ingress 컨트롤러 파드 6개 중 4개가 크래시 루프에 빠졌다
    UK Ministry of Justice2020
    증상

    2020-08-14 10:43 에 클러스터의 ingress 컨트롤러 파드 복제본 6개 중 2개가 크래시 루프에 빠진 것이 감지되었다.

    컨테이너 재시작 반복
    원인
    용량 한계
    구성 요소
    인그레스 컨트롤러
    기여 요인
    수동 조치 악화단일 장애점
    감지

    2020-08-14 10:43 에 ingress 컨트롤러 파드 6개 중 2개가 크래시 루프에 빠진 것이 감지되었다.

    조치
    • 리더 ingress 컨트롤러 파드를 재시작했다. 그러자 다른 파드들이 리더에 연결해 최신 nginx.config 파일을 받았다.
    사례 보기
내 클러스터에도 있는지 확인하기

이 17건에서 가장 많이 나오는 구성 요소: 인그레스 컨트롤러, 노드 풀. kubegap 은 Claude Code 나 Codex 에서 쿠버네티스 클러스터를 읽기만 하며 이런 틈을 점검합니다. 점검 항목의 근거는 이 라이브러리와 같은 공개 보고서입니다.

kubegap 열기

원인별7

업그레이드로 깨진 호환성2건

구성 요소
인그레스 컨트롤러2건어드미션 웹훅1건웹 애플리케이션 방화벽 규칙1건
기여 요인
스테이징 불일치2건
조직
UK Ministry of Justice2건
  1. IL-0092 ingress-nginx 를 1.12.0 에서 1.14.3 으로 올리자 새 ModSecurity 와 OWASP Core Rule Set 이 정상 요청을 오탐으로 막아 HMPPS 사용자가 인증하지 못했다.
    UK Ministry of Justice2026
  2. IL-0090 ModSec 인그레스 컨트롤러 모듈을 v3.33.0 으로 올린 뒤 검증 웹훅 호출이 x509 인증서 오류로 실패해, 모든 인그레스 생성과 변경이 막히고 사용자 애플리케이션 배포가 멈췄다.
    UK Ministry of Justice2021

배포 결함2건

구성 요소
어드미션 웹훅1건클러스터 오토스케일러1건디스케줄러1건인그레스 컨트롤러1건노드 풀1건
기여 요인
기본 설정 방치1건한계 경보 부재1건여유 용량 부재1건단일 장애점1건
조직
UK Ministry of Justice2건
  1. IL-0020 EKS 1.30 업그레이드 중 디스케줄러가 cordon 된 노드의 파드를 한꺼번에 쫓아내 운영 서비스가 멈췄다
    UK Ministry of Justice2025
  2. IL-0088 팀별 ingress 컨트롤러 모듈 0.1.0 이 만든 검증 웹훅이 live-1 클러스터에서 새 Ingress 생성을 모두 x509 오류로 막았다
    UK Ministry of Justice2020

운영 실수3건

구성 요소
CI 시스템2건클라우드 로드 밸런서1건파드용 자격 증명 중개자1건external-dns1건인그레스 컨트롤러1건노드 런치 템플릿1건노드 풀1건Prometheus1건컨테이너 레지스트리와 자격 증명1건Terraform1건VPC 라우팅 테이블과 방화벽 규칙1건
기여 요인
파괴적 변경 보호 장치 부재2건설정 내 자격 증명1건공용 자격 증명1건
조직
UK Ministry of Justice3건
  1. IL-0244 EKS 서브넷의 라우팅 테이블 연결이 사라져 live 클러스터의 Cloud Platform 서비스에 접근할 수 없었다
    UK Ministry of Justice2024
  2. IL-0018 DockerHub 비밀번호를 바꾼 뒤 Concourse 와 EKS 클러스터 노드가 Docker Hub 에서 이미지를 받지 못했다
    UK Ministry of Justice2023
  3. IL-0089 테스트 클러스터 삭제 스크립트가 운영 클러스터 live-1 을 대상으로 실행돼 인그레스 컨트롤러, 모니터링, 인증서 구성 요소가 지워지고 사용자 서비스에 접속할 수 없게 됐다.
    UK Ministry of Justice2020

용량 한계5건

구성 요소
Prometheus2건텔레메트리 에이전트2건Elasticsearch 와 OpenSearch1건인그레스 컨트롤러1건컨테이너 메모리 한도1건노드 풀1건
기여 요인
한계 경보 부재3건기본 설정 방치1건한계 미인지1건수동 조치 악화1건모니터링 사각지대1건단일 장애점1건
조직
UK Ministry of Justice5건
  1. IL-0042 OpenSearch 디스크가 가득 찬 동안 fluent-bit 가 로그를 처리하지 못해 Elasticsearch 와 OpenSearch 에 애플리케이션 로그가 들어오지 않았다.
    UK Ministry of Justice2024
  2. IL-0046 계획된 재시작 뒤 Prometheus 가 WAL 을 다 읽기 전에 startupProbe 에 걸려 재시작을 반복했고 지표가 빠졌다
    UK Ministry of Justice2024
  3. IL-0043 새 버전 fluent-bit에서 청크를 버리는 방식이 바뀌어 Kibana의 애플리케이션 로그에 긴 공백이 생겼다
    UK Ministry of Justice2023
  4. IL-0016 네임스페이스와 규칙이 늘어 live 클러스터의 Prometheus 가 메모리 부족으로 OOMKilled 되며 플랫폼 모니터링이 끊겼다
    UK Ministry of Justice2023
  5. IL-0093 리더 ingress 컨트롤러 파드가 공유 메모리를 다 써서 ingress 컨트롤러 파드 6개 중 4개가 크래시 루프에 빠졌다
    UK Ministry of Justice2020

unknown1건

구성 요소
Prometheus
기여 요인
–
조직
UK Ministry of Justice
  1. IL-0045 live 클러스터의 Prometheus 가 readiness probe 실패로 여러 번 재시작해 Cloud Platform 모니터링이 끊기고 메트릭이 빠졌다
    UK Ministry of Justice2023

설정 변경3건

구성 요소
노드 풀3건AWS VPC CNI2건CoreDNS1건노드 런치 템플릿1건노드 루트 디스크1건Terraform1건
기여 요인
설정 테스트 부재2건과도한 영향 범위1건한계 경보 부재1건런북 부재1건리뷰 누락1건
조직
UK Ministry of Justice3건
  1. IL-0019 EKS 모듈 18 업그레이드로 새 노드의 디스크가 20Gb 로 줄어 이미지 풀이 no space left on device 로 실패했다
    UK Ministry of Justice2023
  2. IL-0017 live 클러스터 노드 6대에서 VPC CNI 가 IP 주소를 할당하지 못해 새 파드가 ContainerCreating 에 멈췄다
    UK Ministry of Justice2023
  3. IL-0091 Terraform 으로 노드 인스턴스 타입을 바꾸자 노드가 한꺼번에 교체되어 사용자 운영 파드가 모두 지워지고 서비스가 내려갔다
    UK Ministry of Justice2023

클라우드 제공자 장애1건

구성 요소
클라우드 로드 밸런서인그레스 컨트롤러
기여 요인
–
조직
UK Ministry of Justice
  1. IL-0364 'default' 인그레스 컨트롤러로 들어오는 트래픽의 25% 가 느려졌다
    UK Ministry of Justice2022