Incident Library

API · MCP English

API 와 MCP kubegap 정정과 제안

Incident Library

API · MCP English

증상

간헐적 연결 실패

Intermittent connection failures · intermittent-connection-failures

15건 · 2018년부터 2026년

원인 소프트웨어 결함6건 용량 한계4건 DNS·네트워크 장애2건 클라우드 제공자 장애1건 설정 변경1건 배포 결함1건

구성 요소 kubelet4건 애플리케이션 데이터베이스3건 HAProxy3건 인그레스 컨트롤러3건 리눅스 커널

기여 요인 미검증 가정6건 자동화 증폭5건 기본 설정 방치3건 모니터링 사각지대3건

조직 Amazon Web Services1건 Backpackr1건 DFDS1건 DigitalOcean1건 LINE+

사례

IL-0136 Sweden Central 리전에서 내부 서비스 배포가 캐시를 비워 메타데이터 백엔드에 평소 20배의 트래픽이 몰렸고, 데이터베이스 연결에 기대는 헬스 체크가 인스턴스를 계속 재시작시켜 Azure OpenAI 요청이 6시간 가까이 실패했다Microsoft Azure · 2026
원인 배포 결함
IL-0150 DynamoDB DNS 자동화의 경쟁 조건이 us-east-1 리전 엔드포인트의 DNS 레코드를 비워 DynamoDB 와 EC2 인스턴스 시작이 실패했고, 그 여파로 EKS, ECS, Fargate 의 컨테이너 시작과 클러스터 스케일링이 14시간 넘게 막혔다Amazon Web Services · 2025
원인 소프트웨어 결함
IL-0027 CoreDNS 파드가 모두 한 노드에 몰린 채 그 노드의 메모리가 고갈되자 DNS 가 응답하지 못해 아이디어스 서비스 전체가 멈췄다

그래프에서 보기

3건

클라우드 로드 밸런서2건

conntrack 테이블2건

클라이언트 쪽 DNS 리졸버와 캐시2건

쿠버네티스 API 서버2건

파드 스케줄링과 배치2건

AWS VPC CNI2건

인메모리 캐시1건

설정 템플릿1건

컨테이너 CPU 한도1건

DNS 서버와 레코드1건

수평 파드 오토스케일러1건

노드 런치 템플릿1건

컨테이너 메모리 한도1건

노드 운영체제 이미지1건

파드 종료 처리1건

재시도 폭주3건

한계 미인지2건

용량 계획 부재2건

런북 부재2건

장애 중첩2건

단일 장애점2건

과도한 영향 범위1건

피크 시간 변경1건

늦게 드러난 변경1건

초기 신호 무시1건

미패치 알려진 버그1건

수동 조치 악화1건

한계 경보 부재1건

캐시 부재1건

헬스 프로브 부재1건

여유 용량 부재1건

단계적 배포 부재1건

의존성에 묶인 헬스 체크1건

스테이징 불일치1건

1건

loveholidays1건

Microsoft Azure1건

Toyota Connected1건

Backpackr · 2025

원인 용량 한계

IL-0084 베어메탈 업체 vSwitch 의 패킷 드롭으로 Namespace 의 fra3 리전이 빠져 전 세계 용량이 모자랐고, 다음 날에는 컨트롤 플레인 노드의 느린 NVMe 쓰기로 쿠버네티스 API 서버 CPU 가 치솟아 zrh1 이 멈췄다.Namespace · 2024

원인 클라우드 제공자 장애

IL-0154 SFO3 코어 라우터의 라인 카드가 하드웨어 오류로 한꺼번에 재부팅된 뒤 게스트 네트워킹이 돌아오지 않은 DOKS 노드가 비정상으로 남아, 일부 클러스터의 연결과 컨트롤 플레인 접속이 01:40 UTC까지 불안정했다.DigitalOcean · 2024

원인 DNS·네트워크 장애

IL-0182 트래픽이 급변할 때 수가 모자란 CoreDNS 가 과부하로 지연과 간헐적 네트워크 끊김을 일으켰고, 나중에는 과하게 늘린 CoreDNS 파드가 Karpenter 의 노드 통합을 막았다이언철 · 2024

원인 용량 한계

IL-0112 나중에 회수된 EKS 노드 AMI 로 노드를 교체한 뒤 노드가 PLEG is not healthy 를 보고하며 NotReady 를 오갔고 파드 네트워크 타임아웃이 났다DFDS · 2022

원인 소프트웨어 결함

IL-0177 다른 팀의 설정 배포로 공유 L7 HAProxy 가 재로드될 때마다 messaging-hub 의 웹소켓 연결이 한꺼번에 끊겼다.LINE+ · 2022

원인 설정 변경

IL-0056 kops 에서 EKS 로 옮긴 뒤 AWS VPC CNI 의 SNAT 때문에 파드에서 다른 VPC 의 NLB 뒤 서비스로 가는 호출이 간헐적으로 실패했다MindTickle · 2020

원인 DNS·네트워크 장애

IL-0012 CPU limit 과 커널 CFS 쿼터 버그로 파드가 과하게 스로틀링돼 헬스 체크가 실패하고 애플리케이션이 멈췄다Omio · 2020

원인 소프트웨어 결함

IL-0013 노드 RAM 을 절반으로 줄이자 conntrack 테이블이 가득 차 집계 서비스에 연결 리셋과 오류가 늘었다loveholidays · 2020

원인 용량 한계

IL-0062 GKE Ingress 뒤의 파드가 SIGTERM 을 받자마자 새 연결을 받지 않고 정상 종료해서 API 에 가끔 502 오류가 났다Ravelin · 2019

원인 소프트웨어 결함

IL-0011 HAProxy 인그레스 템플릿이 백엔드 파드를 IP 순으로 정렬해 일부 파드에 요청이 몰리고 인그레스 컨테이너가 OOMKilled 됐다Skyscanner · 2019

원인 소프트웨어 결함

IL-0064 CPU 를 많이 쓰는 파드가 Google Cloud 노드 하나에 몰려 노드가 커널 패닉으로 죽었고, 다시 배치된 파드가 다음 노드를 또 죽이며 웹사이트와 API 가 멈췄다.Moonlight · 2019

원인 용량 한계

IL-0050 ndots:5, Alpine 의 musl 리졸버, Netty 4.1.30 의 DNS 처리 문제가 겹쳐 쿠버네티스 서비스가 클러스터 밖 Redis 호스트 이름을 반복해서 해석하지 못했다Toyota Connected · 2018

원인 소프트웨어 결함