Incident Library

조직

Lotte E-commerce

Lotte E-commerce · lotte-e-commerce

1건 · 2022년

원인 DNS·네트워크 장애
구성 요소 클라우드 로드 밸런서conntrack 테이블수평 파드 오토스케일러인그레스 컨트롤러kube-proxy파드 종료 처리
기여 요인 기본 설정 방치
증상 오류율 상승간헐적 타임아웃오래된 엔드포인트 라우팅

사례

  1. IL-0178 EKS 에서 HPA 가 파드를 줄일 때 엔드포인트 제거보다 컨테이너 종료가 먼저 끝나 502 가 났고, 블루/그린 전환 뒤에는 conntrack 에 남은 연결이 삭제된 파드로 가서 클라이언트가 타임아웃을 받았다.Lotte E-commerce · 2022

    원인 DNS·네트워크 장애