Incident Library

조직

NU.nl

NU.nl · nu-nl

1건 · 2019년

원인 설정 변경
구성 요소 kubelet컨테이너 메모리 한도Prometheus
기여 요인 과도한 영향 범위기본 설정 방치모니터링 사각지대한계 경보 부재리소스 요청과 한도 미설정
증상 오류율 상승지연 시간 증가간헐적 타임아웃모니터링 중단노드 NotReadyOOMKilled

사례

  1. IL-0035 ElastAlert 에 새로 넣은 알림 규칙 때문에 ElastAlert 파드가 메모리를 끝없이 써서 노드가 잇달아 NotReady 가 되었고, 같은 클러스터의 도구와 Grafana, Prometheus 가 함께 흔들렸다.NU.nl · 2019

    원인 설정 변경