Incident Library

조직

Civis Analytics

Civis Analytics · civis-analytics

1건 · 2019년

원인 용량 한계
구성 요소 etcd쿠버네티스 API 서버텔레메트리 에이전트
기여 요인 미검증 가정한계 미인지모니터링 사각지대용량 계획 부재
증상 컨트롤 플레인 지연컨트롤 플레인 무응답DNS 조회 실패오류율 상승지연 시간 증가

사례

  1. IL-0075 클러스터가 EC2 인스턴스 약 290대로 커지자 노드마다 도는 Datadog 에이전트가 쿠버네티스 API 를 폴링하면서 API 서버가 CPU 와 메모리를 다 써 쿠버네티스 컨트롤 플레인을 쓸 수 없게 됐다.Civis Analytics · 2019

    원인 용량 한계