사례1건

1건 중 1~1번째

1. IL-0375 MongoDB Atlas 컨트롤 플레인이 느려져 모든 상용 리전에서 클러스터 변경과 알림이 몇 시간씩 늦었다

   MongoDB2024

   증상

   MongoDB Atlas 의 모든 상용 리전에서 클러스터 설정 변경이 몇 분에서 몇 시간까지 늦게 실행됐다. 상태 페이지는 2024년 6월 3일 18:45 UTC 에 모든 클라우드 제공자에서 모든 클러스터 업데이트가 늦어지는 문제를 조사한다고 알렸다.

   컨트롤 플레인 지연모니터링 중단데이터베이스 과부하

   촉발

   Atlas 컨트롤 플레인을 받치는 내부 워크플로 관리 시스템의 메타데이터를 옮기는 계획된 마이그레이션에서 트래픽을 대상 데이터베이스 클러스터로 돌렸다.

   원인

   용량 한계

   구성 요소

   데이터베이스

   기여 요인

   스테이징 불일치롤백 무효

   조치

   • 마이그레이션을 롤백하면서 원본과 대상 데이터베이스의 데이터를 맞추는 복잡한 조정 작업을 했다.
   • 6월 4일 00:09 UTC 에 복구 절차를 마치고 상태를 가까이 지켜봤다.

   후속 조치

   • 앞으로의 유지보수에 쓸 새 메타데이터 마이그레이션 전략을 설계한다. 이 절차는 문제 가능성을 알아챈 뒤 15분 안에 롤백할 수 있게 한다.
   • 이 절차를 구현하고 충분히 시험하기 전에는 비슷한 유지보수를 하지 않는다.

   사례 보기

원인별1