Incident Library

조직

Microsoft Azure

Microsoft Azure · microsoft-azure

5건 · 2019년부터 2026년

원인 배포 결함2건클라우드 제공자 장애1건소프트웨어 결함1건업그레이드로 깨진 호환성1건
구성 요소 노드 운영체제 이미지3건애플리케이션 데이터베이스2건AKS 컨트롤 플레인1건Azure CNI1건인메모리 캐시1건클라이언트 쪽 DNS 리졸버와 캐시1건kubelet1건노드 풀1건컨테이너 레지스트리와 자격 증명1건
기여 요인 자동화 증폭2건과도한 영향 범위2건피크 시간 변경1건모니터링 사각지대1건런북 부재1건단계적 배포 부재1건의존성에 묶인 헬스 체크1건재시도 폭주1건단일 장애점1건
증상 오류율 상승2건간헐적 타임아웃2건컨트롤 플레인 무응답1건DNS 조회 실패1건지연 시간 증가1건이미지 풀 실패1건간헐적 연결 실패1건모니터링 중단1건아웃바운드 연결 고갈1건프로브 실패1건서비스 중단1건업그레이드 정체1건

사례

  1. IL-0136 Sweden Central 리전에서 내부 서비스 배포가 캐시를 비워 메타데이터 백엔드에 평소 20배의 트래픽이 몰렸고, 데이터베이스 연결에 기대는 헬스 체크가 인스턴스를 계속 재시작시켜 Azure OpenAI 요청이 6시간 가까이 실패했다Microsoft Azure · 2026

    원인 배포 결함

  2. IL-0145 Australia East 의 전압 강하로 냉각기가 멈춰 데이터 홀 장비가 꺼지면서, 영역 중복이 아닌 AKS 작업 큐 데이터베이스가 내려가 두 리전의 AKS 생성, 수정, 삭제 작업이 막혔다Microsoft Azure · 2023

    원인 클라우드 제공자 장애

  3. IL-0144 Ubuntu 18.04 의 systemd 보안 업데이트가 DNS 설정을 날려 AKS 노드의 kubelet 이 레지스트리 이름을 해석하지 못하고 파드가 ImagePullBackoff 에 빠졌다.Microsoft Azure · 2022

    원인 업그레이드로 깨진 호환성

  4. IL-0146 Central India 에서 새로 만든 Azure CNI 클러스터의 VM 이 높은 값의 MAC 주소를 받으면서 bridge 모드 Azure CNI 의 오래된 버그가 드러나 터널 연결이 끊기고 kubectl exec 와 파드 간 통신이 타임아웃됐다.Microsoft Azure · 2020

    원인 소프트웨어 결함

  5. IL-0149 2019-09-28 07:20 UTC 이전에 만든 VMSS 기반 AKS 클러스터의 업그레이드가 PlatformImageNotFound 오류로 실패했다.Microsoft Azure · 2019

    원인 배포 결함