Incident Library

조직

UC Berkeley

UC Berkeley · uc-berkeley

4건 · 2017년부터 2019년

원인 용량 한계1건클라우드 제공자 장애1건운영 실수1건unknown1건
구성 요소 AKS 컨트롤 플레인1건클라우드 블록 스토리지1건컨테이너 런타임1건데이터베이스1건JupyterHub1건쿠버네티스 API 서버1건kubelet1건컨테이너 메모리 한도1건노드 풀1건영구 볼륨과 스테이트풀셋1건
기여 요인 한계 미인지1건디버그 접근 제한1건수동 조치 악화1건파괴적 변경 보호 장치 부재1건안전하지 않은 실패 동작1건
증상 서비스 중단2건컨트롤 플레인 무응답1건데이터 유실1건오류율 상승1건파드 Pending1건파드 Terminating 정체1건요청 오라우팅1건

사례

  1. IL-0469 Azure 관리형 쿠버네티스의 API 서버가 응답하지 않아 data100 허브 파드가 다시 만들어지지 않았다UC Berkeley · 2019

    원인 클라우드 제공자 장애

  2. IL-0507 Azure 쿠버네티스 노드 두 대에서 Docker 데몬이 멈춰 학생 파드가 시작되거나 종료되지 않았다UC Berkeley · 2017

    원인 unknown

  3. IL-0468 노드당 볼륨 개수 한도에 걸려 새 학생 서버 파드가 Pending 에 머물고 학생들이 500 오류를 받았다UC Berkeley · 2017

    원인 용량 한계

  4. IL-0506 UC Berkeley DataHub 의 JupyterHub sqlite 데이터베이스가 빈 데이터베이스로 덮어써져 로그인이 실패하고 홈 디렉터리가 비어 보이고 다른 사용자로 로그인되는 문제가 났다UC Berkeley · 2017

    원인 운영 실수