IL-0425 Linode · 2026-06-23ai-infra
GPU Linode 여러 대가 동시에 부팅하면 모든 리전에서 간헐적으로 부팅에 실패했다
2026년 6월 23일, Linode 는 전 세계에 걸친 소프트웨어 배포 뒤 GPU Linode 에서만 간헐적으로 부팅이 실패하는 문제를 확인했다. 영향은 여러 GPU Linode 가 동시에 부팅하려던 경우로 한정됐다. 장애가 이어지는 동안 고객은 특히 자동 노드 재활용과 스케일링 이벤트 중에 국지적인 중단이나 오류율 상승을 겪었을 수 있었다. 상태 페이지는 모든 리전을 영향 범위로 적었다.
조사해 보니 최근 소프트웨어 업데이트 때문에 여러 GPU 서버가 정확히 같은 순간에 시작하면 서로의 로딩을 막았고, 시스템은 자동으로 재시도하지 않았다. 이 상호작용은 무거운 부하가 동시에 몰릴 때만 일어나서 표준 출시 전 테스트에서 잡히지 않았다.
상태 페이지는 2026-06-24 18:53 UTC 에 조사를 시작했다고 알렸고 20:00 UTC 에 조사가 이어진다고 갱신했다. Linode 는 6월 24일 20:32 UTC 에 운영 중인 모든 GPU 호스트에 핫픽스를 직접 배포해 문제를 바로잡았고, 21:12 UTC 부터 상태를 지켜봤다. 추가 부팅 실패가 보이지 않자 6월 25일 19:29 UTC 에 해결로 닫았고, 6월 26일 18:14 UTC 에 포스트모템을 올렸다. 전면적인 수정은 다음 한 주에 걸쳐 전 세계에 배포할 소프트웨어 릴리스에 넣었다.
- 심각도
- –
- 영향 범위
- GPU Linodes that booted at the same time as other GPU Linodes failed to boot intermittently, causing local disruption or higher error rates, mostly during automated node recycling and scaling events
- 영향 사용자
- –
- 지역
- All regions (the status page lists 43)
- 감지까지
- –
- 복구까지
- –
증상
모든 리전에서 GPU Linode 가 간헐적으로 부팅에 실패했다. 여러 GPU Linode 가 동시에 부팅하려 할 때만 실패했고, 고객에게는 국지적인 중단이나 오류율 상승으로 나타났다.
실패는 특히 자동 노드 재활용과 스케일링 이벤트 중에 드러났다.
상태 페이지는 2026-06-24 18:53 UTC 에 "Emerging Service Issue - GPU Instances - All Regions" 라는 제목으로 GPU 인스턴스의 간헐적인 부팅 실패를 조사한다고 처음 알렸다. 20:00 UTC 갱신에서도 원인을 계속 조사하고 있었다.
원인
- 촉발
- 전 세계에 걸친 소프트웨어 배포가 계기였다. 이 배포에 담긴 최근 소프트웨어 업데이트 때문에 여러 GPU 서버가 정확히 같은 순간에 시작하면 서로 충돌했다.
감지
–
조치
- 2026년 6월 24일 20:32 UTC 에 운영 중인 모든 GPU 호스트에 핫픽스를 직접 배포했고, 그 뒤 영향받은 시스템은 정상으로 돌아왔다.
후속 조치
- 전면적인 수정을 다음 소프트웨어 릴리스에 넣었고, 이 릴리스를 다음 한 주에 걸쳐 전 세계에 배포한다.
- 개발 클라우드에 둘 GPU 전용 테스트 하드웨어를 먼저 들여 테스트 범위를 넓힌다. 업데이트가 프로덕션에 나가기 전에 여러 하드웨어에 동시에 걸리는 부하를 그대로 재현해 시험한다.
교훈
이 충돌은 여러 GPU 서버가 무거운 부하로 동시에 시작할 때만 나타나서 표준 출시 전 테스트로는 잡히지 않았다. Linode 는 여러 하드웨어에 동시에 걸리는 부하를 출시 전에 그대로 재현하려면 개발 클라우드에 GPU 전용 테스트 하드웨어가 있어야 한다고 봤다.
출처
- https://status.linode.com/incidents/1h0hwggm668b · official-status · 보관본
관련 사례
–
내 클러스터에도 있는지 확인하기
AI 도구와 스크립트용
- 이 사례의 JSON: https://incidentlib-api.benchlet.com/cases/IL-0425
- 가장 비슷한 사례들: https://incidentlib-api.benchlet.com/cases/IL-0425/similar
- MCP 서버(Streamable HTTP, 키 없음):
https://incidentlib-mcp.benchlet.com/mcp
API 는 키가 필요 없습니다. MCP 서버는 search_incidents, get_incident, list_incidents, get_topic, vocab 도구를 내놓습니다. 사용법은 API 와 MCP.