Incident Library

조직

Amazon

Amazon · amazon

1건 · 2026년

원인 하드웨어 고장

구성 요소 NCCL NIC·케이블·스위치 포트 링크

기여 요인 모니터링 사각지대

증상 처리량 저하

사례

IL-0478 GPU 한 개의 네트워크 어댑터가 고장 났는데 NCCL이 알림 없이 통신을 우회시켜 MoE 학습 스텝이 느려졌다Amazon · 2026
원인 하드웨어 고장