IL-0564 Linode · 2025-09-14networking
Linode 의 Miami, Milan, Sao Paulo 데이터센터에서 패킷 손실로 서비스 성능이 떨어졌다
2025년 9월 14일 17:42 UTC 부터 18:43 UTC 까지 Linode 의 Miami 데이터센터 US-MIA 와 Milan 데이터센터 IT-MIL 에서 패킷 손실이 났다. 9월 15일 01:44 UTC 부터 04:22 UTC 까지는 Sao Paulo 데이터센터 BR-GRU 에서 패킷 손실이 났고, 대부분의 경우 고객은 성능 저하를 겪었다. 코어 라우터와 엣지 라우터 사이의 prefix 수가 서서히 늘어 허용된 최대 prefix 수라는 안전 한도에 닿았다. 한도에 닿자 데이터센터의 트래픽이 다른 경로로 옮겨 갔고, 그 경로가 혼잡해져 패킷 손실이 났다. Akamai 는 이 상황에 영향을 준 ISP 쪽 문제는 찾지 못했다고 밝혔다. Akamai 는 모든 데이터센터 라우터의 prefix 한도를 올려 문제를 완화했고, 9월 16일 16:28 UTC 에 사고를 해결 상태로 닫았다. 보고서는 조사가 아직 진행 중이라고 밝혔다.
- 심각도
- –
- 영향 범위
- packet loss and performance degradation for services in the US-MIA, IT-MIL and BR-GRU data centers
- 영향 사용자
- –
- 지역
- US-MIA (Miami), IT-MIL (Milan), BR-GRU (Sao Paulo)
- 감지까지
- –
- 복구까지
- 10h 40m
증상
2025년 9월 14일 17:42 UTC 부터 18:43 UTC 까지 Miami 데이터센터 US-MIA 와 Milan 데이터센터 IT-MIL 에서 패킷 손실이 났다. 9월 15일 01:44 UTC 부터 04:22 UTC 까지는 Sao Paulo 데이터센터 BR-GRU 에서 패킷 손실이 났다. 대부분의 경우 고객은 성능 저하를 겪었다.
상태 페이지는 이 데이터센터들에 배포한 모든 서비스에서 패킷 손실이 크게 날 수 있다고 알렸다. 고객이 겪은 영향은 그 시간에 어떤 제품과 서비스에 연결해 있었는지에 따라 달랐다.
9월 14일 20:10 UTC 공지는 Miami 와 Milan 에 더는 영향이 없다고 확인했고, 9월 15일 00:31 UTC 공지까지 재발은 없었다. 그 뒤 03:32 UTC 공지에 Sao Paulo 데이터센터에서 문제가 보인다는 내용이 올라왔다.
증상 패킷 손실
원인
- 촉발
- 코어 라우터와 엣지 라우터 사이의 prefix 수가 서서히 늘어, 허용된 최대 prefix 수라는 안전 한도를 넘었다.
감지
–
조치
- 모든 데이터센터 라우터의 prefix 한도를 올렸다.
후속 조치
- Akamai 백본과 데이터센터 ECOR 라우터 사이 세션의 한도를 올리는 작업을 진행한다.
- 기존 알림을 고쳐 한도에 닿기 전에 심각도를 확인하게 하고, 이 알림을 사내 담당 팀에 바로 넘겨 즉시 조치하게 한다.
교훈
–
출처
- https://status.linode.com/incidents/kbvg7325nc3b · official-status · 보관본
관련 사례
같은 원인 · 공통 BGP 라우팅
같은 원인 · 공통 BGP 라우팅
내 클러스터에도 있는지 확인하기
AI 도구와 스크립트용
- 이 사례의 JSON: https://incidentlib-api.benchlet.com/cases/IL-0564
- 가장 비슷한 사례들: https://incidentlib-api.benchlet.com/cases/IL-0564/similar
- MCP 서버(Streamable HTTP, 키 없음):
https://incidentlib-mcp.benchlet.com/mcp
API 는 키가 필요 없습니다. MCP 서버는 search_incidents, get_incident, list_incidents, get_topic, vocab 도구를 내놓습니다. 사용법은 API 와 MCP.